Elaboração de instrumentos, evidências de validade, precisão, padronização e normas
PROCEDIMENTOS TEÓRICOS
1. Sistema psicológico:
 A psicometria enfoca como seu objeto específico
as estruturas latentes, os traços psíquicos ou
processos mentais que constituem no seu objeto
ou sistema de interesse.
 Sistema pode ser entendido como o objeto
imediato de interesse dentro de um delineamento
de estudo e não uma entidade ontológica
monolítica e unívoca.
 Esse passo consiste: o pesquisador deve ter uma
ideia do que ele quer trabalhar, ou seja, em qual
tema ele está interessado em construir um
instrumento de medida e de pesquisa.
2. Propriedade:
 Esse passo consiste: passar de um objeto
psicológico amplo para os aspectos específicos
dele, ou seja, delimitar e definir quais as
propriedades serão objetos de estudo.
 A propriedade é um componente do sistema que
expressa magnitude.
 Diz respeito também a especificar quais aspectos
do sistema se deseja estudar, etc.
3. Dimensionalidade:
 Esse passo consiste: verificar a dimensionalidade
do atributo, ou seja, verificar se ele é unidirecional
ou multidirecional, buscando diferenciá-lo de
outros caso seja multidirecional.
 Diz respeito à estrutura interna do sistema, sua
estrutura semântica.
4. Definições:
 Esse passo consiste: conceituar de forma clara e
detalhada o construto. Definir de forma
constitutiva e operacional esse construto.
 Constitutiva:
 Um construto definido por meio de outros
construtos.
 Definição abstrata
 Situa o construto dentro da teoria, dando as
balizas e limites que ele possui.
 Operacional:
 Parte do abstrato para o concreto
 Aqui se fundamenta a validade do teste e a sua
legitimidade empírica
 Uma definição é operacional se você puder dizer
ao sujeito “vá e faça”...
 Não avaliamos diretamente o traço latente, mas
sim a representação comportamental desse traço
por meio de respostas ao item que representam o
construto
 Os atributos devem ser operacionalizados em
termos de comportamentos observáveis, por isso
eu preciso definir os comportamentos que devem
ocorrer (dizer ao sujeito o que deve fazer)
5. Operacionalização:
 Diz respeito a tarefas que os sujeitos terão que
executar para que possa avaliar a magnitude de
presença do construto.
 Fonte dos itens: literatura, entrevista e categorias
comportamentais.
 Seja qual for os itens, eles devem ser elaborados e
selecionados em função das definições
operacionais do construto.
6. Análise teórica dos itens:
 Análise semântica (compreensão):
 Verifica se os itens são compreensíveis para a
população alvo.
 Verificar o quanto os itens são claros ou não com
uma amostra pequena do publico alvo, entender a
compreensão deles.
 Análise de juízes (pertinência):
 Comprovar se a definição e a representação do
construto estão adequadas
 Verificar até que ponto o conteúdo desse item é
legitimo pra representar o construto que eu quero
avaliar
 É uma das primeiras evidencias de validade que se
tenta demonstrar
Evidencia de validade baseada no conteúdo
Análise de juízes
Validade teórica
PROCEDIMENTOS EXPERIMENTAIS respeito a uniformização dos instrumentos para aplicação
do teste.
7. Planejamento da aplicação:

 Amostra:
 A população do instrumento deve ser clara e
delimitada.
 Características específicas da amostra: faixa
etária, nível socioeconômico, escolaridade, etc.
 É preciso dizer qual é o tipo de indivíduo em
termos de características biossociodemográficas.
 Variabilidade de características da amostra.
 Instruções:
 Referem-se aos contornos da tarefa do sujeito
que vai responder ao instrumento.
 Possui a função de tornar a tarefa do respondente
inambígua.
 Deve deixar claro o que o sujeito tem que fazer
para responder corretamente o teste e, por isso,
ela deve ser avaliadas na análise semântica (saber
se o teste foi bem compreendido).
 Formato:
 Deve-se decidir como a resposta do sujeito será
dada para cada item.
 Testes de aptidão: Resposta certa ou errada
 Testes de personalidade: Escalas de preferência,
atitudes, sentimentos e intensidades.
 Essas escalas de preferência podem ser
exemplificadas pelas escalas do tipo Likert e
podem ser representadas por escalas verbais,
numéricas ou gráficas.
 Sistemática tarefa:
 Definição das condições de aplicação, se ela será
coletiva ou individual, se será preciso avisos
prévios, etc.
 Tentar entender as dificuldades que irá se
encontrar ao aplicar o teste na amostra desejada.
 Elaboração de uma estratégia de convencimento
e uma estratégia operacional.

8. Aplicação e coleta:
 Aplicação seguindo todas as precauções exigidas
 Os sujeitos devem ser postos em um ambiente
condizente e livre de distrações e de tensão.
 O aplicador deve ser competente.
 Aqui temos uma noção mínima de como as
pessoas estão entendendo.
 É importante salientar que os aspectos citados nos índices 7
e 8 possuem relação com a PADRONIZAÇÃO, que diz
PROCEDIMENTOS ANÁLITICOS
9. Análise fatorial:
 Verificar se todos os itens do instrumento estão
medindo o mesmo construto.
 Verificar quantos fatores (dimensões) o
instrumento está de fato medindo.
 Os itens que avaliam a mesma dimensão devem
se agrupar em único fator e se eles se agruparem
segundo a expectativa teórica do pesquisador,
posso então dizer que há ali uma evidência de
validade baseada na estrutura interna.
 Essa parte consiste em verificar/comprovar
empiricamente a partir das respostas das pessoas
se esses itens de fato se agrupam conforme a
expectativa teórica.
 Ex: Melão, banana e uva devem se agrupar no
fator fruta, enquanto que feijão, milho e arroz
devem se agrupar no fator cereais, pois cada
grupo/fator representam dimensões diferentes,
embora façam parte do mesmo grupo de
alimentos.
Melão
Banana Frutas
Uva
Feijão Alimentos
Milho
Cereais
Arroz
 Os resultados estatísticos devem ser coerentes
com as expectativas teóricas
 Usamos carga fatorial acima de 0,30 para medir o
quanto aquele item representa de fato o
construto latente proposto teoricamente
 Carga fatorial: covariância/ correlação/
parentesco entre o fator e o item
 Quanto maior correlação, maior será o item, pois
este se constitui como excelente representante
comportamental do fator.
 Essas cargas podem ser tanto positivas + ou
negativas –
 Positivo: pólo positivo do fator (ex: gosto disso)
 Negativo: pólo negativo do fator (ex: desgosto
disso)
Evidencia de validade baseada na estrutura interna
Análise fatorial
Validade empírica
10. Análise empírica
 Os itens que se mostraram representantes
satisfatórios do traço latente devem ser
submetidos a análises individuais ulteriores com o
objetivo de verificar outras características que
eles devem apresentar dentro de um mesmo
construto.
 Na TRI de avalia como parâmetros a dificuldade, a
discriminação e a resposta aleatória.
 Dificuldade: um item é mais difícil quanto maior
for o tamanho do teta (0) que o sujeito deve
possuir para poder acertar (aptidão) ou aceitar
(personalidade) o mesmo item.
 Discriminação: é a capacidade de diferenciar
sujeitos com escores altos no teste de sujeitos
com escores baixos. Existe 2 formas de calcular o
índice de discriminação:
1) Grupos-critérios: pode ser interno ou externo
2) Correlação do item com o total dos itens
11. Precisão da escala
 A fidedignidade ou precisão da escala diz respeito
a capacidade de medir a quantidade de erro na
minha medida.
 Depende do tamanho de variância do erro.
 A definição estatística de fidedignidade é feita
mediante a correlação entre escores de duas
situações produzidas pelo mesmo teste.
 Quanto mais próximo de 1, menos erro o teste
comete ao ser utilizado, portanto, mais preciso e
fidedigno ele é.
 Para Pasquali (2005) os melhores índices situam-
se acima de 0,80.
 Formas estatísticas na determinação do
coeficiente de precisão:
1. Teste-reteste:
 Calcula-se a correlação entre a distribuição dos
escores em um mesmo teste pelos mesmos
sujeitos, porém em duas ocasiões diferentes.
 Mesmo teste/mesmo sujeito/ ocasiões diferentes
2. Formas paralelas:
 Os sujeitos respondem a duas formas paralelas do
mesmo teste ou dois testes paralelos e a
correlação entre as duas distribuições de escores
constitui o coeficiente de precisão.
 Testes “diferentes”/ mesmo sujeito/ ocasiões
iguais
3. Consistência interna:
 É verificada por meio de técnicas estatísticas que
visam verificar a homogeneidade da amostra de
itens do teste.
 Duas metades:
 Fórmula de Spearman Brown
 Mede-se em uma única ocasião
 O teste é dividido em duas partes e a correlação é
calculada a partir dos escores obtidos nas duas
metades do teste
 Técnica de Kuder-Richardson:
 Se baseia na análise de cada item individual do
teste
 Coeficiente de alfa de Cronbach:
 Verifica a congruência que cada item do teste tem
com o restante dos itens do mesmo teste.
 Serve de indicador da consistência interna do
próprio teste.