Você está na página 1de 9

Psicologia: Teoria e Pesquisa

2007, Vol. 23 n. especial, pp. 099-107

Validade dos Testes Psicolgicos: Ser Possvel Reencontrar o Caminho?


Luiz Pasquali1
Universidade de Braslia

RESUMO Desde o trabalho de Cronbach e Meehl dos meados do sculo passado, o conceito de validade dos testes em
Psicologia e Educao vem perdendo o seu sentido original. Embora os autores quisessem precisamente salvar esse conceito,
a introduo do modelo da rede nomolgica, concebida dentro da viso do positivismo lgico veio, na verdade, destruir o
conceito de validade, originalmente concebido por Kelly na dcada de 1920 e, depois, por Cattell. O conceito de validade,
nalmente, foi totalmente descaracterizado com a denio do mesmo dada pelo grande psicometrista Samuel Messick,
em 1989. Parece fundamental que esse conceito seja redescoberto para salvar as bases da Psicometria. A exposio procura
mostrar as confuses que o modelo da rede nomolgica introduziu em Psicometria e tentar recuperar o verdadeiro signicado
de validade no contexto das medidas em cincias psicossociais, em particular, em Psicologia e Educao.

Palavras-chave: validade; rede nomolgica; psicometria.

The Validity of the Psychological Tests: Is It Possible to Find the Way Again?

ABSTRACT Since the work of Cronbach and Meehl of mid last century, the concept of validity of the tests in Psychology
and Education has been loosing its original meaning. Despite the intention of the authors to precisely save this concept, the
introduction of the model of the nomological network, conceived within the framework of the logical positivism, was in fact
decisive to destroy the concept of validity as originally conceived by Kelly in the 1920s and later on by Cattell. The concept of
validity was nally completely mischaracterized with the denition given by the great psychometrist Samuel Messick in 1989.
It seems to be fundamental that this concept is rediscovered in order to save the bases of Psychometry. The present article will
try to show the confusion that the nomological network model brought to Psychometry and also to try to recuperate the real
meaning of validity within the context of the measures in psychosocial sciences, especially in Psychology and Education.

Key words: validity; nomological network; psychometry.

A Confuso do Conceito Validade considerado o modo moderno de entender validade, in-


clusive assumido pela American Psychological Association
A verdade surge mais facilmente (APA, 1985), tornou o tema um verdadeiro zoolgico. Na
do erro do que da confuso verdade, voc vai encontrar na literatura tradicional e atual
(Francis Bacon, 1869) sobre o tema, especialmente a norte-americana, um elenco
sem m de expresses ou tipos de validades que um teste
Ouve-se com mais freqncia ultimamente que um pode ter. Vejamos alguns deles:
dado teste psicolgico que pode ser vlido numa situao 1) Validade de construto (construct validity): o teste
no o em outra. Ou, ainda, que tal teste tem tal validade mede um atributo ou qualidade que no operacionalmente
e um outro, uma outra. Inclusive, que existem nveis dife- denido; (Cronbach & Meehl, 1955).
rentes de magnitude de validade de um teste. Este modo 2) Validade de contedo (content validity): o teste cons-
de falar sobre a validade dos testes psicolgicos , pelo titui uma amostra representativa de um universo de contedo
menos, confuso. (Cronbach & Meehl, 1955; Haynes, Richard, & Kubany,
Para tornar essa situao mais maluca, veio o grande 1995), alm de ser relevante (Messick, 1989).
psicometrista Samuel Messick (1989, p. 13) dizendo o 3) Validade de critrio (criterion-oriented validity): o teste
seguinte: Validity is an integrated evaluative judgment prediz um critrio externo (Cronbach & Meehl, 1955).
of the degree to which empirical evidence and theoretical 4) Validade preditiva (predictive validity): variedade
rationales support the adequacy and appropriateness of in- da validade de critrio, em que este medido tempora-
ferences and actions based on test scores or other modes of riamente depois de obtidos os dados do teste (Cronbach
assessment (validade um julgamento avaliativo integrado & Meehl, 1955).
do grau em que evidncia emprica e racionalizaes teri- 5) Validade concorrente (concorrent validity): variedade
cas apiam a adequao e propriedade de inferncias e aes da validade de critrio, em que este medido simultaneamen-
baseadas em escores de teste ou outros modos de avaliao). te coleta dos dados do teste (Cronbach & Meehl, 1955).
Este modo de entender e denir a validade dos testes, que 6) Validade aparente (face validity): consiste em se ter
1 Endereo: LabPAM, Instituto de Psicologia, Universidade de Braslia,
peritos revendo os contedos de um teste para ver se eles
Campus Universitrio Darcy Ribeiro, ICC sul, Bloco A, Braslia, DF, so apropriados em sua cara (Mosier, 1947, 1951).
Brasil 70910-900. E-mail: labpam@unb.br

99
L. Pasquali

7) Validade generalizvel (validity generalization): a tes probabilidades em expressar dado comportamento so


informao dos escores do teste deve ser generalizvel sobre comparadas.
populaes e tempo (Mosier, 1947, 1951; Messick, 1989). 27) Validade mltipla (multiple validity): um teste tem
8) Validade discriminante (discriminant validity): um validade mltipla quando estiver atrelado a uma amostra
teste tem validade discriminante se mostrar correlao nula vasta de critrios.
com um teste que mede um trao independente de persona- 28) Validade ecolgica (ecologial validity): o quanto um
lidade (Campbell & Fiske, 1959). instrumento psicolgico mede fatores espaciais, temporais e
9) Validade convergente (convergent validity): um teste situacionais do campo de aplicao.
tem validade convergente se mostrar correlao alta com um 29) Validade sinttica (synthetic validity): validade de
teste que mede um trao de personalidade teoricamente rela- teste complexo ou de uma bateria de testes baseada no fato
cionado ao que o teste mede (Campbell & Fiske, 1959); de que vrios fatores foram representados num nico escore
10) Validade incremental (incremental validity): a questo composto.
de se uma medida particular aporta poder explicativo sobre 30) Validade condicional (conditional validity): a validade
e alm de outra media para predizer um critrio relevante do teste depende do uso que dele se faz.
(Bryant, 2000). 31) Validade incondicional (unconditional validity): a
11) Validade fatorial (factorial validity): um tipo de validade do teste depende do construto sendo medido e no
validade de construto em que testes so submetidos do uso que dele se faz.
anlise fatorial para vericar se possuem varincia comum 32) ?
(caso em que se diz que esto cobrindo o mesmo construto) Voc est convidado a acrescentar outros tipos de valida-
(Guilford, 1946). de, se quiser utilizar sua criatividade ou sobrar espao! Quer
12) Validade lgica (logical validity): um teste julgado dizer: parece que perdemos o rumo! Isso, porque se reduziu
vlido por peritos (Cronbach, 1949). a validade de um instrumento de medida a um julgamento
13) Validade emprica (empirical validity): Cronbach (1949). sobre as condies de obteno de uma dada medida (o escore
14) Validade conseqencial (consequential validity): os no teste), a utilidade e os usos que se fazem ou se podem
aspectos sociais dos escores dos testes devem ser levados em fazer da mesma. Ela j no mais um parmetro objetivo
conta (Messick, 1989). de instrumento. Assim, validade signica tudo o que diz
15) Validade intrnseca (Intrinsic validity): Gulliksen (1950). respeito aos testes psicolgicos e, conseqentemente, no
16) Validade substantiva (Substantive validity): validade explica mais nada.
baseada em bases racionais ou tericas (Messick, 1989). Tomar a expresso validade como um guarda-chuva
17) Validade estrutural (structural validity): as respostas para tudo que diz respeito aos testes psicolgicos torna esse
devem ser internamente consistentes sobre diferentes partes conceito, pelo menos, confuso, dizem Borsboom, van He-
do teste (Messick, 1989). erden e Mellenbergh (2003). Esses autores insistem em que
18) Validade externa (external validity): os escores do essa extenso do conceito validade nos desenvolvimentos
teste devem se correlacionar com outras medidas ou variveis tericos recentes no ajudou na claricao da semntica da
de fundo (Messick, 1989) ou a medida pode ser generaliza- validade. De fato, essa mistura no conceito encerra diferentes
da atravs de vrias situaes (Emory, 1985; Lnnqvist & problemas, ou seja,
Hannula, s/d ). - Questo ontolgica: O que signica para um teste dizer
19) Validade interna (internal validity): so as validades que vlido? Isso signica perguntar: O que faz a proposio
de critrio, de contedo e de construto (Emory, 1985; Lnn- Escores no teste X medem o atributo Y verdadeira?
qvist & Hannula, s/d ). - Questo epistemolgica: Como podemos saber se um
20) Validade de hiptese (hypothesis validity): uma medi- teste vlido?
da tem validade de hiptese se, em relao a outras variveis, - Questo metodolgica: Como podemos investigar se
ela se comporta como dela se espera (Weber, 1990). um teste vlido?
21) Validade indireta (indirect validity): o mesmo que - Questo tica: Quando e como deveramos utilizar os
validade de hiptese (Janis, 1965). escores de um teste?
22) Validade posditiva (posdictive validity): o oposto de Infelizmente, a primeira questo, que aparece como a
validade preditiva (Haynes & cols., 1995). mais fundamental na discusso do que seja validade dos
23) Validade curricular (curricular validity): constitui testes psicolgicos, a que praticamente no tem recebido
uma extenso da validade de contedo e consiste em vericar ateno na literatura sobre o assunto. Parece, ento, que a
o aumento da aprendizagem (se se descobre que h aumento inteno de Messick de integrar os diferentes aspectos de
de aprendizagem em dois testes com validade de contedo, validade dos testes psicolgicos, de fato introduziu confuso,
ento se verica validade curricular). misturando alhos e bugalhos.
24) Validade diferencial (differential validity): validade Borsboom, Mellenbergh e van Heerden (2004, p. 1) co-
de uma bateria de testes avaliada pela capacidade de predizer locam muito bem esse problema ao armarem:
diferenas no desempenho em dois ou mais critrios.
25) Validade cruzada (cross validity): conrmar a vali- O conceito de validade com o qual os tericos esto inter-
dade dos resultados a partir de um novo exame com estudo essados parece estranhamente divorciado do conceito que
emprico feito com uma segunda amostra independente. pesquisadores tm em mente quando colocam a questo da
26) Validade de grupos mistos (mixed-group validity): validade. Isso se deve a que, no sculo passado, a questo da
duas amostras com formatos diferentes no trao ou diferen- validade evoluiu da questo de se a gente mede o que se pre-

100 Psic.: Teor. e Pesq., Braslia, 2007, Vol. 23 n. especial, pp. 099-107
Validade dos Testes Psicolgicos

ligam mesma varivel construto. Nossa conana nessa


tende medir (Cattell, 1946; Kelly, 1927) para a questo de se identicao depende do montante de suporte indutivo que
relaes empricas entre escores de um teste se emparelham com possumos para as regies envolvidas da rede. No neces-
relaes tericas numa rede nomolgica (Cronbach & Meehl, srio que se faa uma comparao observacional direta das
1955) e, nalmente, para a questo de se interpretaes e aes duas operaes camos contentes com uma prova intra-rede
baseadas em escores de testes so justicadas no somente indicando que as duas operaes produzem estimativas da
luz de evidncia cientca, mas com respeito a conseqncias mesma quantidade denida pela rede. Assim, os fsicos cam
sociais e ticas do seu uso (Messick, 1989). satisfeitos ao falar da temperatura do sol e da temperatura
de um gs numa temperatura ambiente de quarto, mesmo que
A rede nomolgica as operaes de testagem sejam no-sobrepostas, isso porque
tal identicao faz sentido terico.
Para melhor enquadrar a problemtica dos testes psi- Esses princpios fundamentais podem, mnima e es-
colgicos, vamos vericar o que exatamente signica esta quematicamente, ser representados na seguinte estrutura
histria da rede nomolgica, inventada por Cronbach e Meehl (Figura 1):
(1955), e que domina hoje o campo da validade dos testes
psicolgicos. Esses autores tambm introduziram o conceito
de validade de construto no contexto dos testes psicolgicos.
Inclusive, eles armaram que esse tipo de validade exige um
novo enfoque cientco. De fato, dizem eles, que a compre- Construto Construto
enso do que seja tal conceito est ligada ao que chamaram A B
de rede nomolgica (nomological network). Para introduzir
essa problemtica, os autores estabeleceram seis princpios
fundamentais, quais sejam:
1) Falando cienticamente, para tornar claro o que algo
seja signica estabelecer as leis em que ele ocorre. Cha-
maremos a esse sistema interlaceado de leis que constitui a Observvel Observvel
teoria, de rede nomolgica. a b
2) As leis numa rede nomolgica podem relacionar a)
propriedades ou quantidades observveis entre elas mesmas;
ou b) construtos tericos a observveis; ou c) diferentes
construtos tericos entre eles mesmos. Essas leis podem Figura 1. Rede nomolgica.
ser estatsticas ou determinsticas.
3) Uma condio necessria para se admitir cientica- A rede nomolgica relaciona construtos com construtos
mente um construto consiste em que ele deve ocorrer numa (A e B), observveis com observveis (a e b), construtos
rede nomolgica, onde, pelo menos, algumas de suas leis com observveis (A e a; B e b). Essas relaes podem ser
envolvem observveis. Construtos admissveis podem estar de covarincia (estatsticas: ligaes em curvas) ou de cau-
bem longe da observao, i., uma derivao longa pode salidade (determinsticas: ligaes em setas). Ademais, um
intervir entre os nomolgicos que denem implicitamente construto admissvel unicamente se ele pode ser inserido
o construto, e os (derivados) nomolgicos de tipo a. Estas numa rede nomolgica e ele se torna recomendado se for til
ltimas proposies permitem predies sobre eventos. para predizer observaes. Dessa forma, um construto isola-
O construto no reduzido s observaes, mas apenas do no tem signicado e, portanto, no faz sentido, porque
combinado com outros construtos na rede para se fazerem ele adquire sentido em relao a outros construtos. Essa a
predies sobre observveis. conversa (interpretada) de Cronbach e Meehl (1955).
4) Aprender mais sobre um construto terico uma Na ilustrao da Figura 1, o que existe de real a relao,
questo de elaborar a rede nomolgica na qual ele ocorre, empiricamente vericada, entre observvel a e observvel
ou de aumentar a preciso dos componentes. Pelo menos na b. Esses dois observveis no so idnticos, mas esto re-
histria inicial do construto, a rede ser limitada e o construto lacionados, esto correlacionados. Se eles so diferentes,
ter ainda poucas conexes. ento eles devem estar signicando coisas diferentes, ainda
5) Um enriquecimento da rede, tais como acrescentar que relacionadas. Para explicar tal ocorrncia preciso
um construto ou uma relao teoria, justicado se tal inventar dois construtos diferentes, mas relacionados, que
gerar nomolgicos que so conrmados pela observao justiquem porque os dois observveis esto relacionados.
ou se ele reduz o nmero de nomolgicos exigidos para Assim, se os dois construtos inventados so diferentes, mas
predizer as mesmas observaes. Quando observaes no esto relacionados e o mesmo ocorre com seus observveis,
se enquadram na rede como ela se apresenta no momento, isso valida a relao entre os observveis, porque ocorre
o cientista tem certa liberdade em escolher onde modicar um emparelhamento entre a rede terica dos construtos e a
a rede. Isto , pode haver construtos alternativos ou formas rede emprica dos observveis. uma circularidade muito
diferentes de organizar a rede que, por enquanto, so igual- conveniente para provar a validade dos testes psicolgicos via
mente defensveis. construtos. De fato, esses tais construtos so simplesmente
6) Podemos dizer que operaes que so qualitati- um espelho virtual da relao entre os observveis. Judd,
vamente muito diferentes sobrepem-se ou medem a Kidder e Smith (1986) ilustram isso como na Figura 2, onde
mesma coisa, se as suas posies na rede nomolgica as h um fator A associado a trs outros fatores (B, C, D) na

Psic.: Teor. e Pesq., Braslia, 2007, Vol. 23 n. especial, pp. 099-107 101
L. Pasquali

rede terica (lado esquerdo da Figura), tendo como espelho rede nomolgica entenderia construto unicamente no contex-
as respectivas medidas empricas (lado direito da Figura). to epistemolgico, no mximo, quando no o entende como
puro rtulo sem nenhuma consistncia de realidade. Ele est
ali unicamente para dar signicado relao que existe entre
C c os observveis. Dessa forma, se entendido como realidade
epistemolgica, o construto no se constitui apenas como um
B b rtulo sem concretude prpria, mas uma realidade, somente
que se expressa como uma representao e, portanto, total-
mente dependente do seu observvel. Mas, nesse caso, a seta
que vai do construto para o observvel, como na Figura 1,
A injusticvel, porque ela deveria ser direcionada ao contrrio,
porque no o construto que causa o observvel e, sim, o
observvel que causa o construto. S para adiantar, esse modo
de pensar se contrape frontalmente viso da psicometria
atual da Teoria de Resposta ao Item, por exemplo, que arma
exatamente o oposto dessa concepo assim entendida de
rede nomolgica (veja tambm Da Silva, 2005).
D d Ento, o que signica agora dizer que o teste vlido se de
fato mede aquilo para o qual ele foi feito para medir? Claro,
ele mede o construto; mas o construto foi inventado a partir
do observvel (do escore do teste) e, assim, bvio que ser
medido por este. Parece uma tautologia, que soa quase como
uma safadeza. O conceito ou a percepo do gato corresponde
Fatores Medidas ao gato fsico. Certo! Mas, o gato percepo que justica,
Rede nomolgica Relaes empricas valida o gato fsico ou ser este que valida sua percepo?
Figura 2. Correspondncia entre fatores da rede nomolgica e padro Num contexto epistemolgico, bvio que o gato fsico que
emprico das relaes das medidas. valida a percepo do gato, porque esta simplesmente uma
representao mental do gato fsico e ela deve corresponder
Parece honesto se poder perguntar qual a natureza a este gato fsico para ser legtima. Mas, os construtos de
ontolgica desses construtos ou fatores? que fala a Psicometria e a Psicologia em geral sero tambm
Poder-se-ia, em princpio, dar duas respostas a essa ques- apenas representaes mentais ou sero eles processos ou
to, dentro da inteleco de rede nomolgica. A primeira realidades em si, sem serem puras representaes? a eterna
seria dentro do positivismo lgico que, alis, fundamenta a briga entre a viso materialista e dualista do ser humano, que
histria da rede nomolgica e que Suppe (1977) mostrou ter sorrateiramente surge de novo nessa viso da rede nomolgica.
fracassado , dizendo que a pergunta impertinente, porque os Infelizmente, a soluo desse problema constitui uma questo
construtos adquirem signicado pela relao que um tm com losca e no emprica. E, dessa forma, ela vai continuar a
o outro, sem com isso implicar que eles existam na realidade. ser um problema enquanto houver pesquisadores que pensam
Assim, se dissermos que raciocnio dedutivo se relaciona de forma diferentes sobre o tema.
positivamente com raciocnio abstrato e negativamente com Sintetizando: O conceito construto pode ser entendido
agressividade, o que esse raciocnio dedutivo? Resposta: ele de trs formas, ou seja:
algo que se relaciona positivamente com algo e negativamente 1) Construto um rtulo, que representa uma classe de
com outro algo, sendo estes algos simplesmente termos de comportamentos (como, inteligncia representando ou resu-
uma relao terica. No nal das contas, construtos so sim- mindo todos os comportamentos chamados de inteligentes),
plesmente rtulos embutidos numa rede terica. Parece, ento, sem nenhuma consistncia de realidade.
que nalmente eles so artefatos estatsticos, necessrios para 2) Construto um conceito, que representa alguma reali-
explicar as covarincias entre os observveis. dade observvel (comportamento). Assim, ele uma realidade
Uma segunda resposta poderia ser dada dentro de um epistemolgica, dependente de uma realidade observvel.
contexto epistemolgico. Aqui, a prpria palavra construto 3) Construto uma realidade psquica, independente e
j deixa entrever o que se pretende signicar com construto. preliminar ao observvel que o representa; assim, construto
Ela vem de construir. Mas, construir a partir de qu? Ser uma realidade ontolgica e, conseqentemente, deve ser
ela apenas uma representao mental de uma realidade ob- entendido em si mesmo e no em referncia a observveis.
servvel ou seria ela uma realidade mental independente do No caso dos testes psicolgicos, poder-se-ia aduzir a balbrdia
observvel? Se for o primeiro caso, ento construto constitui do conceito de validade a que levou a viso positivista, materia-
apenas uma representao e, com isso, se insere num contexto lista, subentendida na rede nomolgica, para desacreditar essa
puramente epistemolgico, de conhecimento, e assim ele viso, que se tornaria uma tentativa frustrada. Contudo, no caso
de fato construdo pelo sujeito conhecedor e no pela natu- da viso dualista, em que existem os processos psquicos inde-
reza. Se, contudo, construto for concebido como a segunda pendentes, ca o grave problema de saber o que eles so e quais
alternativa, ento ele uma realidade em si e, com isso, ele so as leis que regem esses processos, isto , a teoria psicolgica.
se insere num contexto ontolgico, uma realidade construda E esta est longe de ser uma realidade minimamente consensual
pela natureza. Parece claro que a posio dos defensores da em seus detalhes entre os psiclogos. Ento, parece que estamos

102 Psic.: Teor. e Pesq., Braslia, 2007, Vol. 23 n. especial, pp. 099-107
Validade dos Testes Psicolgicos

num mato sem cachorro! Minha opinio de que devemos de- Quero validar o instrumento que mede o observvel a, que
senvolver honestamente a teoria psicolgica, descobrindo e no constitui uma medida do construto A (relao 3), utilizando
inventando as leis que governam os processos psquicos, e deixar a relao que existe (tida como j validada) entre a medida
de lado subterfgios ou palavres como a tal da rede nomolgica. do observvel b como medida do construto B (relao 2).
Alis, a histria de aceitar um construto que explica fenmenos Ento digo o seguinte:
observveis tem sido corriqueira em qualquer empreitada cien- O construto A se relaciona ao construto B (premissa
tca, inclusive na Fsica e na Biologia. Em Biologia, o gene era terica: relao 1).
aceito como construto mesmo antes de sua descoberta recente. A medida a se correlaciona medida b (dado emprico:
Em Fsica, a gravidade (G) continua sendo elusiva, mas ningum relao 4).
duvida da sua existncia (Da Silva, 2005). A medida b mede o construto B (hiptese conrmada).
Conseqentemente, a medida a mede A (hiptese: rela-
Incongruncias da rede nomolgica o 3) porque se relaciona medida b que mede B (hiptese
conrmada: relao 2), dado que este construto est corre-
Cronbach e Meehl (1955, p. 290) diziam: lacionado ao construto A. Isto , a mede A assim como b
mede B.
Validao de construto ocorre quando um investigador cr que Parece difcil ver a lgica desse silogismo. A base da
seu instrumento reete um construto particular, ao qual esto argumentao se fundamenta na correlao que existe entre
ligados certos signicados. A interpretao proposta gera a e b, supondo que A e B tambm estejam correlacionados,
hipteses testveis especcas, que constituem o meio pelo qual e que a relao 2 seja empiricamente vericada verdadeira.
se conrma ou desconrma a armativa. Vamos analisar essa histria em dois momentos: a) a
validade da relao 2 e b) a validade da concluso de que se
Carmines e Zeller (1979, p. 23) explicam: Fundamental- relao 2, ento relao 3.
mente, a validade de construto diz respeito ao tanto que uma
dada medida se relaciona com outras medidas consistentes
com hipteses teoricamente derivadas com respeito aos con- a) A validade da relao 2: b mede B
ceitos (ou construtos) que esto sendo medidos. Isso parece
signicar que a validade de construto diz respeito ao quanto Como se pode estabelecer empiricamente que a relao
relao existente (vista, observada: a correlao) entre 2 (b para B) seja verdadeira, isto , vlida? Se a resposta
duas medidas (de observveis) consistente com hipteses for: do mesmo modo que se estabeleceu a validade da
teoricamente deduzidas sobre os construtos sendo medidos relao 3 (a para A), isto , trabalhando uma relao en-
por elas. Ou seja, se tenho duas medidas (a e b; veja Figura tre medida c e construto C. Obviamente, esse argumento
1) que se apresentam relacionadas (na verdade, s isso que leva a uma seqncia ou reduo ad innitum e , por
tenho como dado emprico), ento elas so consistentes se conseguinte, invivel. Ento, como nalmente estabelecer
puder supor que os dois construtos (A e B) que elas medem empiricamente validada uma relao de medida com seu
foram denidos como correlacionados. construto, que possa servir de base para o silogismo acima
Vamos procurar entender melhor essa histria, utilizando o apresentado? Aqui entra aquele argumento indutivista que
dilema da validade de construto de Brown e Burrows (1992), j Hume (1739/1888) e Popper (1972) mostraram que no
adaptado de McGraw (1982) e analisado na Figura 3. funciona. O argumento o seguinte: A evidncia com
respeito relao 3 aumenta com o aumento de estudos.
Outros fatores Zeller e Carmines (1980, p. 82) explicam essa histria da
afetando o seguinte forma:
construto A
A validade de construto no se estabelece com a conr-
5 mao de um nico estudo em diferentes ocasies ou pela
1
con rmao de muitas predies num nico estudo. Ao
contrrio, a validade de construto idealmente requer um
Construto A Construto B padro de descobertas consistentes envolvendo diferentes
pesquisadores por um perodo signicativo de tempo e com
3 2 respeito a uma variedade de variveis diversas e teorica-
mente relevantes. Somente se e quando essas condies
foram atendidas, pode-se falar com conana da validade
Observvel a Observvel b de construto de uma medida particular.

4 Assim, agindo como esses autores sugerem, a gente vai


6 acumulando evidncias sobre a validade de construto de
uma dada medida at que, no m do mundo, a gente tem a
Outros fatores certeza absoluta dessa validade! E se nesse processo ocorrer
afetando o
observvel b
evidncia negativa, qual a conseqncia sobre a validade
da medida? Carmines e Zeller (1979) dizem que isso pode
Figura 3. Ilustrao da validao de construto (adaptada de McGraw, 1982 ocorrer por vrias razes, quais sejam,
e Brown & Burrows, 1992).

Psic.: Teor. e Pesq., Braslia, 2007, Vol. 23 n. especial, pp. 099-107 103
L. Pasquali

1) A medida no tem validade de construto. Nesse caso, a covarincia nunca perfeita, ou seja, a correlao nunca
a medida simplesmente falsa e deve ser abandonada como 1. Suponha, por exemplo, que as correlaes propostas
medida do construto de interesse. entre as variveis da rede nomolgica sejam todas de 0,70,
2) A rede nomolgica que serviu para gerar as predies que representam correlaes muito expressivas. Obviamente,
empricas est incorreta. Nesse caso, a rede terica est errada trata-se das correlaes que expressam as covarincias com
e preciso rev-la. respeito s relaes 1, 2 e 4, porque a relao 3 aquela que
3) O procedimento para testar as hipteses teoricamente voc quer demonstrar empiricamente. Em outras palavras,
derivadas est incorreto. Nesse caso, ou a medida (o teste) voc est postulando que
foi mal construda ou as anlises estatsticas foram mal - rAB = 0,70
feitas. Assim, tanto a medida quanto as anlises tm que - rBb = 0,70
ser revistas. - rab = 0,70.
4) Falta de validade de construto ou de preciso de
alguma(s) outra(s) varivel(eis) na anlise. Isto , um dado Pergunta-se: rAa = ?
construto vem sempre associado a outros construtos. Nesse
caso, foi feita uma relao entre construtos que, de fato, no Veja isso ilustrado na Figura 4.
se relacionam. H, portanto, falha na parte terica da rede
nomolgica.
Isso muito bonito. Mas, duas coisas: primeiro, os es- rAB = 0,70 A B
tudos que vo dando resultados positivos, isto , apoiando
a hiptese de validade de construto, vo aumentando a
probabilidade de certeza dessa validade. Agora, acontece
que, aps ter aumentado essa probabilidade, um resultado
negativo ocorre. O que acontece com essa probabilidade?
Ela diminuiu ou acabou? Se o resultado negativo resulta rab = 0,70 a b
de uma pesquisa bem conduzida, esse resultado constitui a
morte da hiptese, porque uma regra bsica, de qualquer
pesquisa cientca, que um nico resultado negativo torna
a hiptese invlida, por mais resultados positivos que tenha B
tido anteriormente. Trata-se da regra da conrmao emp-
rica (Pasquali, 2005a). Em segundo lugar, mesmo que esse
proposto processo funcionasse, tratar-se-ia de validao rbB = 0,70
de um teste e no de validade do teste. Validade constitui
uma propriedade de algo, enquanto validao constitui uma b
atividade do cientista para vericar tal propriedade. Esta se
insere num processo epistemolgico, de conhecimento, en- Figura 4. Correlaes entre construtos e observveis.
quanto aquela se insere num campo ontolgico, da realidade
da propriedade e do algo em questo. As duas coisas so Dessa situao, poderiam surgir vrias possibilidades
importantes; mas, uma no a outra, porque uma fala do para a correlao entre a medida a e seu suposto construto
que se trata, enquanto a outra fala do como fazer. A vali- A, duas das quais esto ilustradas na Figura 5.
dade parece ser um conceito bastante simples, se entendida
como a propriedade de um teste estar de fato se referindo a
(representando) um construto, enquanto que validao j se A B
apresenta bastante mais complexa, porque se trata de provar
cienticamente a validade do instrumento. Neste ltimo
contexto, uma teoria como a da rede nomolgica til, so-
raA = 0,70
a b
A
bretudo quando operacionalizada como zeram Campbell e
Fiske (1959) com a sua validade convergente-discriminante.
Apenas que os construtos em jogo no so conceituados pela A
rede nomolgica; eles so preliminares e denidos em termos raA = 0,00 B
da teoria substantiva psicolgica e, ento, entrosados numa
rede nomolgica. b B
b) A validade da relao se 2 e 1 e 4, ento 3 a
Figura 5. Correlao entre a medida a e o construto A.
O modelo de validao de construto arma que se as re-
laes 1, 2 e 4 forem verdadeiras, ento segue que a relao Mesmo salvando todas as correlaes postuladas, a cor-
3 tambm o . Entretanto, todas essas relaes postuladas relao entre a e o construto A tanto pode ser alta (parte A
no modelo da rede nomolgica so expressas como correla- da Figura) quanto nula (parte B da Figura). Dessa forma, o
es, isto , em termos de covarincia. Agora, acontece que silogismo que argumenta em prol da validade de construto

104 Psic.: Teor. e Pesq., Braslia, 2007, Vol. 23 n. especial, pp. 099-107
Validade dos Testes Psicolgicos

da medida a constitui, no mximo, uma prova circunstancial fatores perturbadores no uso do instrumento (o calor). Mas a
de tal validade. Isto , no prova nada. presena de fatores perturbadores corriqueira em qualquer
Como, ento, entender a validade de construto de um empreitada cientca (as chamadas variveis estranhas ou
teste psicolgico? Vamos discorrer um pouco sobre esse confounding variables). De qualquer forma, o instrumento
problema. ser calibrado ou no, questo de preciso, no de valida-
de, porque ele continua medindo aquilo para o qual ele foi
Reencontrando o conceito de validade construdo. Assim, continua sendo verdadeiro que o metro
mede comprimento (validade), embora na prtica ele o faa
Entende-se por teste psicolgico um conjunto constitudo erradamente (preciso). Dessa forma, validade responde a se
de comportamentos que o sujeito deve exibir. Ele um teste se algo verdadeiro ou falso, enquanto que preciso responde a
todos os comportamentos envolvidos no conjunto se referem se algo est correto ou errado. A primeira questo diz respeito
mesma coisa, a questo da unidimensionalidade. Ade- a um problema ontolgico e a segunda a um problema psico-
mais, alguns sujeitos podem ser capazes de executar todos os mtrico (de mensurao) ou metodolgico. No caso dos testes
comportamentos envolvidos, outros sujeitos, apenas alguns psicolgicos, os dois problemas so relevantes e importantes,
dos comportamentos e outros, ainda, nenhum dos compor- mas um no o outro. Assim, conclui-se que os parmetros
tamentos. Por que isso ocorre? Porque o sujeito que executa de validade e preciso so caractersticas do instrumento de
todos os comportamentos tem mais daquela mesma coisa medida, do teste, e no da medida feita de um objeto. Esta
que o sujeito que executa apenas alguns comportamentos ltima convel e legtima se o instrumento que a produziu
ou nenhum deles. Se isso for verdade, ento aquela mesma for vlido (pertinente, relevante) e preciso (calibrado). Quem
coisa deve ser a) uma realidade, porque os comportamentos garante a qualidade da medida a qualidade do instrumento.
envolvidos no teste so reais, b) aquela mesma coisa a E a validade do instrumento diz respeito exclusivamente
causadora das respostas dos sujeitos e c) aquela mesma pertinncia do instrumento com respeito ao objeto que se
coisa deve variar entre diferentes sujeitos, uma vez que, quer medir; a questo da referncia. Agora, acontece que
sendo a causa dos comportamentos, ela produz diferenas referncia supe que dois objetos sejam reais, porque, se um
nos comportamentos dos sujeitos. deles no o for, ento a relao ctcia, dado que ela feita
Vamos especificar um pouco essas trs afirmaes, entre uma realidade e uma racionalizao (fantasia, inven-
substituindo aquela mesma coisa pelo seu sinnimo, ou o). o que fazem, ao que parece, os positivistas quando
seja, construto. falam de rede nomolgica.
Na tentativa de reencontrar o verdadeiro conceito de O posicionamento aqui assumido tem implcita a aceita-
validade de construto, os autores holandeses Borsboom, o de uma viso losca e, por isso, empiricamente no
Mellenbergh e van Heerden (Borsboom & cols., 2003; Bors- demonstrvel, sobre o que seja Psicologia e, com isso, o que
boom & cols., 2004), vm fazendo um trabalho fundamental. seja um ser humano. Trata-se da viso dualista, que considera
A presente exposio se inspira nesses pesquisadores, bem o ser humano um ente ontolgico heterogneo, especica-
como de trabalhos anteriores do presente autor (Pasquali, mente composto de elementos do que Popper (1972) chamou
1999, 2004). Veja, tambm, Jos Aparecido da Silva (2005), de primeiro e segundo mundos; ou seja, de corpo e mente,
embora este autor tenha predileo por interpretao biol- sendo estes muito distintos entre si, mas perfazendo uma
gica dos construtos psicolgicos. composio e no um agregado (veja Pasquali, 2005a). Essa
A base da argumentao consiste em se entender que posio dualista do ser humano tomada, dado que a viso
validade constitui uma propriedade do instrumento de medida monista (materialista) no explica a contento o ser humano
e que no tem nada a ver com a idia de que ela consistiria e, especicamente, no caso dos testes psicolgicos, leva s
num julgamento sobre o signicado dos escores de um teste, incongruncias discutidas anteriormente. Ademais, ela se
retomando, assim, o sentido original que Kelly (1927) quis coaduna perfeitamente com a teoria psicomtrica atual da
dar a esse conceito, ao armar que um teste vlido quando Teoria de Resposta ao Item (TRI , veja Pasquali, 2005b).
mede aquilo que supostamente deve medir. Voltando aos testes psicolgicos. Um teste, ento, um
Antes de continuar, gostaria de lhe propor uma questo: conjunto de estmulos comportamentais, ou seja, de com-
Voc construiu um metro, feito de ferro, para medir o compri- portamentos, nalmente, porque os estmulos pretendem
mento das coisas. Voc mediu um pedao de pau e conseguiu produzir comportamentos. Assim, um teste um conjunto
uma medida do mesmo. Em seguida, voc esquentou o metro de comportamentos observveis. Agora, o psiclogo no est
e foi medir novamente o pedao de pau e conseguiu outra especicamente interessado em vericar componentes ou
medida dele, agora, porm, ela era bem diferente da primeira. aspectos anatmicos, siolgicos ou genticos desses com-
Pergunta: O metro, na segunda vez que voc o utilizou, j portamentos, nem fatores ecolgicos e nem mesmo fatores
no est mais medindo comprimento? culturais que entram no aparecimento de tais comportamen-
Sendo sensato, talvez a sua resposta seja: sim, ele est tos. Todos esses fatores so relevantes no comportamento
ainda medindo comprimento, no entanto est medindo erra- humano, mas eles so do interesse do bilogo, do eclogo
do! Muito bem, ento o metro continua medindo aquilo para ou de socilogo. O que, ento, o psiclogo procura entender
o qual ele foi feito para fazer, isto , medir comprimento. Isto desses comportamentos? O psiclogo procura entender os
validade. Mas, ele est medindo errado? De acordo, mas comportamentos com referncia a processos psquicos, os
continua medindo comprimento, no entanto, o est fazendo famosos construtos, estes entendidos como realidades on-
erradamente porque o metro, com o calor, cou descalibra- tolgicas e no como racionalizaes inseridas numa rede
do. Por que cou descalibrado? Porque houve a presena de nomolgica. Dessa forma, para entender o comportamento, o

Psic.: Teor. e Pesq., Braslia, 2007, Vol. 23 n. especial, pp. 099-107 105
L. Pasquali

psiclogo deve entender o seu referente, o processo psquico, de construto ainda poderia signicar alguma coisa, em duas
que se constitui como causa do comportamento, para satis- situaes, a saber:
fazer o ditado dos romanos de scire est per causas scire 1) O teta que o teste mede est mal denido. Para resol-
(conhecer se faz conhecendo as causas). O fato de que esses ver este problema, temos que vericar duas coisas: a) rever
processos psquicos sejam minimamente conhecidos (isto , a teoria que dene o teta em questo e b) vericar a funo
praticamente desconhecidos) no invalidam sua presena, de informao do teste fornecida pela TRI.
muito menos sua utilidade cientca. 2) O trao latente que um dado teste mede validamente
Dessa forma, se um teste a mede um construto A, ento numa situao, no se aplica numa outra situao de seleo,
ele deve se referir a este construto especicamente e no por exemplo. Mas este no um problema psicomtrico de
porque o teste se correlaciona com outro teste b que mede o validade dos testes e, sim, um problema de psicologia orga-
construto B que, por sua vez, se correlaciona com o construto nizacional. Esta deve vericar se um dado trao latente ou
A. Assim, a validade de um teste deve ser entendida como no pertinente no contexto de uma dada seleo. Para isso
ilustrado na Figura 6. existe a prossiograa do cargo.

Referncias

American Psychological Association (1985). Standards for


educational and psychological testing. Washington: American
Psychological Association, Inc.
Bacon, F. (1869). Novum organum. Em J. Spedding, R. L. Ellis &
D. D. Heath (Orgs.), The works of Francis Bacon. Vol. VIII (pp.
Figura 6. Ilustrao da concepo dualista do ser humano do teste. 179-203). Boston: Taggard and Thompson.
Borsboom, D., van Heerden, J. & Mellenbergh, G. J. (2003).
O construto (trao latente, teta) se posiciona como o ob- Validity and truth. Internal Report. Department of Psychology,
jeto que o teste quer medir, isto , ele o aquilo que o teste University of Amsterdam.
pretende medir. Ento, ele o referente, em funo do qual Borsboom, D., Mellenbergh, G. J. & van Heerden, J. (2004).
a qualidade do teste deve ser avaliada. Conseqentemente, The concept of validity. Psychological Review, 111(4), 1061-
as respostas ao teste (o escore no teste, o observvel, o tau) 1071.
no criam o construto, antes, pelo contrrio, o escore no Brown, K. & Burrows, C. (1992). What is validity? A prologue to
teste que depende do construto. Quando se diz que um an evaluation of selected health status instruments. National
teste valido, estamos assumindo uma posio ontolgica Centre for Health Program Evaluation, Report 1.
de que o atributo sendo medido existe e afeta o resultado do Bryant, F. B. (2000). Assessing the validity of measurement. Em L.
procedimento de medida (Borsboom & cols., 2004). Assim, G. Grimm & P. R. Yarnold (Orgs.), Reading and understanding
o construto o referencial para os resultados de um teste. more multivariate statistics (pp.99-146). Washington: American
Se estes so reais, ento o referencial tambm deve ser real. Psychological Association.
Do contrrio ca estranho se dizer, por exemplo: o teste X Campbell, D. T. & Fiske, D. W. (1959). Convergent and discriminant
mede inteligncia, mas inteligncia no existe. As duas ar- validation by the multitrait-multimethod matrix. Psychological
maes no podem ser simultaneamente verdadeiras. Uma Bulletin, 56, 81-105.
delas falsa. Como os resultados do teste X so reais, ento Carmines, .G. & Zeller, R. A. (1979). Reliability and validity
o construto medido existe. assessment. New Park: Sage Publications.
Cronbach, L. J. (1949). Essentials of psychological testing. New
Comentrio Final York: Harper.
Cronbach, L .J. & Meehl, P. (1955). Construct validity in
Validade diz respeito ao instrumento e no ao uso que se psychological tests, Psychological Bulletin, 52, 4, 281-302.
faz dos seus escores. Assim, no faz sentido dizer que um Da Silva, J. A. (2005). Inteligncia: Resultado da gentica, do
teste com validade de construto vlido numa situao, e ambiente ou de ambos? So Paulo: Editora Lovise.
no o em outra. Esse modo de falar faz sentido somente Emory, C. (1985). Business research methods The Irwin Series
no contexto da teoria clssica dos testes, em que imperava a in Information and Decision Sciences (3 ed.). Illinois:
validao dos testes via critrio, em que a validade do teste Homewood.
realmente dependia da estabilidade do critrio. Assim, se o Guilford, J. P. (1946). New standards for test evaluation. Educational
critrio mudasse de status, o teste que o predizia perdia a and Psychological Measurement, 6, 427-439.
validade. No caso da validade de construto, no existe esta Gulliksen, H. (1950). Intrinsic validity. American Psychologist,
histria de validade condicionada do teste, porque o critrio 5, 511-517.
aqui o teta. Assim, o teste no prediz um teta, ele representa Haynes, S. N., Richard, D. C. S., & Kubany, E. S. (1995). Content
ou modela comportamentalmente o trao latente. Como se validity in psychological assessment: A functional approach
supe que o trao latente no mude de uma situao para outra to concepts and methods. Psychological Assessment, 7(3).
como muda um critrio, ento o teste que afere validamente 238-247.
o tal teta, o far assim em qualquer situao. O problema da Hume, D. (1888). Treatise of human nature. Vol. I. Oxford: Claredon
validade condicionada com respeito a testes com validade Press. (Trabalho original publicado em 1739)

106 Psic.: Teor. e Pesq., Braslia, 2007, Vol. 23 n. especial, pp. 099-107
Validade dos Testes Psicolgicos

Janis, I. L. (1965). The problem of validating content analysis. Em Mosier, C.I. (1951). Problems and designs of cross-validation.
H. D. Lasswell, N. Leites & cols. (Orgs.), Language of politics. Educational and Psychological Measurement, 11, 5-12.
Cambridge: MIT Press. Pasquali, L. (1999). Instrumentos psicolgicos: Manual prtico de
Judd, C., Kidder, L. & Smith, E. (1986). Research methods in social elaborao. Braslia: LabPAM / IBAP.
relations (6 ed.) New York: Rinehart and Winston. Pasquali, L. (2004). Psicometria. Teoria dos testes na psicologia e
Kelly, E. L. (1927). Interpretation of educational measurements. na educao (2 ed.). Petrpolis: Editora Vozes.
New York: Macmillan. Pasquali, L. (2005a). Delineamento de pesquisa em cincia. Vol. I:
Lnnqvist, A. & Hannula, M. (s/d.). Validating performance A lgica da pesquisa cientca. (mmeo).
measures with the nomological network. Retirado em Pasquali, L. (2005b). Teoria de resposta ao item TRI. Manual
22/09/2006 de http://www.tut./units/tuta/teta/mittaritumi/ para iniciantes. Braslia: INEP.
julkaisut/bryssel.pdf Popper, K. R. (1972). A lgica da pesquisa cientca. So Paulo:
McGraw, J. E. (1982). Dilemmatics. The study of research choices Editora Cultrix.
and dilemmas. Em J. E. McGraw; J. Martin & R. A. Kukla Suppe, F. (1977). The structure of scientic theories. Urbana:
(Orgs.), Judgment Calls in Research (pp.69-102). Berverly University of Illinois Press.
Hills: Sage. Weber, R. P. (1990). Basic content analysis (2 ed.). Newbury Park:
Messick, S. (1989). Validity. Em R. Linn (Org.), Educational Sage Publications.
measurement. (3. ed., 13-103). New York: American Council Zeller, R. A. & Carmines, E. G. (1980). Measurement in the social
on Education and Macmillan Publishing Company. sciences: The link between theory and data. Cambridge:
Mosier, C.I. (1947). A critical examination of the concepts of Cambridge University Press.
face validity. Educational and Psychological Measurement,
7, 191-205.

Psic.: Teor. e Pesq., Braslia, 2007, Vol. 23 n. especial, pp. 099-107 107

Você também pode gostar