PSICOLOGIA CINCIA E PROFISSO, 2004, 24 (4), 88-99

Parmetros Psicomtricos:
uma Anlise de Testes Psicolgicos Comercializados no Brasil
Psychometrics Parameters: an analysis of the psychological tests commercialized in Brazil
Resumo: As tcnicas utilizadas na avaliao psicolgica tm provocado questionamentos nas comunidades cientficas e profissionais brasileiras, tanto no que se refere qualidade dos instrumentos, de maneira geral, ao uso que os psiclogos fazem dos instrumentos, bem como em relao validade geral dos resultados da avaliao psicolgica. O presente trabalho teve como objetivo identificar as principais informaes psicomtricas a respeito dos instrumentos psicolgicos presentes em seus manuais, tais como editora, data de publicao, varivel medida, padronizao, validade e preciso. Foram consultados 146 instrumentos de avaliao comercializados no Brasil por onze editoras. Os resultados indicaram que somente 28,8% desses instrumentos relatam estudos de preciso, validade e padronizao. Esses resultados sugerem que a Psicologia brasileira tem-se caracterizado por despender pouca ateno aos fundamentos cientficos de sua prtica profissional. Palavras-Chave: Instrumentos psicolgicos, avaliao psicolgica, validade, preciso. Abstract: Psychological assessment instruments have been questioned by the scientific and professional community in respect to their general psychometric quality, the use that psychologists give to their instruments and also to the general validity of the results of the psychological assessment. The aim of this paper is to identify the main psychometric information of the commercialized psychological tests as reported in their manuals, as well as publisher, date, construct measuring, standardization, validity and reliability. It analyzes 146 instruments commercialized by 11 editors. The results show that only 28.8% of these instruments report reliability, validity and standardization studies in their manuals. These results suggest that Brazilian Psychology has been characterized by a less than desirable concern about the scientific basis of its professional practices. Key Words: Psychological tests, psychological assessment, validity, reliability.

Ana Paula Porto Noronha

Doutora em Psicologia: Cincia e Profisso pela Pontifcia Universidade Catlica de Campinas. Docente do Curso de Psicologia e do Programa de Psgraduao Stricto Sensu em Psicologia da Universidade So Francisco.

Ricardo Primi
Doutor em Psicologia pela Universidade de So Paulo. Docente do Curso de Psicologia e do Programa de Psgraduao Stricto Sensu em Psicologia da Universidade So Francisco. Coordenador do Laboratrio de Avaliao Psicolgica e Educacional (LabAPE).

Joo Carlos Alchieri

Doutor em Psicologia do Desenvolvimento pela Universidade Federal do Rio Grande do Sul. Docente da Universidade Federal do Rio Grande do Norte

As tcnicas utilizadas na avaliao psicolgica tm provocado questionamentos nas comunidades cientficas e profissionais brasileiras, tanto no que se refere qualidade dos instrumentos, de maneira geral, ao uso que os psiclogos fazem dos instrumentos bem como em relao validade geral dos resultados da avaliao psicolgica. Tais questionamentos j provocaram, e ainda hoje provocam, modificaes na postura do psiclogo,

88

que ora oscila em direo idealizao, ora ao menosprezo dos recursos que dispe nessa rea. A idia do uso de instrumentos, originria na dcada de 30, de uma perspectiva tcnica e pragmtica da instrumentalizao em Psicologia, caracterizava a ao do profissional como mais bem amparada no contexto cultural de uma cincia do comportamento humano. Assim sendo, o desenvolvimento de instrumentos ganhava um forte impulso para a aplicabilidade do entendimento

Doze Green

Jupiterimages

Parmetros Psicomtricos: uma Anlise de Testes Psicolgicos Comercializados no Brasil

psicolgico nas mais diversas reas de atuao. Posteriormente, nas dcadas de 60 e 70, os instrumentos foram criticados e o seu uso minimizado na atuao do profissional de Psicologia; dentre os motivos, encontra-se o advento do pensamento humanista, o movimento de contra-cultura, o questionamento a respeito das idias tecnicistas e, principalmente, no Brasil, a associao dos modelos de avaliao com a cultura tcnica norte-americana. Esses fatos histricos j foram amplamente discutidos por vrios autores, dentre eles: Anastasi e Urbina (2000), Ancona-Lopez, (1987), Erthal (1987), Pasquali (1999) e Pasquali e Alchieri (2001). Atualmente, os questionamentos apresentados pela sociedade frente aos resultados de avaliaes psicolgicas em seleo de pessoal, psicodiagnstico, na obteno de carteira de habilitao, entre outros contextos e possibilidades profissionais, levam a pensar e ponderar quanto aos diversos aspectos envolvidos na prxis do profissional de avaliao psicolgica (Alves Filho, 2002). Sem dvida alguma, a avaliao psicolgica, hoje, voltou a ter sua importncia e seu status na atuao do psiclogo, tanto no que se refere s perspectivas internacionais quanto nas nacionais. Em recente relatrio da Comisso de Testes do Colgio Oficial de Psiclogos (COP) e da Comisso Europia sobre Testes da Federao Europia de Associaes Profissionais de Psiclogos (EFPPA), foram apontadas diretrizes internacionais para o estabelecimento de polticas para o uso dos testes psicolgicos. Cabe destacar o papel delegado aos destinatrios, ou seja, a responsabilidade de promover a escolha adequada dos instrumentos a serem utilizados bem como a preocupao acerca da sua qualidade e atualizao (ITC, 2001). No se questiona mais a utilidade dessa prtica privativa do psiclogo, que, de alguma forma, representa e difunde a Psicologia enquanto cincia na sociedade. Ainda nessa perspectiva dos padres de excelncia para os instrumentos, recentemente, foi publicada uma reviso dos Standards for Educational and Psychological Tests (American Educational Research Association, American Psychological Association & National Council on Measurement in Education, 1999), uma referncia clssica quanto aos parmetros dos instrumentos utilizados na avaliao psicolgica. No Brasil, a emergncia, hoje, est centrada na discusso da qualidade e da elaborao de instrumentos nacionais de avaliao psicolgica. A temtica da qualidade dos instrumentos psicolgicos , atualmente, merecedora de investigaes por parte de pesquisadores em diferentes regies do Pas, e, dentre os estudos

desenvolvidos, encontram-se aqueles que versam sobre o ensino e formao, sobre exerccio profissional, sobre novas tecnologias e teorias que embasam a construo e validao de testes. No que se refere aos estudos que discutem o ensino da avaliao psicolgica, destaque deve ser dado aos trabalhos de Ribeiro (1996); Pereira e Carellos (1995); Jacquemin (1995); Kroeff (1988); Alves, Alchieri e Marques (2001) e Vasconcelos e Toledo de Santana (2001), Alchieri e Bandeira (2002). Embora tenham enfoques metodolgicos diferentes, os trabalhos convergem para a necessidade de se repensar a formao profissional de forma que ela se adapte melhor s necessidades da prtica do profissional. Mais especificamente no que se refere ao uso dos instrumentos de avaliao, Azevedo, Almeida, Pasquali e Veiga (1996) constataram, no estudo realizado com psiclogos com o objetivo de conhecer os instrumentos mais utilizados e de saber a sua opinio a respeito dos testes, que metade da amostra acredita no valor dos testes, com a seguinte ressalva: que sejam usados de acordo com princpios ticos e em conjunto com outros instrumentos de avaliao. Um dos primeiros levantamentos nacionais sobre o uso de testes psicolgicos o estudo de Hutz e Bandeira (1993), que aponta, em suas concluses, alm da discrepncia entre a quantidade de instrumentos nacionais e internacionais, a falta de referncias sobre os instrumentos mais utilizados no Pas. Os autores caracterizaram descritivamente tanto os testes objetivos quanto os projetivos, proporo de trabalho entre os mais utilizados em cada rea e a nfase quanto necessidade de poltica de atualizao do instrumental brasileiro. Vrios outros estudos tm dado destaque qualidade dos instrumentos de avaliao psicolgica, na tentativa de se resgatar a sua legitimidade (Prieto & Muiz, 2000; Noronha, 2001; Noronha, Sartori, Freitas & Ottati, 2001; Noronha, Sartori, Freitas & Ottati, 2002). Outros estudos versam sobre temas distintos, tais como as implicaes relativas reviso dos testes psicolgicos (Silverstein, Marshall & Nelson, 2000) e sobre a complexidade terica da reviso de alguns instrumentos, como, por exemplo, os projetivos (Butcher, 2000; Link, 1999). O Conselho Federal de Psicologia (CFP), ao longo das duas ltimas dcadas, criou espaos de interlocuo com a sociedade cientfica na busca de solues para a melhor da qualidade dos servios relacionados avaliao psicolgica. Em 1980, foi criada a Comisso Nacional sobre Testes Psicolgicos, objetivando discutir uma poltica O Conselho Federal de Psicologia (CFP), ao longo das duas ltimas dcadas, criou espaos de interlocuo com a sociedade cientfica na busca de solues para a melhor da qualidade dos servios relacionados avaliao psicolgica.

89

Ana Paula Porto Noronha, Ricardo Primi & Joo Carlos Alchieri

quanto rea. Em 1986, houve uma segunda edio dessa comisso, que inclua algumas recomendaes quanto ao uso de instrumentos psicolgicos. Em 1997, surgiu a Cmara Interinstitucional de Avaliao Psicolgica, decorrente do veto presidencial avaliao psicolgica do trnsito, a qual assessorou o CFP (2000) quanto criao do Manual para Avaliao Psicolgica de candidatos Carteira Nacional de Habilitao e condutores de veculos automotores. Simultaneamente, foram realizadas discusses em fruns regionais e nacionais de avaliao psicolgica a fim de obter e encaminhar propostas sobre a formao e prtica profissional na rea. Em decorrncia disso, surgiram, em 2001, duas resolues regulamentando a ao profissional no que se refere aos laudos e aos instrumentos de avaliao psicolgica (CFP, 2001a, 2001b).

Paralelamente ao movimento do CFP, na reunio da Associao Nacional de Pesquisa e PsGraduao em Psicologia (ANPPEP), em 2000, o grupo de trabalho em avaliao psicolgica discutiu a sistematizao do processo de avaliao da qualidade dos instrumentos comercializados. Desse evento, surgiu um grupo de pesquisadores dos Laboratrios de Instrumentos de Avaliao Psicolgica (LIAP, UNISINOS) e Laboratrio de Avaliao Psicolgica e Educacional (LabAPE, USF) com o objetivo de (a) elaborar uma base de dados de instrumentos nacionais comercializados de avaliao psicolgica, (b) identificar e caracterizar as principais informaes a respeito dos instrumentos psicolgicos (autor, tradutor, data de publicao, editora, atualizaes e revises), (c) descrever os principais indicadores tcnicos dos instrumentos psicolgicos, como: validade, preciso, padronizao e (d) caracterizar os instrumentos psicolgicos mais utilizados pelos profissionais de Psicologia em diversos contextos (Noronha, Alchieri & Primi, 2001). Dada a extenso da proposta, o presente artigo teve a inteno de apresentar um dos objetivos acima relacionados, ou seja, identificar e caracterizar as principais informaes a respeito dos instrumentos psicolgicos, mais especialmente no que se refere editora, data de publicao, varivel medida, padronizao, validade e preciso.

Mtodo
Instrumentos consultados Foram consultados 142 instrumentos psicolgicos, originalmente comercializados pelas seguintes das editoras: CEPA, Vetor, Casa do Psiclogo, Edites, CETEPP, Mestre Jou, Editorial Psy, Manole, Artes Mdicas, Edicon, Entreletras. Os nomes dos instrumentos e as respectivas referncias encontram-se em anexo. Material Para a realizao da pesquisa, os autores se basearam no questionrio proposto por Prieto e Muiz (2000), que procurou, originalmente, avaliar os testes usados na Espanha. Eles tm como proposta a avaliao de vrios aspectos tericos e tcnicos dos instrumentos, dentre eles: nome do teste, autor, editor, data da publicao, varivel medida (classificao geral da varivel que se pretende medir), reas de aplicao, formato dos itens (resposta livre, respostas dicotmicas, eleio mltiplas, tipo Likert, adjetivos bipolares, outros), nmero de itens, validade de construto, qualidade de critrio, validade de contedo, preciso (procedimentos utilizados: teste-reteste, formas

1 Nomeadamente, o ITC Guidelines on Adapting Tests, ITC Guidelines on Test Use da International Test Comission (ITC), o Standards for Educational and Psychological Testing publicado pela American Educational Research Association, American Psychological Association, National Council on Measurement in Education e o Guidelines for Educational and Psychological Testing publicado pela Canadian Psychological Association. 2 Ttulo traduzido do russo por Paulo Bezerra (in Vigotski, 2001).

90

A resoluo CFP 02/2003 estabelece que os instrumentos de avaliao psicolgica, no Brasil, para serem considerados como tal e estarem em condies de uso profissional, devem atender a um conjunto de requisitos mnimos estabelecidos pela Psicometria. A resoluo apia-se em documentos internacionais que tratam 1 detalhadamente desse assunto . Basicamente, esses requisitos indicam que os instrumentos devem possuir: (a) uma fundamentao terica, (b) evidncias empricas de validade e preciso das interpretaes propostas, (c) um sistema de correo e interpretao dos escores, (d) uma descrio clara dos procedimentos de aplicao e correo (e) um manual contendo essas informaes. Atualmente, os instrumentos comercializados esto em anlise para se verificar quais atendem esses requisitos mnimos.

Parmetros Psicomtricos: uma Anlise de Testes Psicolgicos Comercializados no Brasil

paralelas, homogeneidade), suporte (administrao oral, lpis e papel, manipulativo, informatizado, outros), correo (crivo, leitura tica, realizado por aplicador, com a ajuda de experts, outros), transformao da pontuao (caracterstica no aplicvel ao instrumento, normatizada, no normatizada), escalas utilizadas (percentil, QI, T, outros), tempo de aplicao, documentao oferecida (manual, livros ou artigos complementares, disquetes, CD, outros) e bibliografia bsica fornecida pelo teste. No presente estudo, foram avaliados os seguintes aspectos: data original, editora de publicao no Brasil, varivel, padronizao brasileira (se existe), data da padronizao brasileira, presena ou ausncia de estudos relacionados validade e preciso. Em relao aos dois ltimos elementos, foram considerados estudos de qualquer natureza, nacional ou estrangeiro. Procedimento Todos os instrumentos foram avaliados a partir das informaes contidas em seus respectivos manuais e, posteriormente, analisados.

Resultados
Na Tabela 1, apresentamos a distribuio dos 146 instrumentos comercializados no Brasil pelas editoras que os publicam; trs editoras (Casa do Psiclogo, CEPA e Vetor) so responsveis por 83,6% dos instrumentos comercializados. Na Tabela 2, so apresentadas as variveis avaliadas pelos instrumentos. De todos os instrumentos analisados, 41,1% avaliam inteligncia e/ou aptides, e 36,3% avaliam caractersticas de personalidade. Tabela 1. Nmero de instrumentos comercializados pelas diferentes editoras. Editora CEPA Vetor Casa do Psiclogo Edites CETEPP Mestre Jou Editorial Psy Manole Artes Mdicas Edicon Entreletras Total F 51 45 26 7 2 1 4 1 2 1 6 146 % 34,9 30,8 17,8 4,8 1,4 0,7 2,7 0,7 1,4 0,7 4,1 100,0

Tabela 2. Distribuio dos instrumentos pelas variveis principais que eles avaliam. Varivel avaliada Inteligncia Personalidade Interesses profissionais / orientao profissional Aptides / habilidades Alfabetizao / leitura e escrita / dificuldades escolares Desenvolvimento Atitude Alteraes neuropsicolgicas Total F 31 53 14 29 15 1 2 1 146 % 21,2 36,3 9,6 19,9 10,3 0,7 1,4 0,7 100,0

Na Tabela 3, so apresentadas as datas de publicao dos instrumentos consultados. Vale ressaltar que, no caso de instrumento estrangeiro, considerou-se a data da publicao do material original, ou seja, a da primeira edio. Considerando o exposto, faz-se pertinente observar a inexistncia dessa informao nos manuais de 23,3% dos instrumentos publicados. Dos instrumentos em que essa informao era disponvel,

91

Ana Paula Porto Noronha, Ricardo Primi & Joo Carlos Alchieri

pode-se observar trs perodos mais proeminentes de construo, a saber: as dcadas de 40, 70 e 90.

Tabela 3. Distribuio dos instrumentos em razo da data original de publicao Data da publicao Sem informao 1920 1929 1930 1939 1940 1949 1950 1959 1960 1969 1970 1979 1980 1989 1990 1999 2000 2002 Total F 34 2 4 16 10 10 25 11 26 8 146 % 23,3 1,4 2,7 11,0 6,8 6,8 17,1 7,5 17,8 5,5 100,0 % Acumulada 23,3 24,7 27,4 38,4 45,2 52,1 69,2 76,7 94,5 100,0

Quanto s caractersticas psicomtricas, buscou-se verificar se os manuais relatavam os estudos referentes preciso e validade ainda que, no caso de instrumentos estrangeiros, realizados no pas de origem. Em relao padronizao, avaliou-se a existncia de estudos feitos no Brasil. A Tabela 4 apresenta os resultados para os diferentes tipos de instrumentos. Para cada tipo, a tabela apresenta o nmero de manuais que relatavam estudos de preciso (segunda coluna), de validade (terceira coluna) de padronizao brasileira (quarta coluna), simultaneamente de preciso e de validade (quinta coluna) e simultaneamente de preciso, validade e padronizao brasileira (sexta coluna). Nas ltimas trs linhas, so apresentados o total de instrumentos de cada uma das caractersticas anunciadas anteriormente. As porcentagens foram calculadas em relao ao total de instrumentos de cada tipo apresentado na ltima coluna (por exemplo, 23 dos 31 instrumentos correspondentes a 74,2% dos instrumentos de avaliao da inteligncia que relatam em seus manuais pelo menos um estudo de preciso).

92

Parmetros Psicomtricos: uma Anlise de Testes Psicolgicos Comercializados no Brasil

Tabela 4. Propriedades psicomtricas relatadas nos manuais. Preciso, Validade, e Validade Padroniz. 20 13 64,5 41,9 14 11 26,4 20,8 6 42,9 15 51,7 5 33,3 4 28,6 11 37,9 2 13,3

Varivel Inteligncia Personalidade Interesses profissionais / orientao profissional Aptides / habilidades Alfabetizao / leitura e escrita / dificuldades escolares Desenvolvimento F % F % F % F % F % F % F % F % F %

Preciso Validade Padroniz. Preciso 23 74,2 17 32,1 7 50,0 17,0 58,6 6 40,0 23 74,2 19 35,8 6 42,9 19,0 65,5 7 46,7 1 100 1 50 1 100 71 48,6 1 100 77 52,7 16 51,6 20 37,7 5 35,7 18,0 62,1 2 13,3 1

Total 31 100 53 100 14 100 29 100 15 100 1 100 2 100

100

Atitude

1 50 1 100 64 43,8 1 100 61 41,8 1 100 42 28,8

Alteraes neuropsicolgicas Total

1 100 146 100

Os dados revelaram que somente 28,8% apresentam todas as trs caractersticas que so condies mnimas para se considerar um instrumento como cientificamente fundamentado. Obviamente, alguns instrumentos, principalmente os projetivos, no empregam dados normativos em seu sistema de interpretao, j que as variveis avaliadas so qualitativas. Mesmo relaxando essa exigncia e tomando somente os instrumentos que relatam simultaneamente estudos de preciso e de validade, observa-se que somente 41,8% apresentam essas caractersticas. Deve-se, ainda, considerar que, relativamente aos parmetros de preciso e validade, esta anlise no discriminou se os estudos eram brasileiros, no caso de testes estrangeiros. H que se considerar que, nesse caso, o nmero de instrumentos publicados com estudos de validade e preciso seria ainda menor. A anlise dessas propriedades nos instrumentos avaliados indica que os testes de personalidade so os que mais carecem dessas evidncias e os de inteligncia e aptides so os que mais freqentemente relatam estudos das propriedades bsicas. Isso pode decorrer da maior facilidade

em se pesquisar a validade de instrumentos de avaliao cognitiva em comparao com os instrumentos de avaliao da personalidade. Tabela 5. Distribuio dos instrumentos em relao data do ltimo estudo de padronizao brasileiro. Data 1935-1949 1950-1959 1960-1969 1970-1979 1980-1989 1990-1999 2000-2002 Total com inf. Sem Informao Total F 6 3 7 20 19 51 12 118 28 146 % 4,1 2,1 4,8 13,7 13,0 34,9 8,2 80,8 19,2 100,0

No que se refere padronizao, a Tabela 5 apresenta a data do ltimo estudo brasileiro de padronizao, dos 118 instrumentos que apresentaram esse tipo de estudo. Os resultados apontaram que 53,4% dos instrumentos fizeram estudos mais recentes a partir da dcada de 90. O

93

Ana Paula Porto Noronha, Ricardo Primi & Joo Carlos Alchieri

restante apresenta informaes mais antigas coletadas nas dcadas de 70 e 80.

Discusso
Os achados do presente estudo permitiram levantar uma srie de implicaes e reflexes que sero tratadas a seguir. A constatao mais importante deste trabalho que uma parte expressiva dos instrumentos comercializados carece de fundamentao cientfica e no atende aos requisitos mnimos definidos nas perspectivas nacionais ou internacionais, como, por exemplo, a Resoluo 25/2001 (CFP, 2001) ou os padres publicados pela American Educational Research Association, American Psychological Association, National Council on Measurement in Education. Em contrapartida, supe-se que, se estudos de verificao de validade e preciso existem, alm dos que foram comentados, eles no se encontram devidamente relatados nos respectivos manuais. Qual a implicao desse fato? O comportamento humano complexo e sua avaliao tambm. Os instrumentos de avaliao propem tarefas especficas s pessoas (resolver problemas, fazer um auto-relato, desenhar, contar histrias, dentre outros) como formas de se observar a manifestao de caractersticas psicolgicas (traos latentes). A partir da maneira como as pessoas respondem, caractersticas psicolgicas especficas podem ser inferidas. A associao entre manifestao-trao latente, no bojo da lgica dos instrumentos de avaliao, precisa ser desafiada e comprovada por meio de pesquisas empricas, com a aplicao de mtodos cientficos adequados. As pesquisas, por sua vez, atestam a qualidade dos instrumentos. Se um instrumento no possui evidncias de validade, no h segurana de que as interpretaes sobre as caractersticas psicolgicas das pessoas sugeridas pelas suas repostas sejam legtimas. No se sabe o que o instrumento avalia realmente. Outra caracterstica ligada ao racional cientfico dos instrumentos a preciso. Como nenhuma avaliao livre de erro, deve-se buscar estimar o tamanho do erro esperado (ou erro padro) cometido nas avaliaes. Isso feito por meio do estudo de preciso. Se um instrumento no possui evidncias de preciso, no se tem idia da magnitude do erro cometido nas avaliaes, isto , no se pode estimar quanto os resultados mudariam se fossem dadas novas oportunidades de avaliao, tais como outro profissional avaliando o mesmo candidato empregando o mesmo mtodo, outro instrumento e/ou oportunidade com os mesmos objetivos.

Por ltimo, h a questo da padronizao. Em muitos instrumentos, a definio do que esperado e, inversamente, do que muito incomum ou diferente, feita por comparao com grupos normativos. Isso auxilia a interpretao dos resultados obtidos. A inexistncia de padronizao brasileira ou a padronizao inadequada no Brasil pode trazer dificuldades nas interpretaes dos resultados, j que as pessoas sero comparadas com expectativas que podem ser inapropriadas. Por exemplo, pode existir um nmero grande de pessoas identificadas como mais deprimidas ou como apresentando dificuldades intelectuais; no entanto, essa proporo pode estar incorreta por causa do uso de expectativas inadequadas. Considerando que muitos profissionais usam instrumentos sem que essas condies tenham sido estabelecidas em processos de seleo de pessoal, por exemplo, pode-se questionar sobre quantas decises equivocadas os profissionais vm tomando nesse contexto e qual a extenso desse prejuzo para a profisso e para a sociedade. De fato, na rea de seleo, em especial, a avaliao psicolgica tem-se tornado alvo de muitas crticas, principalmente no contexto de seleo. Uma outra anlise, ainda mais grave, a de que muitos profissionais sequer pensam criticamente a respeito de tais questes ao utilizar um instrumento psicolgico. De modo geral, esses resultados sugerem que a Psicologia brasileira tem-se caracterizado por despender pouca ateno aos fundamentos cientficos de sua prtica profissional, como tambm foi notado em alguns estudos avaliando o Provo de Psicologia (LandeiraFernanez, & Primi, 2002, Pasquali, 2002). Em sntese, a medida do CFP, no que se refere avaliao dos testes comercializados, e a indicao, aos profissionais, dos que possuem condies mnimas, teve um grande impacto para reverter o problema aqui evidenciado. Na verdade, este trabalho permitiu retratar e, de alguma forma, justificar a necessidade de uma ao mais enftica no que diz respeito situao da m qualidade dos instrumentos disponveis aos profissionais de Psicologia, uma vez que apresentou o estado da arte da rea de avaliao psicolgica. Ao contrrio do que inicialmente podiam supor os psiclogos, esse movimento promoveu o crescimento da rea, considerando que bons instrumentos e profissionais competentes e embasados por uma adequada formao profissional tendem a gerar aes mais qualificadas. Nesse sentido, uma formao profissional adequada na rea de avaliao psicolgica, se no resolver, pelo menos tende a minimizar algumas das dificuldades apontadas. Afinal, se a maioria

A constatao mais importante deste trabalho que uma parte expressiva dos instrumentos comercializados carece de fundamentao cientfica e no atende aos requisitos mnimos definidos nas perspectivas nacionais ou internacionais, como, por exemplo, a Resoluo 25/2001 (CFP, 2001) ou os padres publicados pela American Educational Research Association, American Psychological Association, National Council on Measurement in Education.

94

Parmetros Psicomtricos: uma Anlise de Testes Psicolgicos Comercializados no Brasil

dos profissionais tivesse um conhecimento bsico de Psicometria, saberia julgar e distinguir instrumentos de boa e m qualidade e, possivelmente, no compraria instrumentos inadequados, inibindo sua comercializao pela baixa demanda. Portanto, preciso, paralelamente ao trabalho de avaliao dos instrumentos, tomar medidas para educar os profissionais e estudantes no que se

refere aos princpios de Psicometria que sustentam os instrumentos e sua respectiva importncia. O presente estudo no pde atender a todas as necessidades que a rea requer e no era essa a pretenso. Aliado a isso, sugere-se que outros estudos sejam desenvolvidos, comparando os dados dos instrumentos antes-ps resoluo bem como na direo da anlise de outras variveis ou ainda na anlise das pesquisas de validade/preciso realizadas com amostras nacionais.

Recebido 21/10/02 Aprovado 10/09/04

Ana Paula Porto Noronha, Ricardo Primi & Joo Carlos Alchieri Rua Alexandre Rodrigues Barbosa, 45 Centro Cep.: 13.251-900 Itatiba SP E-mail: ana.noronha@saofrancisco.edu.br

95

Ana Paula Porto Noronha, Ricardo Primi & Joo Carlos Alchieri

Referncias

ALCHIERI, J. C. & BANDEIRA, D. R. Ensino de Avaliao Psicolgica no Brasil. In R. Primi (org.). Temas em Avaliao Psicolgica. Campinas: IDB Digital / Instituto Brasileiro de Avaliao Psicolgica (IBAP),2002, pp.35-39.

LANDEIRA-FERNANEZ, J. & PRIMI, R. Comparao do Desempenho Entre Calouros e Formandos no Provo de Psicologia 2000. Psicologia: Reflexo e Crtica. 15(1),2002, pp. 219-234. LINK, N. L. H. Coding Thematic Apperception Test: Responses Using

ALVES, I. C. B.; ALCHIERI, J. C. & MARQUES, K. Panorama Geral do Ensino das Tcnicas do Exame Psicolgico no Brasil. Anais do I Congresso de Psicologia Clnica. Universidade Presbiteriana Mackenzie. So Paulo, 2001, pp. 10-11.

Rorschach Determinants Associated with Adlerian Definitions of Movement. Dissertation Abstracts International, 60 (6-B), 2950, 1999. NORONHA, A. P. P. Anlise de Coeficientes de Testes de Inteligncia

ALVES FILHO, F. Qualquer uma das Alternativas: Conselho Federal de Psicologia Decide Avaliar, Pela Primeira Vez, a Eficcia dos Testes Psicolgicos Usados no Brasil. Isto , edio 1721, 25/09/2002, p. XXX.American Educational Research Association, American Psychological Association & National Council on Measurement in Education. Standards for Educational and Psychological Testing. New York: American Educational Research Association, 1999. ANASTASI, A. & URBINA, S. Testagem Psicolgica. Porto Alegre: Artes Mdicas, 2000.

Publicados no Brasil. Psico, 32(2), pp.73-86. NORONHA, A. P. P.; SARTORI, F. A.; FREITAS, F. A. & OTTATI, F. Informaes Contidas nos Manuais de Testes de Inteligncia. Psicologia em Estudo, 6(2), 2001, pp. 101-106. NORONHA, A. P. P.; SARTORI, F. A.; FREITAS, F. A. & OTTATI, F. Informaes Contidas nos Manuais de Testes de Personalidade. Psicologia em Estudo, 7(2), 2002, pp. 143-149. NORONHA, A. P. P.; ALCHIERI, J. C. & PRIMI, R. Elaborao de um

ANCONA-LOPEZ, M. (org.) Avaliao da Inteligncia I. So Paulo: E.P.U., 1987. AZEVEDO, M. M.; ALMEIDA, L. S.; PASQUALI, L. & VEIGA, H. M. S. Utilizao dos Testes Psicolgicos no Brasil: Dados de Estudo Preliminar em Braslia. In L. S. Almeida; S. Arajo; M. M. Gonalvez; C. Machado & M. R. Simes (orgs.). Avaliao Psicolgica: Formas e Contextos, vol. IV, Braga / APPORT, 1996, pp. 213-220.

Sistema de Referncia Nacional Sobre Instrumentos de Avaliao Psicolgica: Implantao de uma Base de Dados Relacional Sobre os Testes Psicolgicos Comercializados no Brasil . Projeto de Pesquisa financiado pela FAPESP. Processo 2001/13.736-8, 2001. PASQUALI, L. editor. Instrumentos Psicolgicos: Manual Prtico de Elaborao. Braslia: LabPAM / IBAPP, 1999. PASQUALI, L. O Provo de Psicologia ... In R. Primi (org.). Temas em

BUTCHER, J. M. Revising Psychological Tests; Lessons Learned from the Revision of the MMPI. Psychological Assessment, 12(3), 2000, pp.263-271.

Avaliao Psicolgica (pp. ?-?). Campinas: IDB Digital / Instituto Brasileiro de Avaliao Psicolgica (IBAP), 2002. PASQUALI, L. & ALCHIERI, J. C. Os Testes Psicolgicos no Brasil. In L.

CFP Conselho Federal de Psicologia. I Frum Nacional de Avaliao Psicolgica Propostas Encaminhadas Para os Conselhos Federal e Regionais de Psicologia . Braslia, 2000. CFP Conselho Federal de Psicologia (2001a). Resoluo 25/2001. Disponvel em www.pol.org.br, consulta feita em 28/12/2001. CFP Conselho Federal de Psicologia (2001b). Resoluo 30/2001. Disponvel em www.pol.org.br, consulta feita em 28/12/2001. ERTHAL, T. C. Manual de Psicometria. Porto Alegre: Artes Mdicas, 1987. HUTZ, C. S. & BANDEIRA, D. R. Tendncias Contemporneas no Uso de Testes: uma Anlise da Literatura Brasileira e Internacional. Psicologia: Reflexo e Crtica, 6(1/2),1993, pp. 85-101. ITC Comisin Internacional de Tests (2001). Diretrices Internacionales Para el Uso de los Tests. Colgio Oficial de Psiclogos. http:// www.cop.es/tests/Directrices.htm setembro 2001. JACQUEMIN, A. Ensino e Pesquisa Sobre Testes Psicolgicos. Boletim de Psicologia, v. XLV, n. 102, 1995, pp. 19-21. KROEFF, P. Sntese de Posicionamentos a Serem Feitos Quanto ao Uso

Pasquali (org.). Tcnicas de Exame Psicolgico TEP Manual. So Paulo: Casa do Psiclogo, Conselho Federal de Psicologia, 2001, pp. 195-221. PEREIRA, A. P. C. & CARELLOS, S. D. M. S. Examinando o Ensino das Tcnicas de Exame Psicolgico. Cadernos de Psicologia, 3(4), 1995, pp.33-36. PRIETO, G. & MUIZ, J. 2000. Un Modelo Para Evaluar la Calidad de los tests utilizados en Espaa. http://www.cop.es/tests/modelo.htm, 04/12/00. RIBEIRO, J. I. P. Experincias de Relaes: seus Significados na Formao de Psiclogos. Psico, 27(2), 1996, pp. 23-47. SILVERSTEIN, M. L.; MARSHALL, L. & NELSON, L. D. Clinical and Research Implications of Revising Psychological Tests. Psychological Assessment, 12(3), 2000, pp. 298-303. VASCONCELOS, Z. B. & TOLEDO de SANTANA, C. M. O Ensino das Tcnicas de Exame Psicolgico na Universidade Federal da Paraba. Anais do I Congresso de Psicologia Clnica . Universidade Presbiteriana Mackenzie, So Paulo, p.133.

96

de Testes Psicolgicos em Avaliao Psicolgica. Anais da 18 Reunio de Psicologia . Sociedade de Psicologia de Ribeiro Preto-SP, 1988, pp. 533-537.

Parmetros Psicomtricos: uma Anlise de Testes Psicolgicos Comercializados no Brasil

Allessandrini, C. D., Duarte, J. L. M., Dupas, M. A., & Bianco, M. P. F. Teste do Desenho de Silver, So Paulo, Casa do Psiclogo, 1996. Almeida, L. S., & Primi, R. BPR-5, So Paulo: Casa do Psiclogo, 2000. Alves, I. C. B., Duarte, J. L., & Duarte, W. Escala de Maturidade Mental Columbia, So Paulo: Casa do Psiclogo, 1993. Andrade, E. M., Moraes, R., & Wendel, Z. S. Questionrio de Personalidade Dadahie, Rio de Janeiro: CEPA, s/d. Andrade, E. M., & Alves, D. G. Dezesseis PF-Questionrio 16 Fatores de Personalidade. Rio de Janeiro: CEPA, 1999, 5 ed. Angelini, A., Alves, I. C. B., Custdio, E. M., & Duarte, W. M. Matrizes Progressivas Coloridas. So Paulo: Centro Editor de Testes e Pesquisas em Psicologia, 1999. Antipoff, H. Teste Minhas Mos-MM. Rio de Janeiro: CEPA, s/d. Bastos, O. P. M. VIG Bateria Burocrtica. So Paulo: Vetor, 1999. Benczik, E. B. P. Escala de Transtorno de Dficit de Ateno/ Hiperatividade (verso para professores). So Paulo: Casa do Psiclogo, 2000. Benk, A. & Simes, R. P. Inventrio Multifsico de Personalidade de Minnesota MMPI. Rio de Janeiro: CEPA, d/d. Bessa, P. P. Teste do Catlogo de Livros Bessa-Tramer. Rio de Janeiro: CEPA, 1998. Biaggio, A.M. B., & Natalcio, L. Inventrio de Ansiedade Trao-Estado. Rio de Janeiro: CEPA, 1979. Biaggio, A. Inventrio de Expresso de Raiva como Estado e Trao STAXI. So Paulo: Vetor, 1992. Biaggio, A., & Natalcio, L. Inventrio de Ansiedade de Trao-Estado IDATE. So Paulo: Vetor, 1979. Biaggio, A. Inventrio de Ansiedade de Trao-Estado IDATE C. Rio de Janeiro: CEPA, 1983. Braga, G. L. Bateria de Testes de Aptido Geral. Rio de Janeiro: CEPA, 1993. Brito, G. N. O. Escala de Avaliao do Comportamento Infantil Para o Professor. Rio de Janeiro: Entreletras, 1999. Boccalandro, E. R. Ateno Concentrada AC-15. So Paulo: Vetor,1977. ______________. Teste Verbal de Inteligncia V-47. So Paulo: Vetor, s/d. ______________. Teste No Verbal de Inteligncia-G-36. So Paulo: Vetor, 2002 ______________. Teste No Verbal de Inteligncia-G-38. So Paulo: Vetor, 2002. Boehm, A. E. Teste de Conceitos Bsicos de Boehm. Rio de Janeiro: CEPA, 1977. Both, F. J. MTB- Srie Both. So Paulo: Casa do Psiclogo, 1974. Brito, G. N. O. Escala de Avaliao do Comportamento Infantil Para o Professor- EACI-P. Rio de Janeiro: Entreletras, 1999. Chamat, L. S. J. Coleo Papel de Carta. So Paulo: Vetor, 1997. Cambraia, S. V. Ateno Concentrada. So Paulo: Vetor, 2002.

Campos, M. R. Teste de Maturidade para a Leitura. Rio de Janeiro: CEPA, 1994. Campos, C. A. I., Duarte, M. R., & Lima, T. Os Contos de Fadas e a Psicopedagogia. So Paulo: Vetor, 1998. Campos, F. Matrizes Progressivas Escala Geral. Rio de Janeiro: CEPA, 2001. _________. Matrizes Progressivas Escala Avanada. Rio de Janeiro: CEPA, 2002. Catell, R. B., & Catell, A. K. S. Teste Equicultural de Inteligncia. Rio de Janeiro: CEPA, s/d. Carvalhaes, J. Destreza Digital-TC. So Paulo: Vetor, s/d. Clawson, A. Bender Infantil. Porto Alegre: Artes Mdicas, 1980. Costa, F. R. Teste de Raciocnio Lgico-Numrico. So Paulo: Vetor, s/ d. _________. Escala de Personalidade de Comrey. So Paulo:Vetor, 1997. _________. Teste de Ateno Concentrada, Rapidez e Exatido. So Paulo: Vetor, 1999. Corona, L. C. G. Escala Reduzida do Autoconceito ERA. Rio de Janeiro: CEPA, 1999. _____________. Escala de Preconceito Profissional-EPP. Rio de Janeiro: CEPA, s/d. Cunha, J. Cornel Index CI. Rio de Janeiro: CEPA, 1949. Cunha, J., & Nunes, M. L. T. Testes das Fbulas. So Paulo: Casa do Psiclogo, 2000. Cunha, J. A. Escalas de Beck - Manual da Verso em Portugus. So Paulo: Casa do Psiclogo, 2001. Cunha, J. A., Moraes, M. I. B., Rocha, N. S., Werba, L., Vale, R. R., Spader, M., Moraes, J. E. B. C., Salerno, I. C. & Costa, L. Sondagem Intelectual. Rio de Janeiro: CEPA, s/d. Cunha, S. E. Teste dos Conjuntos Emparelhados. Rio de Janeiro: CEPA, 1980. Cunha, S. E.; Coutinho, M. T. C. (1993). Teste Diagnstico de Habilidades do Pr-Escolar. Rio de Janeiro: CEPA, 1993, 2 ed. Del Nero, C. Programa de Hbitos e Desempenho no Estudo PHD. So Paulo: Vetor, 1997. __________. Teste de Capacidade Intelectual-TCI. So Paulo: Vetor, 1982. Del Nero. Levantamento de Interesses Profissionais LIP. So Paulo: Vetor, 1984. Del Nero, C. Programa de Atitudes dos Pais PAP. So Paulo: Vetor, 1997. _________._Registro de Atitudes e Comportamento. So Paulo: Vetor, s/d. Del Prette, Z. A. P., & Del Prette A. Inventrio de Habilidades Sociais IHS. So Paulo: Casa do Psiclogo, 2001. Devoet, B., & Grossuin, P. Inventrio e Auto-Anlise dos Interesses Profissionais, Rio de Janeiro: CEPA, 2001.

Relao de Instrumentos

97

Duarte, J. L. Teste D70. So Paulo: Centro Editor de Testes e Pesquisas em Psicologia, 1996. Edites. MacQuarrie Teste de Relaes Espaciais. So Paulo: Edites, 1976. Ferreira, M. C. Teste Evolutivo de Percepo Visual. Rio de Janeiro: Entreletras, 2001. Figueiredo, V. Escala de Inteligncia Weschler para Crianas III edio WISC III. So Paulo: Casa do Psiclogo, 2002. Freitas, A. M. L. Teste de Zulliger. So Paulo: Casa do Psiclogo, 1996. Freitas JR., O. Reproduo de Figuras. Rio de Janeiro: CEPA, 2001.

Macquarrie, T. W. Teste de Relaes Espaciais. So Paulo: Editora Edites, 1953. Minicucci, A. Liderana e Poder. So Paulo: Vetor, 1986. __________. Teste Caracterolgico-TCO. So Paulo: Vetor, 1996. __________. Teste Palogrfico. So Paulo: Vetor, 1991. __________. Teste de Estruturas Vocacionais-TEV. So Paulo: Vetor, 1983. __________. Teste de Liderana Situacional-TLS. So Paulo: Vetor,

Goulart,I. B. Teste Raven de Operaes Lgicas. Rio de Janeiro: CEPA, 1975. Goulart, I. B., & Bregunci, M. G. C. Teste de Aptido Mecnica. Rio de Janeiro: Entreletras, 1998. Gouveia, J. P., Ramalheira, C., Robalo, M. T., Borges, J. C., & Almeida, L. R. Inventrios de Expectativas e Crenas Pessoais Acerca do lcool. So Paulo: Casa do Psiclogo, 1996. Grados, J., & Fernandz, E. Teste de Frases Incompletas com Aplicao Indstria-FIGS. Rio de Janeiro: Entreletras, 2000. Growald, L., & Growald, A. Teste de Compreenso Tcnico-Mecnica. So Paulo: Vetor, 1983. Guerra, D. N. Teste de Reteno Visual. Editora CEPA, 1995. Heiss, R. O Teste das Pirmides de Cores. So Paulo: Vetor, 1982. Hutz, C. S., & Nunes, C. H. S. S. Escala Fatorial de Ajustamento Emocional Neuroticismo. So Paulo: Casa do Psiclogo, 2001. Justo, H., & Van Kolck, T. O Teste das Pirmides de Cores. So Paulo: Vetor, 1996. Krausz, R. R. Diagnstico Organizacional Forma I e Forma II. So Paulo: Casa do Psiclogo, 1994. ___________. Inventrio de Administrao do Tempo ADT. So Paulo: Casa do Psiclogo, 1994. Kuder, G. F. Kuder- Inventrio de Interesses. Rio de Janeiro: Cepa, 2000. Lipp, M. Inventrio de Sintomas de Stress para Adultos de Lipp ISSL. So Paulo, Casa do Psiclogo 1994. Lipp, M. E., & Lucarelli, M. D. M. Escala de Stress Infantil ESI. So Paulo: Casa do Psiclogo, 1998.

2002. Mira y Lopez, E. Psicodiagnstico Miocintico PMK. Rio de Janeiro: CEPA, 2001. Moraes, R., Andrade, E. M., & Alves, D. G. Teste Coletivo de Inteligncia Para Adultos. Rio de Janeiro: CEPA, 2001. Murray, H. A., & Morgan, R. Teste de Apercepo Temtica TAT. So Paulo: Casa do Psiclogo, 1943. Nagelschmidt, A. M. C. Mandalas de Palavras. So Paulo: Vetor, 1995. Neiva, K. M. C. Escala de Maturidade Para a Escolha Profissional. So Paulo: Vetor, 1999. Nero, C. D. Levantamento de Interesses Profissionais. So Paulo: Vetor, 1975. _________. Programao de Hbitos e Desempenho no Estudo. So Paulo: Vetor, 1977. _________. Panorama de Atitudes dos Pais. So Paulo: Vetor, 1997. Nijamkin, G. C., Braude, M. G., & Tardico L. S. L. P. Questionrio Desiderativo. So Paulo: Vetor, s/d. Nick, E. Como Chefiar? Rio de Janeiro: CEPA, s/d. ______. Inventrio Ilustrado de Interesses GEIST. Rio de Janeiro: CEPA, 1999. ______. Domins D-48. Rio de Janeiro: CEPA, 1999. Novaes, M. H. Testes de Organizao Percepto-motora. Rio de Janeiro: CEPA, 1980. Oliveira, R. Questionrio Vocacional de Interesse. So Paulo: Vetor,

Lopes, M. S., & Freitas, A. M. L. Inventrios da Atitude de Trabalho IAT. So Paulo: Casa do Psiclogo, 1997.

1982. _________. Questionrio do Adolescente. So Paulo: Vetor, 1988.

Lpez, E. M. Questionrio ntimo. So Paulo: Vetor, s/d. _________. Avaliao de Chefia. So Paulo: Vetor, 1994. Maia, J. Prova de Nvel Mental. Rio de Janeiro: CEPA, 1949. _________. Teste No Verbal de Inteligncia Para Crianas-R2. So _____. Teste Aleatorizado 017 Programador. Rio de Janeiro: CEPA, 1983.

98

Paulo: Vetor, 2000.

_________ . Teste No Verbal de Inteligncia R1. So Paulo: Vetor, 2000. Oliveira, M. S. Figuras Complexas de Rey: Teste de Cpia e Reproduo de Memria de Figuras Geomtricas Complexas. So Paulo: Casa do Psiclogo, 1999. Pacheco, M. T. A. Teste de Apercepo Infantil CAT-S. Campinas: Editora Editorial Psy, 1992. ______________. Teste de Apercepo Para Idosos. Editorial Psy, 1992. ______________. Teste de Apercepo Infantil. So Paulo: Livro Pleno, 2000. ______________. Teste de Apercepo Infantil CAT-H. So Paulo: Livro Pleno, 2000. Pasquali, L., Gouveia, V. V., Andriola, W. B., Miranda, F. J. & Ramos, A.L. M. Questionrio de Sade Geral de Goldberg QSG. So Paulo: Casa do Psiclogo, 1996. Pasquali, L., Azevedo, M. M., & Ghesti, I. Inventrio Fatorial de Personalidade IFP. So Paulo: Casa do Psiclogo, 1997. Pinto, E. B., Vilanova, L. C. P. & Vieira, R. M. O Desenvolvimento do Comportamento da Criana no 1 Ano de Vida. So Paulo: Casa do Psiclogo, 1997. Piovani, C. M., Piovani, G. Teste Edites de Inteligncia. So Paulo: Edites, s/d. Piovani, G. Medida de Fluncia Verbal. So Paulo: Edites, s/d. ________. Memria-R. So Paulo: Edites, s/d. Piovani, C. Bateria TSP. So Paulo: Edites, s/d. Piovani, G., & Piovani, C. Ateno Difusa-MPM. So Paulo: Edites, 1976. Poppovic, A. M. & Moraes, G. G. Prontido Para a Alfabetizao. So Paulo: Vetor, s/d. Poppovic, A. M. Teste Metropolitano de Prontido Forma R, So Paulo, Vetor, s/d. Poppovic, A. M. Escala de Inteligncia Wechsler Para Crianas WISC. Rio de Janeiro: CEPA, 1964. Rainho, O. Teste de Compreenso Mecnica Forma A. Rio de Janeiro: CEPA, 1978. Rainho, O. & Ribeiro, C. C. Cubos de Kohs. Rio de Janeiro: CEPA, 1993. Rainho, O. Bateria Fatorial Cepa, Rio de Janeiro. Rio de Janeiro: CEPA, 2002. Reale, D. O. Escala de Sociabilidade e Emotividade. So Paulo: Edites, s/d. Rorschch, H. Teste de Rorschach. So Paulo: Editora Manole, 1921. Schoenfeldt, B. K. Becasse Atitudes Socioemocionais em Crianas Prescolares. So Paulo: Vetor, 1999.

Schoenfeldt, B. K. Becasse Maturidade Escolar. So Paulo: Vetor, s/d. Souza, F. V., & Cambrais, S. V. Teste dos Relgios. So Paulo: Vetor, 2002. Stein, L. M. Teste de Desempenho Escolar TDE. So Paulo: Casa do Psiclogo, 1994. Tardivo, L. S. L. P. C. O Teste de Apercepo Infantil e o Teste das Fbulas de Duss. So Paulo: Vetor, 1998. Thurstone, L. L., Angelini, A. L., & Angelini, H. R. C. Inventrio de Interesses Profissionais. Rio de Janeiro: CEPA, 2001. Tonglet, E. C. Teste de Prontido Emocional Para Motoristas. So Paulo: Vetor, 1998. __________. Bateria de Funes Mentais Para Motoristas - 1. So Paulo: Vetor, 1999. __________. Bateria de Funes Mentais Para Motoristas - 2. So Paulo: Vetor, 2000. __________. Bateria de Funes Mentais Para Motoristas - 3. So Paulo: Vetor, 1999. __________. Bateria de Funes Mentais Para Motoristas 4. So Paulo: Vetor, 2002. Torroela, G. Questionrio Confidencial. So Paulo: Vetor, s/d. Vaz, C. E. Z- Teste Tcnica de Zulliger. So Paulo: Casa do Psiclogo, 1998. Villas-Boas, J. T. F. Teste Projetivo Omega. Rio de Janeiro, CEPA, s/d. Wartegg, E. Teste de Completamento de Desenhos Wartegg. So Paulo: Centro Editor de Teste e Pesquisas em Psicologia, 1939. Wechsler, S. M. Desenho da Figura Humana de Wechsler. Campinas: Editorial Psy, 1996. _____________. Avaliao da Criatividade por Figuras e Palavras. Campinas: Impresso Digital do Brasil Grfica e Editora Ltda, 2002. Wechsler, D. WISC-III: Escala de Inteligncia Weschsler Para Crianas. So Paulo: Casa do Psiclogo, 1991. Weil, P., & Nick, E. INV. Rio de Janeiro: CEPA, 1951. Witter, G.P., & Copit, M. S. Lendo e Escrevendo. So Paulo: Vetor, s/ d. Zacharias, J. J. M. Questionrio de Avaliao Tipolgica QUATI. So Paulo: Vetor, 2000. Zacharias, J. J. M., & Prado, A. C. A. L. Diagnstico Tipolgico Organizacional. So Paulo: Vetor, s/d.

99