Você está na página 1de 17

Fundamentos de um Programa de Avaliao Educacional*

Heraldo Marelim Vianna**

Resumo O artigo oferece reflexes sobre aspectos da avaliao educacional e procura estimular diferentes pensares sobre a definio de uma poltica de avaliao do sistema educacional brasileiro. Destaca, inicialmente, a relao entre avaliao e planejamento escolar; associa a idia de avaliao a uma efetiva poltica de ao e procura estimular estudos sobre as possibilidades dos testes referenciados a critrio. O trabalho chama a ateno para a influncia da diversidade socioeconmica e cultural nas avaliaes e mostra o significado da avaliao na tomada de decises. A questo da disseminao dos resultados vista como ponto fundamental no impacto da avaliao sobre os sistemas educacionais. Outros aspectos relacionados temtica geral sobre padres e avaliao so igualmente considerados. Palavras-chave: Avaliao educacional; Poltica de ao; Testes referenciados a critrio; Tomada de deciso; Meta-avaliao; Disseminao de resultados.

The basis of an Educational Assessment Program


Abstract This article offers a discussion of various aspects of educational evaluation and attempts to stimulate other ideas on defining an evaluation policy for the Brazilian educational system. First, it highlights the relationship between evaluation and school planning; it associates the idea of evaluation to an effective action policy and seeks to foster studies about the possibilities of the Criterion Referenced Tests. It also calls attention to the influence of socio-economic and cultural diversity on evaluation and shows the relevance of evaluation to decision-taking processes. The issue of disseminating the results is considered fundamental to the impact evaluation has on educational systems.

* **

Artigo publicado na revista Estudos em Avaliao Educacional , n. 28, jul./dez. 2003. Doutor em Educao, PUC-SP; Pesquisador da Fundao Carlos Chagas, So Paulo, SP. E-mail: hvianna@fcc.org.br

12

Heraldo Marelim Vianna

Other aspects related to the general topic patterns and evaluation are also discussed. Keywords: Educational evaluation; Action policy; Criterion Referenced Tests; Decisiontaking processes; Meta-evaluation; Dissemination of results.

Fundamentos de un Programa de Evaluacin Educacional


Resumen El artculo propone reflexiones sobre aspectos de la evaluacin educativa y trata de estimular diferentes pensamientos sobre la definicin de una poltica de evaluacin del sistema educativo brasileo. Inicialmente, resalta la relacin entre evaluacin y planificacin escolar; hace una asociacin de la idea de evaluacin con una efectiva politica de accin y procura estimular estudios sobre las posibilidades que tienen los tests relativos a criterio. El trabajo llama la atencin sobre la influencia de la diversidad socioeconmica y cultural en las evaluaciones y muestra el sigificado de la evaluacin en la toma de decisiones. Se sustenta la cuestin sobre la diseminacin de los resultados como punto fundamental en el impacto de la evaluacin sobre los sistemas educativos. Tambin son igualmente considerados, otros aspectos relacionados con el tema general sobre padrones y evaluaciones. Palabras clave: Evaluacin educativa; Poltica de accin; Tests relativos a criterio; Toma de decisin; Meta evaluacin; Diseminacin de resultados.

Meta: Avaliao | Rio de Janeiro, v. 1, n. 1, p.11-27, jan./abr. 2009

Fundamentos de um Programa de Avaliao Educacional

13

Tudo aquilo que sei do mundo, mesmo por cincia, eu o sei a partir de uma viso minha ou de uma experincia do mundo sem a qual os smbolos da cincia no poderiam dizer nada. Todo o universo da cincia construdo sobre o mundo vivido, e se queremos pensar a prpria cincia com rigor, apreciar exatamente seu sentido e seu alcance, precisamos primeiramente despertar essa experincia do mundo da qual ela a expresso segunda. A cincia no tem e no ter jamais o mesmo sentido de ser que o mundo percebido, pela simples razo de que ela uma determinao ou uma explicao dele. [...] A percepo no uma cincia do mundo, no nem mesmo um ato, uma tomada de posio deliberada; ela o fundo sobre o qual todos os atos se destacam e ela pressuposta por eles. (MERLEAUPONTY, 1999, p. 3-6).

As reflexes sobre avaliao, ora registradas, decorreram de experincias pessoais a partir de 1962 e se expandiram aps 1969, compreendendo a publicao de livros e a elaborao de artigos, especialmente os publicados em Educao e Seleo (1980-1989) e em Estudos em Avaliao Educacional (1990-2003), ambas edies da Fundao Carlos Chagas, So Paulo, SP. Contriburam, tambm, na atualidade, com bastante intensidade, para a configurao dessas percepes, as discusses e o excelente material gerado pelo Grupo de Trabajo sobre Estndares y Evaluacin del Preal , sobre Las polticas de evaluatin de logros de aprendizaje en los sistemas educativos de Amrica Latina, no Foro de Discusin 2002, de que participaram educadores da Argentina, Brasil, Chile, Colmbia, Costa Rica, Equador, Estados Unidos, Guatemala, Honduras, Mxico, Nicargua e Peru (LAS POLITICAS DE EVALUATIN..., 2002). As reflexes aqui consignadas procuram identificar aspectos da ao de avaliar, no conjunto das prticas educacionais, e esperam levar a outros pensares capazes de uma definio dos marcos fundamentais de uma poltica de avaliao no sistema educacional brasileiro. Os elementos levantados nos vrios tipos de avaliao seja de sala de aula ou de sistemas devem ser analisados por professores e tcnicos especializados nas vrias reas curriculares, a fim de que sejam incorporados ao planejamento escolar e contribuam para o processo educacional. A avaliao no um valor em si e no deve ficar restrita a um simples rito da burocracia educacional, necessita integrar-se ao processo de transformao do ensino/aprendizagem e contribuir, desse modo,
Meta: Avaliao | Rio de Janeiro, v. 1, n. 1, p.11-27, jan./abr. 2009

14

Heraldo Marelim Vianna

ativamente, para o processo de transformao dos educandos. A expresso cultura da avaliao integra, atualmente, a constelao de palavras tcnicas no mbito da comunidade educacional e aos poucos se vai tornado verdadeiro lugar comum, quase que simples figura de retrica; no entanto, preciso que essa expresso se liberte do seu carter de mero trusmo e se transforme numa efetiva poltica de ao. As questes relacionadas a emprego nem sempre adequado dos instrumentos de medida em avaliao educacional devem ser dimensionadas a fim de que os resultados faam sentido e permitam a orientao das atividades docentes; assim, importante que se aprofundem estudos ligados avaliao de processo com o uso de instrumentos referenciados a critrio, como pea fundamental das atividades de aprendizagem em sala de aula. H que pensar em termos de unificao das vrias avaliaes em relao aos sistemas educacionais; contudo, fundamental que cada sistema considere a diversidade do seu espao social, econmico e cultural, a fim de evitar interpretaes comprometidas e que comparaes intra e entre sistemas no levem a colocaes destitudas de valor educacional ou que gerem proposies falaciosas. Os resultados das avaliaes no devem ser usados nica e exclusivamente para traduzir um certo desempenho escolar. A sua utilizao implica servir de forma positiva na definio de novas polticas pblicas, de projetos de implantao e modificao de currculos, de programas de formao continuada dos docentes e, de maneira decisiva, na definio de elementos para a tomada de decises que visem a provocar um impacto, ou seja, mudanas no pensar e no agir dos integrantes do sistema. A avaliao educacional no subsiste isoladamente, devendo estar associada a outros programas, destacando-se, inicialmente, o de capacitao docente; em que a rea da avaliao deve integrar, necessariamente, o conjunto das atividades que levam formao de professores em quaisquer dos nveis de ensino; por outro lado, a avaliao precisa estar ligada pesquisa educacional voltada para a realidade dos problemas educacionais relevantes. A ltima dcada do sculo XX foi rica de avaliaes em larga escala, no mbito internacional e nacional, neste ltimo caso nos vrios nveis da administrao governamental; nessa dcada que se inicia, comeo de um novo sculo, contemplando
Meta: Avaliao | Rio de Janeiro, v. 1, n. 1, p.11-27, jan./abr. 2009

Fundamentos de um Programa de Avaliao Educacional

15

o passado, devemos nos perguntar:- qual o impacto dessas avaliaes? E se no houve efetivamente qualquer tipo de impacto, por mnimo que tenha sido, por que no ocorreu? Avaliao e crtica da avaliao (meta-avaliao) devem coexistir em um projeto educacional bem estruturado. A avaliao educacional no objetiva subsidiar, exclusivamente, a cpula administrativa; avaliao deve seguir-se um trabalho bem planejado de difuso dos resultados e das suas anlises, a fim de que a sociedade (interna e externa ao sistema) acompanhe o trabalho institucional e possa julgar o seu mrito, inclusive a eficincia transformadora da sua ao. A partir do esprito de uma nova cultura da avaliao, alm da difuso dos resultados, necessrio que se definam diretrizes sobre como usar, produtivamente, esses resultados na melhoria do processo de uma educao que seja eficiente e conseqente, evitando-se, desse modo, que os resultados fiquem restritos a uma adjetivao pouco satisfatria. Uma poltica de estruturao de programas de avaliao no pode ficar restrita ao mbito da escola, deve, necessariamente, abranger todos os nveis da hierarquia da administrao educacional, a partir das Secretarias de Estado, quando for o caso, passando por outros nveis, inclusive tcnicos, at chegar sala de aula e ao professor. A avaliao, conseqentemente, no uma ao isolada, integra toda a comunidade educacional e a prpria sociedade. A definio de uma poltica de avaliao educacional demanda mltiplas consideraes, no se restringindo, apenas, ao domnio do conhecimento e ao seu uso na prtica. preciso considerar que, a par do conhecimento para um futuro desempenho, outras dimenses (sociais, culturais e at mesmo ticas) devem ser necessariamente avaliadas e que o programa envolva aspectos quantitativos e qualitativos, incluindo, se possvel, interesses, atitudes e valores. Ao implementar um programa de avaliao h uma preocupao maior em organizar diferentes equipes para fins diversos: administrar, elaborar manuais, construir instrumentos, elaborar questionrios, definir logstica, orar despesas, processar dados, analisar informaes, elaborar relatrios; contudo, quase sempre se omite a equipe responsvel pela disseminao dos resultados, junto aos rgos centrais, s escolas, s famlias, criando-se, assim, um vcuo nas comunicaes, talvez o responsvel maior pela
Meta: Avaliao | Rio de Janeiro, v. 1, n. 1, p.11-27, jan./abr. 2009

16

Heraldo Marelim Vianna

ausncia de um efetivo impacto transformador. Avaliaes internas so realizadas pelas unidades do sistema com freqncia s vezes modesta, e avaliaes externas so promovidas por diferentes rgos oficiais, muitas vezes com a colaborao de instituies privadas, havendo, entretanto, uma falta de sincronia entre essas avaliaes, que no tm uma ao efetiva na melhoria da educao. Aps sua aplicao, deixam as avaliaes de utilizar o seu potencial energtico, entregando-se a uma verdadeira exausto, at que novo programa se realize, igualmente sem maiores repercusses. A avaliao no uma atividade em abstrato, que se realize, como muitas vezes ocorre na prtica, ignorando a diversidade dos currculos e a multiplicidade de metodologias de ensino empregadas por professores com diferentes formaes (ou ausncia de qualquer formao pedaggica), alm de posicionamentos diversos quanto s suas reas de atuao. importante que as avaliaes sejam discutidas por diferentes segmentos sociais e os seus resultados examinados em funo da diversidade das caractersticas sociais e em relao proposta poltica que define as linhas mestras da educao. A ausncia dessas preocupaes pode comprometer a continuidade dos programas de avaliao. Um dos problemas a considerar em um programa de avaliao centra-se na capacitao tcnica daqueles que se propem a concretizar o empreendimento. Os avaliadores nem sempre dispem de uma formao especifica, abrangente da complexidade dos diferentes procedimentos avaliativos; executando, desse modo, as suas atividades de maneira amadorstica e na base de uma possvel experincia pessoal. o fazer por imitao ou o fazer pela reproduo de prticas tradicionais no ambiente escolar. H, assim, necessidade, talvez urgentssima, de formao de quadros tcnicos, a partir de pessoas com experincia docente, para que as avaliaes tenham prosseguimento e no fiquem restritas a uma existncia episdica sem maiores conseqncias. H que pensar nos projetos de avaliao para o ensino bsico no que dispem as Propostas Curriculares Nacionais (PCN), em termos da realidade nacional vivenciada pelos professores. Houve um grande esforo do governo federal, no caso especfico do Brasil, em definir, s vezes com excesso de detalhes, o que se propunha para o ensino fundamental e mdio. Entretanto, uma pergunta se apresenta de imediato a quem se proponha a analisar o que vem sendo efetivamente realizado: - as avaliaes esto
Meta: Avaliao | Rio de Janeiro, v. 1, n. 1, p.11-27, jan./abr. 2009

Fundamentos de um Programa de Avaliao Educacional

17

realmente centradas nas propostas curriculares? A essa indagao segue-se outra: - as propostas curriculares esto sendo efetivamente seguidas no pas? As propostas curriculares deveriam ser os referenciais para as avaliaes, que definiriam padres mnimos de desempenho, mas uma terceira pergunta se apresenta: - no seriam os livros didticos, na sua diversidade qualitativa, os verdadeiros referenciais no apenas para a avaliao, mas para o prprio ensino? As instituies educacionais, nos seus diversos nveis, ao detalharem seu programas indicativos das disciplinas que integram o programa curricular, devem, em funo dos objetivos institucionais e as caractersticas educacionais, culturais e sociais do seu corpo discente, definir, operacionalmente, cada um dos conhecimentos associados s habilidades esperadas, a fim de que possam caracterizar o nvel de capacidade de cada um e promover a acelerao dos que se acham em dficit com os padres estabelecidos. Ao mesmo tempo, impe-se dar cincia da situao aos interessados, inclusive famlia, para que participem da atividade docente. importante que a sociedade saiba a que a escola se prope, em termos de competncias educacionais e sociais necessrias, para a concretizao da cidadania. Os padres para avaliao devem ser pontos de referncia para toda a populao e refletir as necessidades dessa populao, independentemente de etnia, nvel social e econmico, evitando-se discriminaes que possam criar diferentes nveis de cidados e acentuar ainda mais as desigualdades que marginalizam e estigmatizam os indivduos. Todos os seres humanos tm condies de realizar diversos tipos de aprendizagem e estruturar novos comportamentos desejveis, limitando-se a questo, na realidade ao timing de cada um, que varia em funo de diferentes contingncias, como acentuaram Benjamin Bloom e outros, na definio e estruturao de programas de mastery learning (aprendizagem para o domnio). A definio de padres ou parmetros educacionais condiciona, certamente, o tipo de avaliao a realizar e as caractersticas dos instrumentos a empregar nos diversos momentos do processo de aprendizagem que visa a formao e, simultaneamente, a transformao dos alunos. preciso ressaltar que esses padres no se devem revestir de um carter esttico de permanncia no tempo; ao contrrio, devem ser revistos periodicamente, elaborados luz de experincias, modificados, quando for o caso, e at mesmo suprimidos se no mais corresponderem realidade socioeducacional e no
Meta: Avaliao | Rio de Janeiro, v. 1, n. 1, p.11-27, jan./abr. 2009

18

Heraldo Marelim Vianna

atenderem s exigncias e necessidades da sociedade. Ainda que a avaliao por critrio deva ser norma geral para o ciclo inicial de formao, entre 7 e 14 anos de idade, e instrumentos por norma possam ser usados nas demais fases, inclusive nos cursos de nvel superior, ou que se faam combinar em um nico instrumento a caracterstica de critrio e norma, apesar de seus resultados serem mais complexos de interpretar, queremos crer que, independentemente do aspecto formal dos instrumentos, o importante, nessa fase das consideraes ora oferecidas, chamar a ateno para a necessidade de eliminar o carter coercitivo/punitivo atribudo avaliao, que sanciona alunos, impondo-lhes reprovaes nem sempre justificveis e, s vezes, de forma indireta, solicitando que os estudantes de baixo desempenho, mesmo acima de um possvel mdia terica, se afastem espontaneamente da instituio para no prejudicar o prestgio que esta possa usufruir na sociedade, diante de um possvel futuro fracasso do aluno, especialmente no acesso ao ensino superior. O que realmente importa que a avaliao tenha um efetivo carter formativo e represente um plus que faa diferena para melhor na vida do aluno; contudo, para que isso ocorra, preciso um passo mais amplo no processo de formao continuada dos professores, preparando-os para um agir diverso daquele consagrado pela tradio rotineira. necessrio que no se superestime a questo da definio de parmetros e competncias desejadas. Ao lado disso, e prioritariamente, imprescindvel que se estruture todo um processo de formao continuada dos professores e do corpo administrativo para que ambos recebam o embasamento necessrio concretizao satisfatria de uma tarefa que certamente demanda grandes esforos de planejamento. So conhecidas as deficincias profissionais, sobretudo numa poca de pouca valorizao do magistrio e do pouco atrativo que ele representa para os mais talentosos. Alm do mais, ressaltemos a imperiosidade do preparo de material didtico adequado a diferentes situaes, a fim de superar possveis desvios ou deficincias de aprendizagem e impedir, assim, que se consolidem situaes que mais tarde sero difceis de reverter. A avaliao no deve utilizar critrios de classificao das escolas (ranking), segundo o desempenho da instituio, para fins de divulgao e conhecimento pblico das que poderiam ser consideradas como sendo as melhores, em funo dos seus resultados. As
Meta: Avaliao | Rio de Janeiro, v. 1, n. 1, p.11-27, jan./abr. 2009

Fundamentos de um Programa de Avaliao Educacional

19

possveis e reduzidas vantagens do ranking no desenvolvimento de uma nova cultura da avaliao acabam por ser superadas por uma problemtica bem mais complexa, que a gerao de uma competitividade negativa no interior da instituio. O insucesso em avaliaes pode resultar de numerosos fatores (sociais, econmicos e at mesmo culturais, como no caso bem conhecido recentemente de escolas na Inglaterra, aps a chamada era Thatcher) e no, necessariamente, de razes pedaggicas associadas provvel ineficincia do magistrio. O possvel insucesso, caso seja institucional, deve ser objeto de pesquisa, anlise e discusses dentro da prpria instituio, com a participao efetiva e solidria da famlia, que tambm integra o processo de avaliao. Um problema a considerar na implantao de um programa de avaliao educacional centra-se na indagao sobre o que fazer com os resultados obtidos. preciso considerar, por outro lado, se esses resultados sero realmente compreendidos e absorvidos pelos vrios segmentos interessados. Certamente que h necessidade do estabelecimento de relao dialgica entre todos os participantes; por outro lado, devese pensar, igualmente, na necessidade da formao de equipes tcnicas capazes de analisar os dados, identificar problemas e atentar para as implicaes desses mesmos resultados na definio das polticas pblicas no campo da educao. A sociedade, por sua vez, deve aperceber-se do significado da avaliao e das lies que pode proporcionar para toda a comunidade, mesmo para os segmentos que mantm frgeis relaes com o mundo da educao. A avaliao educacional em uma instituio ou em um sistema no deve resultar de decises individuais, mas refletir um consenso em que diferentes atores professores, administradores, tcnicos, alunos e a prpria famlia, como interprete da sociedade procuram definir os objetivos e finalidades da avaliao, alm de outros pontos de relevncia, como o tipo de instrumento a utilizar, a definio de responsabilidades dos construtores de questes/itens, a estruturao de procedimentos logsticos para a sua aplicao, a escolha de um tipo de escore ou nota que faa sentido para o grupo avaliado e para a prpria sociedade, alm, naturalmente, de definir os parmetros para a anlise dos resultados e estabelecer os grupos responsveis por sua interpretao; contudo, ainda que tudo isso e outros elementos mais sejam estabelecidos de forma criteriosa, preciso colocar uma indagao relevante em toda e qualquer avaliao: - o que fazer com os resultados? Essa uma questo com inmeras implicaes, que
Meta: Avaliao | Rio de Janeiro, v. 1, n. 1, p.11-27, jan./abr. 2009

20

Heraldo Marelim Vianna

precisam ser consideradas e amplamente discutidas, a fim de evitar que os dados levantados no sejam condenados ao silncio de um arquivo morto. Uma questo que merece ser objeto de reflexo consiste na relao entre o professor e o processo de avaliao. Qual o uso que os professores fazem dos resultados das mltiplas avaliaes a que seus alunos so expostos durante sucessivos anos letivos? necessrio sempre pensar na avaliao no contexto de um processo formativo: - a avaliao para orientar os procedimentos docentes; a avaliao para sugerir novas estratgias eficientes de ensino que levem a uma aprendizagem que seja relevante para o aluno como pessoa humana; a avaliao como um fator de orientao de todo o processo docente, envolvendo no apenas conhecimentos, mas incluindo o despertar de novos interesses e a formao de valores; a avaliao como uma ponte que une professor e aluno visando a um processo interativo gerador de novas aprendizagens; a avaliao como fator capaz de gerar elementos que facilitem a superao dos problemas curriculares e que muitas vezes decorrem de conflitos entre a realidade da escola e o contexto sociocultural em que a mesma se situa. A avaliao, enfim, deve ser um dilogo de todo o sistema com a sociedade e do qual o professor participa, mostrando os resultados do seu trabalho, inclusive reconhecendo possveis erros, mas, ao mesmo tempo, procurando apresentar novas idias para que a escola se revele uma instituio criativa que consegue superar os obstculos da burocracia que muitas vezes a sufoca e envolve todo o sistema. Existe uma necessidade imperativa de que sejam definidos padres nacionais e regionais que funcionem como referenciais orientadores para os diferentes tipos de avaliao; entretanto, necessrio que esses padres ou parmetros no ignorem o carter vertiginoso das modificaes que os conhecimentos sofrem a fim de que a escola no seja reprodutora de elementos obsoletos. Ainda que a escola muitas vezes seja agncia revestida de grande conservadorismo, no pode ignorar as mudanas que ocorrem nas vrias dimenses da sociedade e permanecer apegada a padres rgidos, inclusive quanto a procedimentos avaliativos. Precisam ser geradas novas formas de avaliar o que demandar esprito criativo dos educadores , combinando elementos quantitativos e qualitativos, com maior destaque para esses ltimos, mas suplantando a dicotomia a que se sujeitam os avaliadores, que se restringem a instrumentos referenciados a critrios e a normas. Ressaltemos, contudo, que os padres antes
Meta: Avaliao | Rio de Janeiro, v. 1, n. 1, p.11-27, jan./abr. 2009

Fundamentos de um Programa de Avaliao Educacional

21

referidos no devem ser obrigatoriamente consensuais, impondo-se que na sua definio sejam consideradas as diversidades sociais, econmicas e culturais. As avaliaes, alm das caractersticas normais relacionadas a diversos tipos de validade (contedo, preditiva e de construto), devem ter, necessariamente, validade conseqencial. A expresso pode determinar controvrsias, necessitando, portanto, ser plenamente esclarecida. A validade conseqencial no se refere a distines, prmios e/ou bnus, e muito menos a rankings e menos ainda a comparaes. fundamental que os resultados das avaliaes cheguem aos alunos, aos pais, aos educadores e a toda a comunidade educacional, no devendo ficar restrita apenas aos policy-makers da administrao escolar. Os resultados das avaliaes tm suas implicaes, no podendo ser tratados, assim, como uma contabilidade educacional. A avaliao deve ter, forosamente, conseqncias, se pretendemos pensar em termos da consolidao da chamada cultura da avaliao. A conseqncia a que nos referimos est relacionada a novas formas de pensar e agir, demonstrando, assim, que os resultados de uma avaliao fazem diferena e promovem o crescimento da pessoa como ser humano e membro da sua sociedade. Esta sociedade, por sua vez, no pode ficar distanciada do que ocorre na escola, indiferente constatao dos resultados apresentados, que devem ser discutidos com racionalidade e definidos os caminhos para uma soluo sensata dos problemas que essas avaliaes refletem. Avaliar um agir que se reveste de complexidade, ainda que quase todos professores e no-professores se sintam qualificados para expressar juzos de valor, cerne de todo processo avaliativo. Se ficarmos restritos ao campo educacional, rea de maior interesse no caso presente, constatamos que quase todos temos os nossos sistemas ideais de avaliao, mas que nem sempre resistem a uma anlise crtica mais aprofundada. A tendncia observada que tendemos a reproduzir processos de avaliao que nos foram transmitidos por antigos professores, durante nossa formao acadmica. Isso pode significar alguns acertos, mas, na maioria das vezes, defrontamonos com desacertos. Por que? A resposta muito possivelmente est relacionada formao dos professores ou mais exatamente ausncia de formao dos educadores no campo da avaliao. As licenciaturas concentram-se mais nos contedos substantivos do currculo das disciplinas, aos quais so acrescentadas algumas informaes pedaggicas, sendo a avaliao de uma forma bastante simplista identificada apenas
Meta: Avaliao | Rio de Janeiro, v. 1, n. 1, p.11-27, jan./abr. 2009

22

Heraldo Marelim Vianna

com a verificao da aprendizagem. Impe-se uma nova orientao do processo de formao dos professores a fim de atualizar a atual gerao de educadores e, ao mesmo tempo, criar condies para que futuras geraes tenham conscincia de que ensinar, aprender e avaliar constituem um processo interativo contnuo. A avaliao no pode ignorar as vrias dimenses do contexto escolar, tendo em vista a influncia que o mesmo tem, e com destaque especial, na definio das diferentes propostas de avaliao, cujo objetivo maior, no final, e sem que paire qualquer dvida, centra-se na melhoria do proceder educacional. preciso atentar para o fato de que nesse momento crtico, e no apenas para o professor ou para o avaliador, que todos os envolvidos na ao educativa fazem diferentes opes sobre como obter informaes compreensivas que permitam decises individualizadas ou outros elementos que possibilitem amplas generalizaes sobre os diferentes atores dessa complexa teia que o ato de ensinar e educar. Alm disso, em funo desse contexto em que a avaliao se concretiza que diversas opes precisam ser definidas de uma forma consistente pelo professor/avaliador: - avaliao por critrio ou norma; avaliao formativa ou somativa; avaliao interna ou externa entre outras questes igualmente possveis e relevantes para os procedimentos subseqentes da avaliao. No se pode deixar de levar em conta que os elementos obtidos por intermdio das avaliaes devem ser, necessariamente, interpretados em funo do contexto em que foram levantados, o mesmo ocorrendo com a sua disseminao para os diferentes segmentos interessados nesse tipo de conhecimento. A educao, em razo do momento histrico, social e poltico, considera seus objetivos e define metas a concretizar, no havendo, destaque-se, um modelo nico e geral que sirva a todos os povos e a diferentes culturas. H um ponto sobre o qual parece haver algum consenso, certo grau de concordncia entre educadores dos vrios sistemas educacionais: - a educao no visa a proporcionar apenas conhecimento. O processo educacional procura formar, tambm, outros tipos de saberes: o saber ser, o saber fazer e, especialmente, o saber pensar, que implica, entre outras dimenses, o compreender, o querer, o imaginar e o sentir, como j acentuava Descartes no distante sculo XVII (DESCARTES, 1995). E a esses saberes agregam-se, ainda, habilidades, interesses, atitudes e, particularmente, valores. Tudo isso importante e necessita ser considerado durante a avaliao formativa/contnua. Esse considerar leva-nos a um
Meta: Avaliao | Rio de Janeiro, v. 1, n. 1, p.11-27, jan./abr. 2009

Fundamentos de um Programa de Avaliao Educacional

23

aspecto da avaliao que fundamental para todos os seres humanos: - a autoavaliao, a capacidade de alunos (e por que no dizer, professores, tambm) se autoavaliarem, procedimento que leva ao autoconhecimento e demonstra a conscincia que o indivduo tem de si mesmo. As reflexes anteriormente apresentadas consideram de modo subjacente o contexto brasileiro e a sua experincia, rica em ensinamentos, em decorrncia dos inmeros projetos de avaliao implementados a partir do final dos anos 80 e intensificados nos anos 90, por iniciativa de diferentes reas administrativas (federais, estaduais e municipais), alm de algumas poucas de iniciativa da educao privada. Atualmente, possumos volumosa soma de dados sobre escolaridade e variveis socioeconmicas; contudo, precisamos comear a pensar na sua destinao, ainda que tardiamente, tendo em vista a multiplicidade de usurios possveis. Uma coisa certa, e reiteramos mais uma vez, os elementos coletados no podem ser de uso exclusivo da burocracia educacional. impositivo que os muitos interessados existentes manifestem suas vises e a compreenso que tm dos mesmos. Nesse sentido, com o objetivo de analisar a qualidade da educao e seus problemas , necessrio que se realizem workshops, mesas redondas, palestras, debates e outras atividades mais, com a participao de professores, familiares, alunos e diferentes segmentos sociais para que se aquilatem o valor e o significado dos seus resultados, demonstrando, dessa forma, a sua compreenso e identificando, tambm, os pontos crticos que por ventura se tenham manifestado. A partir das informaes coletadas possvel definir projetos de pesquisa sobre aspectos relevantes, fugindo, assim, replicao de outras investigaes e de temas j exaustivamente estudados em pesquisas anteriores ou realizadas em outros contextos diversos da nossa problemtica educacional. Alm de definir projetos, importante que se discuta a prpria poltica de avaliao e se tracem novas polticas, alm, tambm, de pensar a sua fundamentao terica e as estruturas que sustentam essas avaliaes. Em todos esses aspectos, importante que se tente envolver universidades e outros centros de excelncia que se ocupam com a questo da qualidade da avaliao. As avaliaes de sistemas levantam um nmero considervel de informaes que nem sempre so tratadas adequadamente. necessrio que se decida a priori o que fazer com os dados, sobretudo porque, tendo em vista o destino escolhido, a deciso
Meta: Avaliao | Rio de Janeiro, v. 1, n. 1, p.11-27, jan./abr. 2009

24

Heraldo Marelim Vianna

tomada vai influenciar de modo considervel o planejamento da prpria avaliao. Anteriormente, procuramos dar mais destaque avaliao formativa, ao

desenvolvimento individualizado. A estrutura dessa avaliao no ter as mesmas caractersticas de uma avaliao baseada em normas, que consideram o desempenho do conjunto amostral, expresso por estatsticas descritivas. significativo, por outro lado, que se identifiquem os diversos segmentos da sociedade que utilizaro, com inteligncia, conhecimento de causa e bom senso, os elementos informativos da avaliao. Nem sempre os mais interessados dispem de formao profissional

adequada para um trabalho em profundidade e que tenha ressonncia na comunidade acadmica. No caso especfico do contexto brasileiro, reconhecemos que h interesse em divulgar resultados e, nesse sentido, relatrios tcnicos so publicados, ainda que com uma certa demora; por outro lado, as autoridades educacionais, a fim de acelerar o processo de disseminao das informaes, utilizam-se dos vrios rgos da mdia visando a fazer com que os dados cheguem aos vrios segmentos sociais. Isso, entretanto, no basta, no suficiente, quando no se promovem estudos analticos que identifiquem pontos positivos do ensino/aprendizagem e as defasagens que se constatam, sendo estas bem mais importantes do que aqueles primeiros. A ao de avaliar sempre provoca reaes, muitas das quais com caractersticas negativistas, argumentando que apenas aspectos cognitivos so destacados, sem considerar outros aspectos que, por sua natureza, so, muitas vezes, mais importantes do que o simplesmente aprendido. preciso no esquecer, contudo, que ao avaliar, implicitamente, tambm se est avaliando algo mais, representado por habilidades, interesses e valores. A avaliao, particularmente a que realizada em sala de aula, sob responsabilidade direta do professor, mais importante, sem dvida, porque no se restringe a um nico instrumento, mas resulta, quase sempre, de muitos outros tipos de fazeres, que englobam elementos qualitativos, incluindo entre essas prticas as tcnicas de observao. No entanto, a avaliao sistmica, realizada em grande escala, pressupe, naturalmente, procedimentos padronizados, no para fins de comparao, como julgam muitos, mas para gerar um quadro isonmico que d a todos as mesmas condies para demonstrar as capacidades de cada um por intermdio dos desempenhos especficos que lhes so solicitados. foroso reconhecer, contudo, que os procedimentos de avaliao, por mais bem planejados e refinados que sejam os seus
Meta: Avaliao | Rio de Janeiro, v. 1, n. 1, p.11-27, jan./abr. 2009

Fundamentos de um Programa de Avaliao Educacional

25

instrumentos, nunca oferecem um quadro completo da realidade do ensinar/aprender, pois nunca se conhece a realidade em toda a sua complexidade, assim como, tambm, por melhores que sejam os indicadores sociais os mesmos no conseguem refletir, com preciso absoluta, a complexidade do mundo social. Sem a avaliao, entretanto, impossvel formar percepes do processo educacional e da influncia da ao educativa da escola-famlia-comunidade-aluno e professor. necessria uma definio de vrios elementos indispensveis a uma avaliao que atenda a todos os requisitos tcnicos, conforme registro anterior; desse modo, entre essas decises, todas igualmente prioritrias, cumpre estabelecer se a avaliao ser por norma ou por critrio. Se for por critrio, como seria realmente desejvel, temos de imediato um srio problema a solucionar: - qual seria o ponto de corte a ser definido? Por outro lado, mais um problema, igualmente importante, deve ser equacionado: quais os padres a serem estabelecidos? A respeito dos critrios preciso considerar o fato de que esse estabelecimento parte de dados empricos; portanto, a posteriori, ou, ento, a partir da experincia de professores da rea e/ou de especialistas no campo da avaliao. preciso lembrar que, na elaborao de provas referenciadas a critrios, foroso abranger amostras representativas de contedos e habilidades, que, supostamente, deveriam ser desenvolvidas na escola. Ainda relativamente definio de critrios, estabelecidos a posteriori, isso no se constituir em um grande problema se a metodologia empregada for a da Teoria da Resposta ao Item (TRI), conhecida em nosso contexto educacional graas ao seu uso no Sistema de Avaliao do Ensino Bsico (Saeb)1. bastante conhecido nos meios educacionais que o problema da fixao de padres gera controvrsias, mas uma situao que deve ser encarada e examinada, apesar da sua complexidade. A definio de padres seria em mbito nacional ou seriam definidos diferentes padres regionais, considerando que, muitas vezes, a avaliao no possui carter censitrio, sendo amostral, mas abrangendo uma geografia sociocultural bastante diferenciada? Apesar da complexidade do problema, seria recomendvel a definio de padres de desempenho com suas habilidades em termos nacionais, conforme a amplitude espacial da avaliao. Esses padres poderiam servir de orientao para professores, especialistas em currculo, administradores e

Seria interessante ler o trabalho de, especialmente a discusso sobre testes referenciados a normas e a critrio, para maiores esclarecimentos sobre o assunto.

Meta: Avaliao | Rio de Janeiro, v. 1, n. 1, p.11-27, jan./abr. 2009

26

Heraldo Marelim Vianna

pesquisadores, na definio de seus respectivos planejamentos e, inclusive, no caso de pesquisas sobre aprendizagem e rendimento escolar. Insistimos, reiteradas vezes, ao longo das presentes consideraes, que o documento ora apresentado procura traduzir a nossa percepo sobre o problema da avaliao e seu possvel impacto nos sistemas educacionais, refletindo-se, dessa forma, a nossa preocupao com a chamada validade conseqencial, o impacto que toda essa sistemtica exerce nos sistemas de ensino. preciso, no trato dessas questes, evitar a implantao de certos parmetros valorativos: - classificaes, bnus para os professores, vantagens para os alunos ou premiaes, hierarquizao das escolas, entre outros, que, no final, acabam por dicotomizar os sistemas, as escolas e os prprios alunos em duas categorias: os melhores e os piores. Isso determina a perda do esprito de colaborao que deve existir, estabelecendo-se, em oposio, um esprito competitivo entre sistemas, instituies e alunado. evidente que esse tipo de conseqncia deve ser evitado e superado, quando existe. O importante que as propostas de avaliao sejam um reflexo da realidade educacional e que possibilitem o autoconhecimento do sistema e o conhecimento do sistema pela comunidade social, que nele investir em termos de recursos humanos e materiais. Uma avaliao que tenha validade conseqencial pode-se transformar, sem sombra de dvida, em um processo de certificao de competncia. Ao longo deste trabalho, procuramos pensar sobre os diferentes problemas ligados avaliao e suas possveis solues a fim de que, aos poucos, mas de forma simples e clara, pudssemos traduzir as nossas percepes, conforme registramos no incio do trabalho. perfeitamente aceitvel que, quando refletimos sobre o que se passa em nosso entendimento, acabamos por gerar e, tambm, adquirir novos conhecimentos, conforme a viso de Locke (1999). A nossa percepo, desse modo, resultou de uma operao ativa e refletiu a ao do nosso pensamento, mostrando o entendimento que temos da avaliao e o significado que lhe atribumos no processo educacional.

Referncias CIZEK, G. J. Introduction achievement testing in U.S. Schools. Washington, DC: Thomas B. Fordham Institute, 1998. Disponvel em: <http://www.edexcellence.net/doc/cizek.pdf>. Acesso em: 6 jul. 2009.
Meta: Avaliao | Rio de Janeiro, v. 1, n. 1, p.11-27, jan./abr. 2009

Fundamentos de um Programa de Avaliao Educacional

27

DESCARTES, R. Princpios da filosofia. Porto, PT: Porto Ed., 1995. (Coleo Filosofia Textos). LOCKE, J. Ensaios acerca do entendimento humano. So Paulo: Nova Cultural, 1999. Livro 2, As Idias, Cap. 9, p. 79-80. MERLEAU-PONTY, Maurice. Fenomenologia da percepo. 2. ed. So Paulo: Martins Fontes, 1999. LAS POLTICAS de evaluatin de logros de aprendizaje en los sistemas educativos de Amrica Latina. In: GRUPO DE TRABAJO SOBRE ESTNDARES Y EVALUACIN DEL PREAL, 1., 2002, Lima. Resumen final... Lima, Per: GRADE/PREAL, 2002. Disponvel em: <http://www.grade.org.pe>. Acesso em: 6 jul. 2009.

Artigo publicado na revista Estudos em Avaliao Educacional, n. 28, jul./dez. 2003.

Meta: Avaliao | Rio de Janeiro, v. 1, n. 1, p.11-27, jan./abr. 2009