Sistemas de Avaliao do Ensino

a internacionalizao de uma poltica pblica M aurcio L oboda F ronzaglia

Resumo: O artigo pretende expor as origens dessa ao pblica (os sistemas de avaliao do ensino fundamental), suas dimenses nacionais e internacionais, seus objetivos, a forma pela qual se criou um consenso internacional sobre sua necessidade e como foi feita sua expanso. Palavras-chave: Avaliao do ensino. Poltica educacional. Internacionalizao.

Systems of Educational Evaluation: the internationalization of a public policy

Abstract: This article intends to demonstrate the beginning of a public action systems of educational evaluation in its national and international dimensions, its goals, how a consensus was build upon this action and how its expansion has been done. Key words: Educational evaluation. Educational policy. Internationalization.

avaliao da qualidade da educao tem sido extensamente discutida e pesquisada nos ltimos anos, e no somente naquilo que se refere a educao bsica, mas tambm com relao a educao superior. No Brasil, as aes pblicas mais conhecidas na rea concentram-se na elaborao de ndices de qualidade realizados pelo governo federal e tambm pelo governo do Estado de So Paulo, o Ideb e o Idesp1 respectivamente. De fato, a criao dessas polticas pelos governos brasileiros (em seus diversos nveis) menos uma novidade metodolgica que um reflexo e uma consequncia de medidas internacionais tomadas nessa rea. possvel constatar a criao de vrios sistemas de avaliao no cenrio internacional nas ltimas dcadas, sendo o Programa Internacional de Avaliao dos Alunos Pisa seu exemplo mais conhecido. A compreenso dos atuais sistemas de avaliao do ensino, tanto os exames nacionais quanto os internacionais, requer uma breve regresso histrica e conceitual. Encarando-se as diversas formas de avaliao da educao em prtica no Brasil como mais uma nova dimenso de ao de uma poltica pblica (e, claro, social) j consolidada, perder-se- uma parte deveras importante para sua anlise e seu entendimento, isto , sua dimenso internacional. A mera definio de polticas pblicas remete imediatamente ao de um governo nacional, e tambm a um dever do Estado. Para usar a definio de Elosa Hfling (2001, p. 31), as polticas pblicas representam o Estado em ao. No campo das polticas pblicas encontram-se as polticas sociais e, entre elas, as polticas educacionais. Se as polticas pblicas so o Estado em ao, torna-se necessrio salientar suas configuraSo Paulo em Perspectiva, v. 23, n. 1, p. 90-100, jan./jun. 2009

sistemas de avaliao do ensino: internacionalizao de uma poltica pblica

91

es: toda poltica pblica divide-se em concepo, planejamento, implementao e avaliao. Destarte, a avaliao da qualidade do ensino integra a poltica pblica educacional. A ao dos Estados para a universalizao do ensino e, posteriormente, a preocupao com a qualidade do servio prestado datam do sculo XX, mais especificamente de sua segunda metade. Historicamente, as polticas sociais se caracterizaram como responsabilidade e se desenvolveram dentro do mbito do Estado de Bem-Estar Social. Nas palavras de Marta Arretche (1995, p. 1):
Fenmeno do sculo XX, a proviso de servios sociais, cobrindo as mais variadas formas de risco da vida individual e coletiva, tornou-se um direito assegurado pelo Estado a camadas bastante expressivas da populao dos pases capitalistas desenvolvidos. Ainda que alguns pases como a Alemanha, por exemplo tenham dado origem a programas de seguro social j no final do sculo passado e que polticas de proteo a idosos, mulheres, incapacitados, etc. tenham se desenvolvido em vrios pases j no incio deste sculo, certo que o fenmeno do Welfare State sofreu incontestvel expanso e at mesmo institucionalizao no perodo do ps-guerra. a partir de ento que se generaliza e ganha dimenses quase universais nesses pases um conjunto articulado de programas de proteo social, assegurando o direito aposentadoria, habitao, educao, sade, etc.

O Estado de Bem-Estar Social, ou Welfare State, define-se como a proteo oferecida pelo governo na forma de padres mnimos de renda, alimentao, sade, habitao e educao, assegurados a todos os cidados como um direito poltico e no como caridade (WILENSKY apud BOBBIO; MATTEUCCI; PASQUINO, 1994, p. 416) e, como citado anteriormente, institucionaliza-se e expande-se aps a Segunda Guerra Mundial como polticas que se desenvolvem dentro dos limites de cada nao, o que faz surgir diversos modelos de Welfare (ARRETCHE, 1995). Contudo, pode-se definir com razovel preciso que a partir de um ponto especfico da histria do sculo XX as polticas pblicas e, consequentemente, as polticas educacionais passaram por um pro-

cesso de internacionalizao, ou seja, transbordaram e ultrapassaram as fronteiras dos Estados. Assim, as aes que marcam toda poltica pblica passam a ser o resultado de sutis arranjos polticos internos e externos, envolvendo influncias condicionantes tanto nacionais como grupos de presso, movimentos sociais e partidos polticos quanto internacionais organizaes internacionais, negociaes entre blocos regionais intergovernamentais e supranacionais. notrio que as relaes que se desenvolvem no sistema internacional tm por cenrio uma ordem estabelecida entre os Estados membros, constituem relaes de poder em vrios nveis, econmico, social e cultural, entre outros (COX; SCHECHTER, 2002). Tal fato, embora claro na anlise internacional, poucas vezes levado em considerao quando se discute e se analisa a dimenso internacional de aes pblicas, talvez porque exista ainda certo olhar equivocado que considera as dimenses internas e externas da poltica pblica como separadas e incomunicveis, como objetos distintos e sem relao. Assim, tanto o desenvolvimento quanto a consolidao dos Estados de Bem-Estar Social ocorreram de forma concomitante internacionalizao das polticas pblicas e particularmente das polticas educacionais. Contudo, tais ocorrncias seguem caminhos diversos e se apresentam em realidades distintas. J foi citado que mesmo nos pases desenvolvidos identificam-se diferentes tipos de Welfare, mas falta ainda salientar que, nos pases em desenvolvimento e particularmente na Amrica Latina e no Brasil, essa evoluo traz suas peculiaridades.
Os pases latino-americanos lograram construir, at os anos 70, as estruturas bsicas do Welfare State, porm de modo imperfeito e deformado, devido a dois conjuntos principais de motivos: os estruturais e os institucionais e organizacionais. So, com efeito, razes de natureza estrutural que podem explicar, por exemplo, o alto grau de excluso social e a baixa equidade com que se desempenhavam as polticas e programas sociais da regio (DRAIBE, 1997, p. 3).

J as peculiaridades institucionais e organizacionais seriam a estrutura centralizada dos Estados, a incapacidade regulatria desses mesmos Estados,
So Paulo em Perspectiva, v. 23, n. 1, p. 90-100, jan./jun. 2009

92

Maurcio Loboda Fronzaglia

alm do corporativismo burocrtico no governo e em outros setores do mundo do trabalho. De qualquer forma, importante salientar que o Welfare se desenvolve de forma distinta nos pases da Amrica Latina. No Brasil, como bem demonstra Jos Murilo de Carvalho (2002), os direitos sociais avanaram, no decorrer da histria, em regimes autoritrios com restrio de direitos polticos, por meio de polticas paternalistas e populistas assimiladas como formas de concesses e benesses oferecidas pelo governante para seus cidados. Tal realidade se modificou com a Constituio de 1988, dando incio s reformas que foram implementadas a partir do governo Fernando Henrique Cardoso (DRAIBE, 2003). Retornando questo da internacionalizao das polticas pblicas, h estudos que tratam, especificamente, da internacionalizao de polticas educacionais, como prticas de polticas comuns a serem implementadas por diversos pases. Alguns autores veem tal fato como consequncia da globalizao econmica:
Como o aumento da atividade econmica globalizada gerou mais oportunidades para se aprender com as intervenes feitas em outros lugares? Vrios fatores facilitaram as transferncias de polticas. Primeiro, a globalizao e o desenvolvimento tecnolgico permitiram que idias e iniciativas polticas fossem facilmente comunicadas nas arenas internacionais. Segundo, o crescimento do regionalismo entre os Estados nacionais e o desenvolvimento de identidades regionais na ltima dcada do sculo XX estimularam o dilogo com relao s comparaes das aes polticas. Terceiro, muitos pases da OCDE seguiram programas de aes polticas embasadas em evidncias. Quarto, as agncias internacionais como FMI, OCDE, Banco Mundial e OMC facilitaram a transferncia de polticas pblicas (BANKS; DISNEY; DUNCAN; VAN REENEN, 2005, p. 62, traduo nossa).

Outros estudos apontam a ao do Banco Mundial, que ampliou suas funes nos anos 1980 e passou tambm a tratar das polticas sociais (essencialmente da educao), como uma maneira de controle exercido pelos pases desenvolvidos, de forma que as demais naes seguissem regras e aes que se aproSo Paulo em Perspectiva, v. 23, n. 1, p. 90-100, jan./jun. 2009

ximariam dos seus interesses econmicos e polticos (BORGES, 2003; COSTA, 1998; FONSECA, 1998). A internacionalizao das polticas pblicas emerge, contudo, algumas dcadas antes de os estudiosos se ocuparem com a globalizao, exatamente no mesmo perodo em que se construa o Estado de BemEstar Social nos pases centrais do capitalismo, podendo ser identificada facilmente com a criao da Organizao das Naes Unidas, na Conferncia de So Francisco. A afirmao sobre a transferncia das agncias internacionais citadas anteriormente no incorreta, mas tem seu incio logo aps o fim da Segunda Guerra Mundial. Como demonstra Marcel Merle (1995), a ordem internacional atual tem sua origem direta na criao da ONU e dos demais organismos internacionais, que foram fundados ao final da segunda grande guerra com a inteno de reconfigurar o sistema internacional de acordo com os interesses das potncias vencedoras. nesse contexto que, pela primeira vez, ainda segundo Merle (1995) e Vaisse (2001), uma organizao internacional traz em sua carta fundamental a proteo de direitos antes de exclusiva competncia dos Estados nacionais, como a proteo dos direitos humanos.2 A Organizao das Naes Unidas desenvolveuse por meio da criao de inmeras agncias e rgos que se concentravam na ao de polticas especficas. A Organizao das Naes Unidas para Educao, Cincia e Cultura Unesco atua em diversos pases em cooperao com os governos nacionais e locais, financiando pesquisas e projetos de polticas pblicas voltados para sua rea de atuao. O Programa das Naes Unidas para o Desenvolvimento PNUD tambm tem atuao destacada na elaborao de polticas pblicas ligadas ao desenvolvimento nos mais diversos Estados. As avaliaes internacionais dos sistemas de educao, promovidos por organizaes internacionais, tais como a Unesco e a OCDE, encaixam-se nesse princpio de internacionalizao. Dessa forma, essa ferramenta de avaliao da poltica pblica acaba por estabelecer, ao longo do tempo, os moldes e limites dentro dos quais as atividades de poltica educacional, suas mudanas, metas e objetivos sero desenvolvidos e implementados. Adicionalmente, as avaliaes

sistemas de avaliao do ensino: internacionalizao de uma poltica pblica

93

dos sistemas de ensino nacionais, essencialmente as desenvolvidas nos Estados Unidos, tambm acabaram por moldar o sistema de avaliao internacional que se desenvolveu a partir dos anos 90 do sculo passado.

DESENVOLVIMENTO HISTRICO
As avaliaes internacionais do aprendizado ganharam importncia e tm atrado a ateno e a preocupao dos governos nacionais nos ltimos tempos. Os espaos tomados pelos resultados das avaliaes nas diversas mdias, nos meios acadmicos e na comunicao governamental so cada vez mais amplos. O Programa Internacional de Avaliao dos Alunos Pisa, por exemplo, exame internacional desenvolvido pela OCDE, no s recebe extensa cobertura dos meios de comunicao como tambm tem se tornado um forte ponto de referncia para o debate e pesquisas acadmicas acerca da qualidade da educao. So exemplos no Brasil os estudos de Fbio D. Waltenberb (2005), Naercio Menezes Filho (2007), Carlo Franco, Alcia Bonamino e Ftima Alves (2007); e tambm so vrios os exemplos do exterior, como os artigos de Ludger Woessmann e Eric A. Hanushek (2005), Glria Ramalho (2003), este ltimo com anlise da participao de Portugal no exame internacional. J Alan Ginsburg, Geneise Cooke, Steve Leinwand, Jay Noell e Elizabeth Pollock (2003) esmiuam a participao norte-americana tanto no Pisa quanto no Trends in International Mathematics and Science Study TIMSS. No trabalho de lvaro Marchesi, da Universidade de Madri, tem-se o seguinte relato:
Deve-se reconhecer que a publicao do Pisa provoca um enorme impacto na opinio pblica. Poucos textos sobre educao geram tanta expectativa, ocupam tantas pginas dos meios de comunicao e so uma referncia contnua nos debates sobre educao. Os resultados dos conhecimentos dos alunos de cada pas se convertem em um dogma de f. As demais informaes contidas no informe ficam em segundo plano e so compreendidas mais como interpretaes que como dados comparados (MARCHESI, 2006, p. 337, traduo nossa).

Na verdade, as avaliaes internacionais, ainda que tenham se tornado referenciais ao longo das ltimas dcadas, tm suas origens ligadas ao que foi definido como processo de internacionalizao das polticas pblicas e criao e ao desenvolvimento das organizaes internacionais. Sabe-se, por exemplo, que:
As pesquisas internacionais sobre o acompanhamento do aprendizado dos alunos existem, de fato, h quase meio sculo. O primeiro estudo desse tipo foi realizado pelo Instituto Internacional de Educao, em 1961, uma instituio fundada em 1952 pela Unesco e que tinha como objetivo inicial avaliar os sistemas de ensino medindo o aprendizado de um grupo de mais ou menos 12.000 alunos de 13 anos de 12 pases diferentes. Em 1961, decidiu-se confiar International Association for the Evaluation of Educational Achievement IEA, com sede em Hamburgo, o monoplio da realizao das pesquisas internacionais de grande porte sobre o aprendizado dos alunos (GRENET, 2008, traduo nossa).

A citao anterior fornece algumas informaes importantes, ainda que primeira vista paream bvias. A mera criao de uma organizao internacional, a Organizao das Naes Unidas para a Educao, a Cincia e a Cultura Unesco, que tem entre seus objetivos assuntos que se expressam em polticas pblicas inerentemente nacionais, j demonstra o incio de um processo de internacionalizao desses temas, como mencionado outrora. Assim, tambm, o objetivo de conceber padres to universais quanto possveis para avaliar o resultado de polticas pblicas nacionais, como no caso das educacionais, revela no s um anseio globalizante como tambm uma forma de implementar e avaliar polticas pblicas por meio da interao de espaos nacionais e internacionais. Nesse sentido, impossibilita-se a correta compreenso dos sistemas e mecanismos de avaliao da qualidade educacional se essa dimenso internacional e histrica desconsiderada. Pode-se analisar um fato isoladamente em sua dinmica, mas tal abordagem ser sempre incompleta porque no captar nem sua origem nem suas tendncias intrnsecas. Resumindo, as aes de avaliao do resultado das polticas de
So Paulo em Perspectiva, v. 23, n. 1, p. 90-100, jan./jun. 2009

94

Maurcio Loboda Fronzaglia

educao tm razes especficas para acontecerem no momento em que acontecem. possvel identificar, em anlise mais ampla, dois momentos no contexto dos sistemas de avaliao de ensino internacionais. O primeiro tem incio nas duas dcadas subsequentes Segunda Guerra Mundial, estimulado, em parte, pelas ideias universalizantes que inspiraram a criao da Organizao das Naes Unidas. O segundo momento tem lugar nos anos 1990, no contexto do fim da Guerra Fria e de acentuao do processo de globalizao. Ao todo, esses dois momentos representam quase meio sculo de avaliaes internacionais sobre a educao unidos, ainda que em momentos distintos, pelo conceito de capital humano. De acordo com recente publicao da OCDE:
Em todos os lugares e em todas as classes sociais os pais atormentam seus filhos para que estudem seriamente e obtenham boas notas, esperando que um dia seus esforos sejam recompensados. Esse conselho repousa em um conceito interessante: os anos que passamos estudando geram uma forma de capital que pode produzir lucro a longo prazo, como outras formas de capital que conhecemos melhor, como o dinheiro ou os bens de propriedade. Esta idia encontra cada vez mais adeptos entre os gestores pblicos e sua influncia ultrapassa o campo do ensino. Podese tambm considerar que ter boa sade um tipo de capital cujos ganhos se medem nos anos suplementares de esperana de vida. Pode-se mesmo considerar os modos de relaes e valores compartilhados por uma sociedade como um tipo de capital que permite que as pessoas trabalhem juntas e tenham sucesso econmico (OCDE, 2007, p. 11, traduo nossa).

como objetivo estabelecer padres de comparabilidade internacional, estava limitado pela diviso geopoltica que marcou todo o perodo da Guerra Fria. Nas palavras de Perez e Passone (2007):
Historicamente, o esforo de estabelecer padres de comparabilidade internacional ganhou relevncia a partir da publicao do World Hand Book, produzido pela Unesco em 1951. O objetivo deste material era de servir de referncia aos governos e educadores participantes. Quatro anos aps iniciou-se a publicao em cinco volumes do World Survey Education (1955-71). Em 1964 surgiu a publicao Unesco Statistical Year Book, muito difundida entre autoridades, governos e demais agncias por fornecer informaes sobre as matrculas, rendimento escolar, gastos pblicos, entre outros indicadores.

Outrossim, deve-se frisar que nesse primeiro momento at mesmo as avaliaes internacionais tinham seus resultados analisados segundo a lgica da tenso existente entre as duas superpotncias: Estados Unidos e Unio Sovitica. Como bem remarca o artigo de Romuald Normand:
O pnico tomou conta dos Estados Unidos nos anos de 1957 e 1958 quando eles descobriram a superioridade que permitiu URSS levar o primeiro homem ao espao. Foi nessa poca que a OCDE e a Unesco comearam a elaborar critrios e instrumentos de avaliao dos sistemas educativos em escala internacional para comparar a eficcia da formao cientfica em diferentes pases. Com a crise dos anos 70 e 80, as causas do fracasso produtivo do Reino Unido e dos Estados Unidos comparados a Japo e Alemanha foram imputadas educao. As baixas taxas de sucesso escolar foram tidas como as responsveis pela falta de competitividade desses pases (NORMAND, 2003, traduo nossa).

Percebe-se assim, a clara preocupao que se forma na sociedade contempornea de investir na educao como forma de aumentar o capital e o desenvolvimento de um Estado nacional. E esse postulado pode ser demonstrado pela preocupao nos aumentos com gastos sociais a partir da segunda metade do sculo XX pela maioria dos pases ocidentais, segundo suas especificidades. O primeiro momento, de construo das avaliaes dos sistemas educacionais, ainda que tivesse
So Paulo em Perspectiva, v. 23, n. 1, p. 90-100, jan./jun. 2009

Nesse perodo, com o andamento das avaliaes, torna-se possvel construir parmetros para a elaborao de indicadores internacionais de educao, baseados nos dados coletados nas aplicaes desses exames. Tais parmetros so o resultado da ao conjunta e da cooperao internacional concretizada entre Estados nacionais e agncias internacionais. Perez

sistemas de avaliao do ensino: internacionalizao de uma poltica pblica

95

e Passone (2007) fazem um bem estruturado resumo da evoluo dessas aes. Em 1973, a OCDE lana A Framework for Educational Indicators to Guide Government Decisions que se configurou como uma das primeiras aes de poltica educacional internacional j que tinha o objetivo claro de subsidiar as aes dos Estados nacionais que participavam, at aquele momento, das avaliaes internacionais. Essa primeira tentativa no se traduziu em adoo de polticas pblicas efetivas pelos pases participantes para a melhora da qualidade do aprendizado, como fora esperado pela organizao. Em 1991, foi publicado o Education at a Glance, que desde ento publicado sistematicamente e tornou-se referncia para governos e estudiosos do tema. Concomitantemente foi tambm criado o projeto Indicator of Education Systems Ines, na tentativa de estruturar indicadores comparativos internacionais do desempenho escolar. A ltima dcada do sculo XX marca o incio de um segundo momento nos sistemas internacionais de avaliao, no tanto por modificaes internas no seio das instituies, mas sim por uma mudana sem precedentes no cenrio internacional, o fim da Guerra Fria. A queda do bloco socialista possibilita pensar em uma homogeneizao em quase todas as questes debatidas no cenrio internacional. A dinmica da ordem internacional muda de forma completa, permitindo a expanso e o crescimento do sistema capitalista, acentuada tambm pelos avanos tecnolgicos que marcaram esse final de sculo. Nesse cenrio, as organizaes internacionais encontram uma liberdade de ao at ento inexistente. Datam desse perodo as principais avaliaes internacionais que atualmente se consolidam e demonstram ter poder de referncia para as aes de polticas pblicas voltadas educao, e no somente nos chamados pases desenvolvidos.

Avaliao do Desempenho da Educao IEA. Sobre o TIMSS:

TIMSS a abreviao de Third International Mathematics and Science Study, um projeto de avaliao internacional do aprendizado escolar em matemtica e cincias realizado pela International Association for the Evaluation of Educational Achievement IEA e que foi aplicado em 1995. Visto que a Assemblia Geral da IEA decidiu fazer as avaliaes de forma regular a cada quatro anos, o exame voltou a ser feito em 1999 com o nome de TIMSS Repeat. No ano de 2003 mudou seu nome para Trends in International Mathematics and Science Study, mantendo a abreviao que o identifica (DIAZ, 2005, p. 284, traduo nossa).

Os principais testes globais de avaliao da qualidade de ensino

Destacam-se o Trends in International Mathematics and Science Study TIMSS e o Progress in International Reading Literacy Study PIRLS, ambos desenvolvidos pela Associao Internacional para a

J o PIRLS foi estabelecido em 1998 e tem como objetivo mensurar o aprendizado em leitura a partir dos seguintes princpios: PIRLS comearia em 2001 como uma avaliao para crianas da quarta srie; PIRLS focaria os resultados de leitura e tambm os contextos escolar e domstico para o aprendizado da leitura; A habilidade de leitura seria medida por meio de uma avaliao abrangente baseada em materiais reais requerendo do estudante o engajamento no processo de leitura; O teste de leitura seria elaborado de forma que futuras avaliaes pudessem identificar tendncias nos resultados; Questionrios seriam aplicados a estudantes e a seus atuais professores e diretores para coletar dados contextuais para melhor interpretar os resultados. Tanto o PIRLS quanto o TIMSS so de responsabilidade da International Association for the Evaluation of Educational Achievement IEA, ligada historicamente Unesco. Pisa, por sua vez, foi lanado em 1997 pelos ministros de educao dos pases da OCDE e constitui o programa de avaliao do ensino de referncia internacional para a anlise das polticas pblicas educacionais de um grande nmero de pases. As aplicaes do Pisa tm, inclusive, eclipsado os outros
So Paulo em Perspectiva, v. 23, n. 1, p. 90-100, jan./jun. 2009

96

Maurcio Loboda Fronzaglia

exames internacionais citados anteriormente, visto que abrangem tanto os conhecimentos cientficos e matemticos quanto o aprendizado em leitura. Em 2009 realiza-se sua quarta edio. Segundo Julien Grenet (2008, traduo nossa) esse exame traz algumas caractersticas originais: A principal originalidade do Pisa est na natureza do aprendizado dos alunos que ele procura medir; ao contrrio das pesquisas anteriores, no se trata da aquisio de conhecimentos fixados pelos programas escolares, mas de competncias ou aptides tidas como necessrias para se levar uma vida adulta autnoma; A segunda novidade do Pisa est na definio da populao avaliada; ao contrrio dos estudos anteriores, a avaliao no se concentra no conjunto de alunos de um certo nvel escolar (os alunos da 5 srie, por exemplo), mas sobre o conjunto de alunos de 15 anos independentemente de sua turma escolar. A avaliao de 2006 concentrou-se nos indivduos nascidos em 1990; Uma ltima especificidade do Pisa est na sua periodicidade: realizada a cada trs anos, a avaliao tem como objetivo assegurar o acompanhamento regular do desempenho dos alunos de 15 anos do conjunto de pases de OCDE para fazer comparaes temporais. A periodicidade do Pisa e seus contedos encontram-se resumidos no Quadro 1.

Avaliaes na Amrica Latina

Sobre a participao dos pases da Amrica Latina nos sistemas internacionais de avaliao da educao preciso se reter, a priori, em dois aspectos: em primeiro lugar, frisa-se que as polticas pblicas de educao nesses pases apresentam um relativo atraso em comparao com os pases desenvolvidos. A universalizao do acesso ao ensino, no Brasil, por exemplo, s foi conseguida no final da dcada de 1990. Em segundo lugar, preciso especificar que as causas desse atraso relativo so semelhantes quelas apresentadas nas outras reas da poltica social. A rea lidade socioeconmica dos pases latino-americanos envolve dificuldades outrora j ultrapassadas e resolvidas pelos chamados pases desenvolvidos. Assim, explica-se tambm porque nem todos os pases do continente latino-americano se habilitam a participar das avaliaes internacionais, por receio das conse qun cias polticas que os resultados diagnsticos dessas avaliaes podem representar. Nesse contexto, foi criado o Laboratrio Latino-Americano de Avaliao da Qualidade da Educao.
O Laboratrio um recurso tcnico que a Unesco coloca disposio dos pases latino-americanos, constituindo-se um mbito tcnico-poltico de discusso da problemtica do aprendizado e de suas variveis relacionadas. [...] foi criado oficialmente no dia 10

Quadro 1 Periodicidade do Pisa, por Temas Avaliados e Autoavaliao dos Alunos 2000-2015
Anos 2000 2003 2006 2009 2012 2015 Temas avaliados Leitura, Matemtica e Cincias Leitura, Matemtica e Cincias Leitura, Matemtica e Cincias e Soluo de Problemas Leitura, Matemtica e Cincias Leitura, Matemtica e Cincias Leitura, Matemtica e Cincias Autoavaliao dos alunos (1) Aprendizado em Leitura Aprendizado em Matemtica Aprendizado em Cincias A ser definido A ser definido A ser definido

Fonte: OECD. Disponvel em: <http://www.pisa.oecd.org>. Traduo nossa. (1) Diz respeito s afirmaes dos prprios estudantes sobre suas condutas e comportamentos com relao aos contedos ensinados em Leitura, Matemtica e Cincias em suas redes de ensino.
So Paulo em Perspectiva, v. 23, n. 1, p. 90-100, jan./jun. 2009

sistemas de avaliao do ensino: internacionalizao de uma poltica pblica

97

Quadro 2 Participao dos Pases da Amrica do Sul nos Exames Internacionais

Pases OREALC LLECE 1998 sim sim sim sim sim no sim sim sim no C SERCE 2006 sim sim no sim sim sim no sim sim sim TIMSS 1995 no sim no no sim no no no no no 1999 sim no no sim no no no no no no 2003 sim sim no no no no no no no no 2007 no no no no sim no no no no no PIRLS 2001 no sim no no sim no no no no no 2006 no no no no no no no no no no 2000 sim sim no sim no no no sim no no 2003 no sim no sim no no no sim no no PISA 2006 sim sim no sim sim no no no no sim 2009 sim sim no sim sim no no sim no sim

Chile Argentina Bolvia Brasil Colmbia Equador Venezuela Peru Paraguai Uruguai

Fonte: OECD. TIMSS & PIRLS International Study Center; Programa de Promocin de la Reforma Educativa de Amrica Latina y el Caribe. Disponvel em: <http://www.pisa.oecd.org>; <http//timss.bc.edu>; <www.preal.org>.

de novembro de 1994, na Cidade do Mxico, onde foi estabelecida uma estrutura de coordenadores nacionais e uma secretaria executiva junto Oficina Regional de Educao para Amrica Latina e o Caribe (Orealc), sediada em Santiago do Chile, contando com a participao dos seguintes pases: Argentina, Bolvia, Brasil, Chile, Colmbia, Costa Rica, Cuba, El Salvador, Honduras, Mxico, Paraguai, Peru, Repblica Dominicana e Venezuela (CASTRO; PESTANA; MARTE, 1995, p. 51-52).

Os sistemas internacionais de avaliao tambm influenciam os pases a adotar sistemas nacionais de avaliao para subsidiar as aes pblicas educacionais. Formou-se, assim, uma espcie de consenso sobre o valor poltico dos sistemas de avaliao que se enquadram em um momento de internacionalizao das polticas pblicas de educao, inclusive no Brasil. Segundo Ribeiro:

A partir do compromisso internacional assumido na Conferncia Mundial sobre Educao para Todos, realizada em Jomtien, na Tailndia, em 1990, o Brasil convocado pelo Programa das Naes Unidas para o Desenvolvimento (PNUD), pelo Banco Mundial, pela Organizao das Naes Unidas para a Educao, a Cincia e a Cultura (Unesco) e pelo Fundo das Naes Unidas para a Infncia (Unicef) elaborou o Plano Decenal de Educao para Todos (PDET), em 1993, o que explicita a funo da Unio, atravs do MEC, de coordenar e articular a formulao e a avaliao das polticas nacionais (RIBEIRO, 2002, p. 135).

Foi nesse contexto que no incio da dcada de 1990 o Ministrio da Educao implantou o Sistema de Avaliao da Educao Bsica Saeb, por meio de uma prova por amostra nacional de alunos. O Saeb est na origem da criao do ndice de DesenvolviSo Paulo em Perspectiva, v. 23, n. 1, p. 90-100, jan./jun. 2009

98

Maurcio Loboda Fronzaglia

mento da Educao Bsica Ideb, que avalia o nvel de aprendizado dos alunos baseando-se, essencialmente, no resultado dos alunos na Prova Brasil. Atualmente vrios Estados brasileiros desenvolvem seus prprios mtodos de avaliao do ensino (GATTI, 2009), como So Paulo, Minas Gerais, Paran e Cear.

discurso do neoliberalismo, que visa enquadrar as polticas educacionais e sociais em um olhar mais amplo, como mercadorias a serem oferecidas, fazendo assim desaparecer o direito educao dos cidados, vistos agora como meros consumidores (ULJENS, 2007). Nas palavras de Ferrero (2005):
O que certamente no devemos fazer aplicar cegamente as receitas dos organismos internacionais, aqueles que atuam como se soubessem tudo de antemo, que ignoram as diferenas culturais, que sugerem escolas mistas no Afeganisto e asseguram que os 300 dias efetivos de aula declarados vo coincidir, no Mxico, com um calendrio ideal que faz abstrao das festividades locais e das emendas dos feriados nacionais. A avaliao incide na cultura escolar, mas a cultura escolar resiste. Os mecanismos de simulao tambm fazem parte da resistncia mudana.

Crticas aos Sistemas de Avaliao

O fato de os sistemas internacionais e nacionais de avaliao da qualidade de ensino constiturem, presentemente, partes essenciais na conduo das polticas educacionais no os exime de crticas tanto sobre sua funo quanto sobre as metodologias utilizadas. Com relao aos problemas metodolgicos, Goldstein (2008) elabora uma srie de questes: como escolher os contedos para obter resultados teis? Como proceder escolha da amostragem para que se possa fazer uma comparao? Como comparar sistemas educativos to distintos, ancorados em culturas tambm distintas? E finalmente, como esses dados devem ser analisados? Todas essas questes baseiam-se e originam-se, praticamente, em uma constatao anterior. De acordo com Vinokur (2003, p. 91, traduo nossa):
Dado o princpio de subveno, os organismos internacionais no esto autorizados por suas cartas fundadoras seus estatutos a se introduzirem diretamente nas polticas de educao dos seus pases membros. Sua ao nesse campo indireta, visando persuadir os Estados e a opinio pblica de um consenso. Para ser eficaz nesse nvel, o discurso dessas organizaes sobre educao deve se apresentar como normativo e universal e cientificamente fundamentado e necessrio.

Concluses
Os sistemas internacionais de avaliao do ensino tm sua origem nas aes empreendidas pelas organizaes criadas pelos pases vencedores da Segunda Guerra Mundial. As organizaes internacionais tm como objetivo, de maneira geral, espalhar princpios e recomendaes para os seus pases membros. Contudo, por mais que tenham a pretenso de uma tecnicidade neutra, refletem e so a expresso de uma ordem determinada dentro do sistema internacional. Se durante o perodo da Guerra Fria essas aes moldaram-se em termos de um conflito entre dois modos de produo, duas ideologias e princpios divergentes, a partir da dcada de 1990 revestiramse de um universalismo globalizante. A dinmica da globalizao condiciona essa universalizao e implica na internacionalizao das polticas pblicas e, por conseguinte, das polticas educacionais, em que os sistemas de avaliao desempenham papel primordial para a elaborao das aes pblicas. Sem considerar essas implicaes, as anlises perdem-se nos limites dos seus recortes metodolgicos. As crticas so numerosas e se estruturam a partir da relevncia das especificidades locais e nacionais.

O problema metodolgico de como homogeneizar, para efeitos comparativos, as polticas pblicas educacionais esconde outro problema, j citado, que a funo que essas avaliaes desempenhariam. Colocando-se como universais, tcnicas e neutras, esses sistemas de avaliao, patrocinados pelas organizaes internacionais, estariam, de fato, ocultando outros interesses, ligados ao objetivo de disseminar o
So Paulo em Perspectiva, v. 23, n. 1, p. 90-100, jan./jun. 2009

sistemas de avaliao do ensino: internacionalizao de uma poltica pblica

99

Contudo, preciso ressaltar que os sistemas de avaliao desempenham papel importante na definio das polticas educacionais e podem ser um valioso instrumento na busca de melhor qualidade das polticas pblicas. Tal fato inegvel. Dentro desse contexto cresce a importncia da ao democrtica para a conduo das polticas pblicas. mais do que necessrio, imperativo que

os resultados dessas avaliaes sejam uma forma de melhorar a qualidade da educao, talvez menos pelas consequncias econmicas dessas aes e mais pelo auxlio ao Estado, para que este cumpra seu dever de oferecer educao de qualidade, como direito de todo cidado, e no apenas como cidado nacional, mas como a expresso de uma cidadania global.

Notas
1. ndice de Desenvolvimento da Educao Bsica Ideb, calculado por meio das avaliaes feitas pelo Inep, como o Sistema de Avaliao do Ensino Bsico Saeb, o Censo Escolar e a Prova Brasil. J o ndice de Desenvolvimento da Educao no Estado de So Paulo Idesp calculado por meio dos resultados do Sistema de Avaliao de Rendimento Escolar do Estado de So Paulo Saresp e dos ndices de fluxo escolar. Ambos tm o objetivo de avaliar o nvel da educao e do aprendizado dos alunos da rede pblica.

2. No cabe aqui a discusso mais aprofundada sobre a criao e o desenvolvimento histrico da Organizao das Naes Unidas. Contudo, cabe salientar que sua carta fundamental demonstra contradies que acabam por bem refletir o esprito da poca de sua composio, alternando entre o realismo e uma viso idealista. Nesse contexto, a carta pressupe, por exemplo, tanto a defesa dos direitos humanos e da integridade da vida quanto a defesa da no intromisso nos assuntos internos de cada Estado membro. Essa contradio bsica ser bem explorada pelos pases membros segundo suas necessidades e interesses de momento, alternando o seu discurso segundo essa mesma contradio.

Referncias Bibliogrficas
ARRETCHE, M.T.S. Emergncia e desenvolvimento do Welfare State: Teorias explicativas. Boletim Informativo e Bibliogrfico de C. Sociais, Rio de Janeiro, 1995. BANKS, J.; DISNEY, R.; DUNCAN, A.; VAN REENEN, J. The internationalisation of public Welfare Policy. The Economic Journal, Oxford, n. 115, p. 62-80, mar. 2005. BOBBIO, N.; MATTEUCCI, N.; PASQUINO, G. Dicionrio de Poltica. Braslia: UNB, 1994. BORGES, A. Governana e poltica educacional: a agenda recente do Banco Mundial. Revista Brasileira de C. Sociais, v. 18, n. 52, 2003. CARVALHO, J.M. Cidadania no Brasil, o longo caminho. Rio de Janeiro: Civilizao Brasileira, 2002. CASTRO, M.H.G.; PESTANA, M.I.G. de S.; MARTE, M.A.S. O laboratrio latino-americano de avaliao da qualidade da educao: um mecanismo de integrao poltico-social. Em Aberto, Braslia, ano 15, n. 68, out./dez. 1995. COSTA, V.M.F. O novo enfoque do Banco Mundial sobre o Estado. Lua Nova Revista de Cultura e Poltica, So Paulo, n. 44. 1998. COX, R.W.; SCHECHTER, M.G. The Political Economy of a Plural World. London, Routledge, 2002. 232p.

DIAZ, J.A.A. TIMSS Y PISA. Dos Proyectos Internacionales de Evaluacin Del Aprendizaje Escolar en Ciencias. Revista Eureka sobre Enseanza y Divulgacin de las Ciencias, Cadiz, Espanha, v. 2, n. 3, 2005. DRAIBE, S.M. A poltica social no perodo FHC e o sistema de proteo social. Tempo Social, nov. 2003. ______. Uma nova institucionalidade das polticas sociais? Reflexes a propsito da experincia latino-americana recente de reformas dos programas sociais. So Paulo em Perspectiva, So Paulo, Fundao Seade, v. 11, n. 4, out./dez. 1997. FERRERO, E. A internacionalizao da avaliao do aprendizado na educao bsica. Avance Y Perspectiva, jan./mar. 2005. FONSECA, M. O Banco Mundial como referncia para a justia social no terceiro mundo: evidncias do caso brasileiro. Revista da Fac. de Educao, So Paulo, v. 24, n. 1. 1998. FRANCO, C.; BONAMINO, A.; ALVES, F. Qualidade do ensino fundamental: polticas, suas possibilidades, seus limites. Educao e Sociedade, Campinas, v. 28, n. 100, out. 2007. GATTI, B.A. Avaliao de sistemas educacionais no Brasil. Ssifo Revista de Cincias da Educao, Lisboa, n. 9, maio/ ago. 2009. GINSBURG, A. et al. Reassessing U.S. International Mathematics Performance: New Findings from the 2003 TIMSS and PISA.
So Paulo em Perspectiva, v. 23, n. 1, p. 90-100, jan./jun. 2009

100

Maurcio Loboda Fronzaglia Disponvel em: <http://cimm.ucr.ac.cr/ojs/index.php/ eudoxus/article/viewFile/446/445>. Acesso em: 24 set. 2009. GOLDSTEIN, H. Evidence and education policy Some reflections and allegations. Cambridge Journal of Education, v. 38, n. 3, p. 393-400, Sept. 2008. GRENET, J. PISA: une enqute bancale? La vie des Ides, Paris, fvr. 2008. Disponvel em: <http://assoc.pagespro-orange. fr/FCPE.15Bauches/Pisa_Grenet2008.pdf>. Acesso em: 24 set. 2009. HFLING, E. de M. Estado e polticas (pblicas) sociais. Cadernos Cedes, Campinas, v. 21, n. 55, p. 30-41, nov. 2001. KEELEY, B. Le Capital Humain: Comme Le Savoir Dtermine Notre Vie. Les Essenciels de lOCDE. 2007. Disponvel em: <http:// books.google.com.br/books?hl=pt-BR&lr=&id=Wi4f4VQmSc C&oi=fnd&pg=PA9&dq=OCDE+Le+capital+humain+google &ots=uHkJj5pIaD&sig=mBTy3LaUFiLnrzRZabQXO9byYm0 #v=onepage&q=&f=false>. Acesso em: 24 set. 2009. MARCHESI, A. El Informe PISA y La Poltica Educativa em Espaa. Revista de Educacin, Madrid, Ed. Extraordinario, p. 337-355, 2006. MENEZES-FILHO, N. Os determinantes do desempenho escolar do Brasil. Sumrio Executivo. So Paulo, IBMEC, 2007. MERLE, M. Bilan des Relations Internationales. Paris: Editions Economica. 1995. 210 p. NORMAND, R. Les comparaisons internationales de rsultats: problmes pistemologiques et questions de justice. ducations et Socites, n. 12, 2003. OCDE. Les essentiels de lOCDE. Le capital humain: Comment le savoir dtermine notre vie. ditions OCDE, 2007. PEREZ, J.R.R.; PASSONE, E.F. A perspectiva poltica da educao comparada e as avaliaes internacionais da qualidade da educao. Polticas Educativas, Campinas, v. 1, n. 1, p. 45-59, out. 2007. RAMALHO, G. As aprendizagens no sistema educativo portugus: principais resultados dos estudos realizados. In: AZEVEDO, J. (Org.). Avaliao dos resultados escolares: medidas para tornar o sistema mais eficaz. Porto: ASA, 2003. p. 13-74. RIBEIRO, B.B.D. A funo social da avaliao escolar e as polticas de avaliao da educao bsica no Brasil dos anos 90: breves consideraes. Inter-Ao: Revista da Faculdade de Educao UFG, v. 2, n. 27, jul./dez. 2002, p. 127-142. ULJENS, M. The hidden curriculum of PISA the promotion of neo-liberal policy by educational assessment. Disponvel em: <http://arkisto.kasvatus.net/kasvatustieteenpaivat2007/uljens. pdf>. Acesso em: 24 set. 2009. Paper to be presented at the FERA congress in Vasa, 22-23 Nov. 2007. (A version of this paper is included in Hopman, S.T.; Brinek, G. e Retzl, M. (Ed.). PISA zufolge PISA PISA according to PISA. Does PISA keep what it promises? Wienna: LIT Verlag, 2007). VAISSE, M. Les Relations Internationales depuis 1945. Paris, Ed. Armand Colin, 2001, 204p. VINOKUR, A. De la scolarisation de masse la formation tout au long de la vie: essaie sur ls enjeux conomiques ds doctrines educatives ds organisations internationales. ducations et Socites, n. 12, 2003. WALTENBERG, F. D. Iniquidade Educacional no Brasil. Uma Avaliao com dados do PISA 2000, Revista Economia, So Paulo, jul. 2005. WOESSMANN, L.; HANUSHEK, E.A. Does Educational Tracking Affect Performance and Inequality? Differences-inDifferences Evidence across Countries. CESifo Working Paper Series, fev. 2005.

Maurcio Loboda Fronzaglia Cientista Social, Professor da Universidade Mackenzie e Assessor de Gabinete da Secretaria Estadual de Educao de So Paulo, So Paulo SP, Brasil. mfronzaglia@hotmail.com

Artigo recebido em 19 de maro de 2009. Aprovado em 14 de maio de 2009.

Como citar o artigo: FRONZAGLIA, M.L. Sistemas de avaliao do ensino: a internacionalizao de uma poltica pblica. So Paulo em Perspectiva, So Paulo, Fundao Seade, v. 23, n. 1, p. 90-100, jan./jun. 2009. Disponvel em: <http://www.seade.gov.br>; <http://www.scielo.br>. Acesso em:
So Paulo em Perspectiva, v. 23, n. 1, p. 90-100, jan./jun. 2009