Escolar Documentos
Profissional Documentos
Cultura Documentos
Adriana BauerI
Ocimar Munhoz AlavarseI
Romualdo Portela de OliveiraI
Resumo
Palavras-chave
Educ. Pesqui., So Paulo, v. 41, n. especial, p. 1367-1382, dez., 2015. http://dx.doi.org/10.1590/S1517-9702201508144607 1367
Large-scale assessment: debate systematization
Adriana BauerI
Ocimar Munhoz AlavarseI
Romualdo Portela de OliveiraI
Abstract
Keywords
1368 http://dx.doi.org/10.1590/S1517-9702201508144607 Educ. Pesqui., So Paulo, v. 41, n. especial, p. 1367-1382, dez., 2015.
Introduo Com algumas excees que tiveram maior
repercusso, como os livros de Diane Ravitch
As reformas educativas implantadas nas (2010) e o de Almerindo Afonso (2000), a
ltimas dcadas caracterizam-se por um conjunto contribuio internacional ao debate a respeito
de medidas que articulam os seguintes aspectos: de avaliaes em larga escala praticamente
a) centralizao dos sistemas de avaliao, ausente no debate brasileiro acerca do tema,
que passam a ser utilizados como instrumentos de com predominncia da difuso de posies
gesto e alimentam polticas de responsabilizao crticas a estas.
aliadas a desenhos censitrios de avaliao externa; Por outro lado, h trabalhos de autores
b) descentralizao dos processos de gesto que no negam a contribuio das avaliaes
e financiamento, que fortalecem o discurso da em larga escala e das medidas educacionais
autonomia e da gesto democrtica da escola, como norteadoras de polticas e programas
numa perspectiva de melhoria dos resultados, o que educacionais, mas que se contrapem ao modo
inclui a autonomia financeira para buscar novas como estas tm se difundido no territrio
fontes de recursos, que no as fontes pblicas nacional, bem como ao uso que vem sendo
tradicionais, e novas formas de gerenciamento feito de seus resultados, como encontramos,
da educao pblica, o que inclui autonomia de entre outros autores, em Freitas (2013); Sousa,
gesto financeira e autonomia de gesto (school Oliveira (2010).
based management); Os autores deste trabalho reconhecem
c) ampliao das possibilidades de escolha a utilidade dessas avaliaes, ainda que
(choice), estimulando mecanismos de competio questionem alguns de seus usos para a gesto,
entre as escolas, o que induziria melhoria de por exemplo, como critrio para alocao de
sua qualidade; e recursos nas escolas com melhores resultados,
d) valorizao dos resultados e busca de a definio de bnus para professores, o
maior efetividade do servio ofertado (school estabelecimento de rankings estimulando a
effectiveness) (Cf. BONAMINO, 2013; LEVIN, 2001; competio entre escolas e redes de ensino entre
OLIVEIRA, 1999, 2000). outros, e seu entendimento como indicador
Ainda que estas caractersticas tenham nico e principal de qualidade de ensino (Cf.
se difundido de modo peculiar em cada pas, OLIVEIRA, 2013; BAUER, 2010; 2012; 2013;
e que nem sempre apaream ao mesmo tempo MACHADO; ALAVARSE, 2014).
em todas as reformas implantadas, no caso Assim sendo, o objetivo deste artigo
brasileiro bastante evidente a difuso e discutir as principais crticas s avaliaes em
ampliao de avaliaes que tm como trao larga escala presentes na literatura nacional
comum a utilizao de provas padronizadas, e internacional e sistematizar o debate em
aplicadas em larga escala, configurando torno dos possveis usos de seus resultados.
nitidamente um processo de avaliaes Para tanto, organizamos o texto a partir de
externas, com crescente importncia no dois aspectos recorrentes na literatura: 1. O
desenho das polticas educacionais de todos papel e a validade das avaliaes em larga
os entes federados. escala nas reformas educacionais, em que
A aceitao de tais avaliaes, entre discutiremos, tambm, a fundamentao e
ns, longe est de ser consensual. Ao contrrio, conceituao dos testes em larga escala; e 2.
ainda encontramos parcelas significativas O uso dos resultados das avaliaes em larga
da comunidade acadmica e educacional escala, para a gesto do sistema escolar e das
que, de maneira geral, desconsideram as escolas em particular, abrangendo o que os
eventuais contribuies que podem se originar sistemas de ensino e as escolas realizam com
das medidas educacionais em larga escala. os resultados de suas avaliaes.
1370 Adriana BAUER; Ocimar Munhoz ALAVARSE; Romualdo Portela de OLIVEIRA. Avaliaes em larga escala: uma...
4. Produzem diversas comparaes entre 7. Podem responsabilizar os prprios
alunos de uma mesma escola e entre alunos estudantes por sua aprendizagem, desafiando-
de diferentes escolas da regio ou, at mesmo, os constantemente a melhorar seus resultados
do pas, que no seriam possveis se elas no e possibilitando que se criem incentivos
existissem. Da mesma forma, em nvel de rede de para melhorar as aprendizagens (Cf. EVERS;
ensino, um determinado gestor poder comparar WALBERG, 2002);
o desempenho das escolas de sua rede com as 8. Impulsionam mudanas em currculos
de outros municpios, estados e com as mdias inadequados (Cf. MADAUS; RUSSELL; HIGGINS,
nacionais. Tais comparaes so importantes em 2009); e
contextos em que h uma matriz de referncia 9. Subsidiam programas de melhoria
ou um currculo bsico comum; referentes idade de ingresso no ensino
5. So, por natureza, mais neutras e superior, com vistas a obter-se maior equidade
objetivas e, normalmente, corrigidas com nos resultados (Cf. EVERS; WALBERG, 2002).
a utilizao de programas computacionais, Entretanto, h os que se posicionam
possibilitando manter o anonimato dos estudantes criticamente a respeito do papel poltico das
e minimizando a subjetividade inerente s avaliaes externas. Para alguns, como Arelaro
correes realizadas pelos professores em sala (2003) e Esteban (2012), tais avaliaes vm
de aula. Alm disso, o processo de elaborao responder a presses para mudanas nos
de itens e instrumentos, usualmente, envolve modos de administrao e controle das redes de
especialistas para a eliminao de imperfeies ensino, estando aliadas a um novo modelo de
e vieses de resposta e para garantir sua validade gesto educacional (nova gesto pblica). Tais
medir o que se deseja medir. Nesse sentido, a presses, oriundas de organismos multilaterais,
busca pelo aprimoramento da dimenso tcnica seriam no sentido de impor uma agenda
das avaliaes, principalmente da validade dos educacional transnacional.
testes e das tcnicas de anlise dos resultados, H tambm os que criticam as avaliaes
conferir-lhes-ia, segundo alguns autores, como, estandardizadas devido ao papel que tm
por exemplo, Fernandes; Gremaud (2008), assumido no direcionamento de polticas
maior preciso e credibilidade dos resultados. de responsabilizao e prestao de contas
Essa discusso tcnica foi bastante enfatizada (accountability), principalmente quando passam
na literatura dedicada ao tema no incio da a compor polticas de alto impacto (high stakes
expanso e consolidao de diversas avaliaes; tests), como, por exemplo, a atribuio de
6. Garantem a constituio de bases de bnus e/ou premiao a professores e escolas1
dados objetivos e de um sistema de informaes (Cf. FERRER, 1996; FREITAS, 2013).
que possibilitam acompanhar a evoluo da Assim, como as avaliaes padronizadas
educao e favorecem a tomada de decises em larga escala possuem um papel poltico
no mbito educacional das polticas pblicas que no pode ser desconsiderado, ganha
com maior consistncia. Alm disso, o posterior importncia a anlise tanto de suas finalidades
estudo e anlise desses dados, em relao a e propsitos quanto dos efeitos que essas
fatores diversos, tanto referentes a caractersticas podem ter nos sistemas educativos em que
dos sujeitos (etnia, nvel socioeconmico, sexo, so aplicadas (Cf. BROADFOOT, 1996; COSTA,
background cultural etc.), quanto com relao 1998; OZGA, 2000). Como ilustra Patrcia
s caractersticas das escolas, do professorado, Broadfoot (1996, p. 12-13):
das redes de ensino, podem subsidiar o 1- Popham (1987) utilizou o termo high stakes para referir-se a testes
desenvolvimento de programas educacionais cujos resultados tinham consequncias severas sobre os alunos.
Complementarmente, o termo low stakes utilizado para caracterizar testes
especficos, com vistas melhoria dos resultados padronizados que no tm consequncias sobre a populao avaliada,
obtidos (Cf. CASTRO, 2009b); direta (alunos) ou indiretamente (professores, gestores etc.).
1372 Adriana BAUER; Ocimar Munhoz ALAVARSE; Romualdo Portela de OLIVEIRA. Avaliaes em larga escala: uma...
Stecher (2002, p. 99-100), contudo, indica seja a avaliao mais importante da escola
a necessidade de aprofundamentos investigativos para o autor.
a respeito da disseminao desses testes, pois: Para Nevo (1995), no entanto, as polticas
educacionais precisariam favorecer e criar
O efeito lquido de testes de alto impacto condies para esse dilogo. Deveriam comear
sobre a poltica e a prtica incerto. Os pelo reconhecimento de que se as avaliaes
pesquisadores no tm documentado externas podem contar com pessoal mais
as consequncias desejveis de mais especializado tecnicamente e trazer resultados
instruo, trabalho com mais afinco e decorrentes de um olhar menos condicionado
trabalho mais eficaz , to claramente pelas rotinas da escola e, portanto, de maior
como as indesejveis alinhamento amplitude, podendo envolver comparaes
curricular negativo, alocao negativa com um conjunto de escolas, essas avaliaes
do tempo de aula para enfatizar tpicos no gozam, via de regra, de reconhecimento
abordados por um teste, treinamento acentuado no processo de trabalho de cada
excessivo, e trapaa. Mais importante, os uma das escolas, algo que s uma avaliao
pesquisadores no tm, em geral, medido interna dispe, ainda que custa de menor
a extenso ou magnitude das mudanas preciso sobre alguns objetos de avaliao.
na prtica que eles identificam como um Nesses termos, at mesmo para que a ideia de
resultado de testes de alto impacto. avaliao formativa possa ser posta em prtica,
No geral, as evidncias sugerem que os o autor defende que ambas as avaliaes se
testes em larga escala de alto impacto tm complementam, superando suas limitaes e
sido uma poltica relativamente potente adicionando suas potencialidades.
em termos de trazer mudanas dentro das Deve-se considerar, ainda, que no debate
escolas e salas de aula. [...] Vai demorar e na literatura h questionamentos em torno
mais tempo e mais pesquisa para determinar da validade, da adequao dos instrumentos
que os impactos positivos no ensino e no utilizados e da confiabilidade dos resultados
aprendizado do aluno superam os negativos. relativos s avaliaes padronizadas. Tais
questionamentos colocam em dvida o que
David Nevo (1995), mesmo so capazes de medir e da prpria medio, em
reconhecendo que muitas das avaliaes termos de aprendizagem dos alunos, o cerne
externas esto inseridas em polticas daquilo para o que foram projetadas e com
educacionais que ignoram em suas formulaes a preciso anunciada de seus resultados (Cf.
as necessidades das escolas, trabalha com a BROADFOOT, 1996; CASASSUS, 2013).
necessidade e a possibilidade de dilogo entre Se tais dvidas apontam para a
as avaliaes externas e as avaliaes internas necessidade de discusso de aspectos tcnicos,
estas conduzidas pelos professores ou consideramos que esta deveria ser realizada em
pelos profissionais da educao , pois cada conjunto com a discusso sobre os objetivos
uma das avaliaes possuem potencialidades das avaliaes, sua disseminao e usos dos
e limitaes, ressaltando, entretanto, que resultados. O debate tcnico, inclusive para que
esse dilogo deve ser baseado na escola. As se garanta a meta-avaliao dessas avaliaes,
avaliaes internas poderiam ser identificadas exigncia decorrente da necessidade de
como avaliaes institucionais, conduzidas controle social sobre as mesmas, como destacou
com vistas ao conjunto de elementos que Alavarse (2013, p. 148), forosamente deve ser
caracterizam o trabalho escolar, no se aliado ao debate pedaggico, a fim de que
restringindo, necessariamente, avaliao da ajustes pudessem ser realizados em prol da
aprendizagem de seus alunos, ainda que essa consolidao de avaliaes mais significativas,
1374 Adriana BAUER; Ocimar Munhoz ALAVARSE; Romualdo Portela de OLIVEIRA. Avaliaes em larga escala: uma...
definio de competncias e habilidades a serem e professores ou, at mesmo, o fechamento de
desenvolvidas nos alunos, parecem no ecoar na escolas ou sua maior superviso pelo Estado,
escola, no tendo sentido para aqueles que, em entendida como perda de autonomia;
ltima instncia, fazem as reformas acontecerem, 2. As avaliaes em larga escala
ou seja, os professores e tcnicos escolares. Essas interferem na autonomia dos docentes,
avaliaes, em geral, no atentam para outras influenciando at mesmo a forma como os
demandas que as escolas enfrentam, como as contedos so ensinados;
necessidades sociais do pblico que tem acessado 3. Provas padronizadas e rankings
a escolarizao formal e que, anteriormente, incentivam a competio entre escolas e alunos,
estava excludo dela (Cf. OLIVEIRA, 2007, 2011), substituindo o aprendizado pela melhoria nos
as caractersticas de formao dos profissionais resultados em provas, gerando processos de
que se dedicam educao, a garantia de ensinar para os testes, o que, no limite, substitui
condies de educabilidade mnimas, para que os o aprendizado pela difuso de macetes que
estudantes possam produzir suas aprendizagens potencializam os resultados (SANTOS, 2013);
(Cf. IAIES, 2003). 4. As avaliaes externas padronizadas,
Dessa forma, haveria uma distncia usualmente realizadas em um ou dois dias, no
entre as consideraes tcnicas que embasam consideram fatores externos que podem afetar
a avaliao e o debate poltico-educacional que o desempenho dos alunos. H estudos que
precisa ser enfrentado tanto na escola como nos mostram que muitos alunos no apresentam
nveis centrais, pelos gestores do sistema. Como bom desempenho em testes com itens de
provoca Iaies (2003, p. 20-21), mltipla escolha, bem como que os resultados
dos alunos so influenciados por fatores como
Construram-se indicadores que se definiram ansiedade, por exemplo;
tecnicamente, e que consideram quase com 5. As avaliaes podem gerar o
exclusividade as habilidades acadmicas. fenmeno do afunilamento curricular, levando
Nossos ndices no consideram o aumento os professores a ensinar somente os contedos
das taxas de escolarizao, a capacidade cobrados nas provas, sem se preocupar em
do sistema para homogeneizar atores de desenvolver outros contedos e habilidades
uma sociedade cada dia mais segmentada, importantes formao dos alunos (Cf.
dar conta dos novos pblicos que a escola MADAUS; RUSSEL; HIGGINS, 2009);
tem sido capaz de abrigar, da capacidade 6. As avaliaes so parciais,
de conter outras realidades sociais, etc. E normalmente realizadas para poucas disciplinas
essas definies implicam uma tomada de curriculares, e no conseguem captar o
postura ideolgica, utilizar umas variveis crescimento geral no decorrer do ano letivo,
e abandonar outras; o certo que a induzindo, se muitos valorizados os resultados,
experincia dos '90 faz pensar mais em uma ao afunilamento curricular (Cf. BAUER, 2013;
no tomada de posio poltica, no sentido MADAUS; RUSSELL; HIGGINS, 2009);
de que os tomadores de decises no se 7. Produzem injustias relativas
posicionaram nesse ponto. bonificao de professores e premiao das
melhores escolas (Cf. BAUER, 2012; BROOKE,
Outros argumentos contrrios s 2013; FREITAS, 2013; SOUSA, 2008);
avaliaes padronizadas que aparecem na 8. A presso para melhoria de resultados
literatura, consideram que: pode levar os dirigentes escolares a tomar
1. A responsabilizao de professores decises sobre o gerenciamento dos tempos e
e escolas pode levar a medidas punitivas contedos a serem ensinados que podem ter
injustas, como a perda do emprego de gestores influncia negativa sobre professores e alunos
1376 Adriana BAUER; Ocimar Munhoz ALAVARSE; Romualdo Portela de OLIVEIRA. Avaliaes em larga escala: uma...
dos alcances dos indicadores finalmente escolas, podendo apoiar a tomada de decises
pode levar ao imobilismo: estariam em seu interior (Cf. EVERS; WALBERG, 2002;
dispostas as autoridades a seguir dando MADAUS; RUSSELL; HIGGINS, 2009);
transparncia a sua gesto sem que os 3. Produzem, para comunidades,
instrumentos se voltem contra si? Estariam informaes sobre a qualidade do ensino
dispostos os instrumentos de comunicao nas escolas, em relao aos componentes
a no disporem destes dados? curriculares avaliados, auxiliando os pais a
tomar decises bem fundamentadas sobre onde
Complementarmente, Brunner (2003, p. desejam que seus filhos estudem (Cf. EVERS;
81-82), ao analisar a divulgao dos resultados WALTBERG, 2002);
das avaliaes, especialmente nos jornais e 4. Fariam com que professores e
peridicos, salienta que estes no atentam para alunos buscassem melhorar seu desempenho,
a complexidade dos resultados e o contexto vinculadas com polticas de premiao a elas
onde so produzidos. Para o autor, os peridicos associadas, como motivao extrnseca (Cf.
MADAUS; RUSSELL; HIGGINS, 2009); e
[] se limitam a ressaltar unidimensional- 5. Teriam potencial para manter
mente os produtos finais destes processos a professores e escolas responsveis pelo
saber, os resultados enquanto pontuao e aprendizado de todos os alunos, medida que
a organiz-los em um esquemtico ranking os informam acerca dos alunos que no esto
de pases ou tipos de estabelecimento, aprendendo conforme o esperado (Cf. EVERS;
suprimindo toda referncia ao contexto WALTBERG, 2002).
onde se obtm estes resultados. Com isso,
se banaliza a informao que aportam H ainda autores que discutem que algumas
os estudos nacionais e internacionais de implicaes das avaliaes sobre as redes e escolas
medida do rendimento escolar e, o que no so, em essncia, boas ou ruins, mas que podem
mais grave, se distorce a opinio pblica e ter influncias diferenciadas, a depender de cada
se limitam seus efeitos. contexto escolar. Segundo Madaus; Russell, Higgins
(2009, p. 3), por exemplo, nem sempre os testes tm
No que se referem s contribuies uma influncia sobre escolas, professores e alunos,
dos resultados das avaliaes em larga escala pois alguns alunos e professores simplesmente
para as escolas e sistemas educativos, alguns ignoram os testes e continuam a fazer o que
aspectos positivos tm sido destacados na sempre fizeram, corroborando apontamentos
literatura. Nessa perspectiva, as avaliaes de Stecher (2002). Para Mons (2009), problemas
padronizadas: podem comear a surgir quando se utiliza o
1. Definem padres e expectativas para resultado de avaliaes locais (regionais, estaduais
o aprendizado dos alunos, podendo servir para ou municipais) para serem tanto ferramenta de
orientar o trabalho das escolas (Cf. BOMENY, gerenciamento quanto medida de efetividade dos
1997). Servem, assim, de guia ao planejamento resultados, visto que o uso gerencial pode gerar
dos professores, dando-lhes pistas sobre o consequncias que deturpam o prprio dado obtido
que e quando ensinar aos alunos, apoiando nas avaliaes locais.
o gerenciamento de sala de aula e evitando, No entanto, as crticas aos efeitos das
assim, perda de tempo didtico (Cf. EVERS; avaliaes externas nas escolas e nas redes de
WALBERG, 2002); ensino superam os argumentos favorveis, pela
2. Mediante o emprego de testes e seus observao de que se concentram no uso dos
resultados, geram informaes que ficam resultados associado a polticas de alto impacto.
disponibilizadas para os professores e as Diversos so os autores que se detm na anlise
1378 Adriana BAUER; Ocimar Munhoz ALAVARSE; Romualdo Portela de OLIVEIRA. Avaliaes em larga escala: uma...
majoritariamente, elas incidem sobre questes e professores a estmulos por melhoria a partir
relativas ao uso inadequado de seus resultados. de indicadores ancorados nessas avaliaes pode
A preocupao com o conjunto do ter um sentido diverso do pretendido. Podem
sistema educacional coloca-nos questes estimular comportamentos perversos, dos quais
substantivas, certamente no respondidas pelo os mais conhecidos so a excluso das populaes
discurso da autonomia da escola. Se aceitarmos que se supe tero os piores resultados, j
esse argumento estamos fazendo vistas grossas nos processos de matrcula, sua ocultao nos
s desigualdades j existentes. Ou seja, as dias de aplicao das provas, convidando-os
experincias escolares pregressas da populao a no comparecerem, ou simplesmente uma
so diferenciadas, de modo que aquelas que amplificao das desigualdades no interior
tiveram menos ou nenhuma experincia anterior da escola, investindo-se mais nos alunos que
com a escola (em geral a parcela mais pobre e apresentem potencialmente perspectivas de
discriminada da sociedade) tm menos condies melhores resultados.
de formular uma crtica que induza a escola a Assim, diante do se poderia denominar de
melhorar. Ao contrrio, as evidncias indicam viso ingnua das virtudes das avaliaes em larga
que essas populaes tendem a ver a escola mais escala, inclusive porque constatamos caractersticas
positivamente, afinal, qualquer escola melhor que deveriam ser suprimidas, consideramos que
que nenhuma. Assim sendo, cabe ao centro do essas avaliaes tm potencialidades para produzir
sistema, seus administradores, se preocupar com avanos no conhecimento do universo educacional.
a reduo da desigualdade e a garantia do direito Entendemos que podem, garantidas determinadas
ao aprendizado a todos. condies e adequada utilizao, estabelecer
Da mesma forma, alimentar iluses a pontos de apoio para polticas de melhoria dos
respeito do poder indutor das avaliaes em larga sistemas educacionais no sentido da garantia do
escala desconhecer que a resposta das escolas direito educao a todos.
Referncias
AFONSO, Almerindo. Avaliao educacional: regulao e emancipao: para uma sociologia das polticas educativas
contemporneas. So Paulo: Cortez, 2000.
AFONSO, Almerindo. Polticas educativas e avaliao educacional. Braga: Universidade do Minho, 1998.
ALAVARSE, Ocimar Munhoz. Desafios da avaliao educacional: ensino e aprendizagem como objetos de avaliao para a
igualdade de resultados. Cadernos Cenpec, So Paulo, v. 3, n. 1, p. 135-153, jun. 2013.
ARELARO, Lisete Regina Gomes. Direitos sociais e poltica educacional: alguns ainda so mais iguais que outros. In: SILVA, Shirley;
VIZIM, Marli (Org.). Polticas pblicas: educao, tecnologias e pessoas com deficincias. Campinas: Mercado de Letras, 2003.
p. 13-36. (Leituras no Brasil).
BARRERA, Susana. Polticas educacionais, qualidade da educao na Amrica Latina e aporte da avaliao como ferramenta de
gerenciamento social. In: CONFERNCIA INTEGRAO E CONVERGNCIA ENTRE O MERCOSUR E A COMUNIDADE ANDINA DE
NAES, 2000, La Paz. Anais... La Paz: Instituto Internacional de Integrao (I.I.I.), 2000.
BAUER, Adriana. possvel relacionar avaliao discente e formao de professores? Educao em Revista, Belo Horizonte, v.
28, n. 2, p. 61-82, jun. 2012.
BAUER, Adriana. Limites, desafios e possibilidades das avaliaes de sistemas educacionais: contribuies do ciclo de debates
para as polticas de avaliao. In: BAUER, Adriana; GATTI, Bernadete A.; TAVARES, Marialva R. (Org.). Vinte e cinco anos de
avaliao de sistemas educacionais no Brasil: implicaes nas redes de ensino, no currculo e na formao de professores.
Florianpolis: Insular, 2013. p. 281-294.
BOMENY, Helena (Org.) Avaliao e determinao de padres na educao latinoamericana: realidades e desafios. So
Paulo: FGV, 1997.
BONAMINO, Alicia C. Avaliao educacional no Brasil 25 anos depois: onde estamos? In: BAUER, Adriana; GATTI, Bernardete A.
(Orgs.). Vinte e cinco de avaliao de sistemas educacionais no Brasil: origens e pressupostos. Florianpolis: Insular, 2013.
p 43-60.
BONAMINO, Alicia C. Tempos de avaliao educacional: o SAEB, seus agentes, referncias e tendncias. Rio de Janeiro: Quartet, 2001.
BRITZ, Pablo H. Indicadores y sus usos en educacin: una tensin no resuelta. In: Unesco. Evaluar las evaluaciones: una mirada
poltica acerca de las evaluaciones de la calidad educativa. Buenos Aires: IIPE: Unesco, 2003. p. 85-95.
BROADFOOT, Patrcia. Education, assessment and society: a sociological analysis. Buckingham: Open University Press, 1996.
BROOKE, Nigel. Polticas estaduais de bonificao: buscando o dilogo. In: BAUER, Adriana; GATTI, Bernardete A. (Org.). Vinte e
cinco anos de avaliao de sistemas educacionais no Brasil: origens e pressupostos. Florianpolis: Insular, 2013. p. 119-146.
BRUNNER, Jos Joaqun. Lmites de la lectura periodstica de resultados educacionales. In: Evaluar las evaluaciones: una mirada
poltica acerca de las evaluaciones de la calidad educativa. Buenos Aires: IIPE: Unesco, 2003. p. 67-84.
CASASSUS, Juan. Poltica y metforas: un anlisis de la evaluacin estandarizada en el contexto de la poltica educativa. In: BAUER,
Adriana; GATTI, Bernardete A.; TAVARES, Marialva R. (Org.). Vinte e cinco de avaliao de sistemas educacionais no Brasil:
origens e pressupostos. Florianpolis: Insular, 2013. p 21-46.
CASTRO, Maria H. G. A consolidao da poltica de avaliao da educao bsica no Brasil. Meta: avaliao, Rio de Janeiro, v. 1,
n. 3, p. 271-296, set./dez. 2009a.
CASTRO, Maria H. G. O desafio da qualidade. In: ITUASSU, Arthur; ALMEIDA, Rodrigo de (Org.). O Brasil tem jeito?: educao,
sade, justia e segurana. v. 2. Rio de Janeiro: Jorge Zahar, 2007. p. 35-72.
CASTRO, Maria H. G. Sistemas de avaliao da educao no Brasil: avanos e novos desafios. So Paulo em Perspectiva, So
Paulo, v. 23, n. 1, p. 5-18, jan./jun. 2009b.
COSTA, Marta E. A avaliao de desempenho na rea de lngua na Argentina: a utilizao de provas objetivas. In: CONHOLATO,
Maria Conceio; FERREIRA, Maria Jos do Amaral (Coord.). Sistemas de avaliao educacional. So Paulo: FDE, 1998. p.
39-88. (Ideias, n. 30).
ESQUINSANI, Rosemar Siqueira S. Performatividade e educao: a poltica das avaliaes em larga escala e a apropriao da
mdia. Prxis Educativa, Ponta Grossa, v. 5, n. 2, p. 131-137, jul./dez. 2010.
ESTEBAN, Maria Teresa. Consideraes sobre a poltica de avaliao da alfabetizao: pensando a partir do cotidiano escolar.
Revista Brasileira de Educao, Rio de Janeiro, v. 17, n. 51, p. 573-592, set./dez. 2012.
EVERS, Williamson M.; WALBERG, Herbert J. School accountability. Stanford: Hoover Institution Press, 2002.
FARBER, Katy. Why great teachers quit: and how we might stop the exodus. Thousand Oaks: Corwin, 2010.
FERNANDES, Reynaldo; GREMAUD, Amaury Patrick. Qualidade da educao: avaliao, indicadores e metas. In: VELOSO, Fernando
et al. (Orgs.). Educao bsica no Brasil: construindo o pas do futuro. Rio de Janeiro: Elsevier, 2009. p. 213-238.
FERRER, Alejandro Tiana. Avaliao e mudana de sistemas educacionais: a interao que falta. In: SEMINRIO INTERNACIONAL
DE AVALIAO DA EDUCAO, 1996, Braslia, Anais... Braslia: MEC, 1996. p. 33-54.
FERRER, J. G.; ARREGUI, Patrcia. Provas internacionais de aprendizado aplicadas na Amrica Latina e seu impacto na
qualidade da educao: critrios para futuras aplicaes. Rio de Janeiro: Preal, 2003.
1380 Adriana BAUER; Ocimar Munhoz ALAVARSE; Romualdo Portela de OLIVEIRA. Avaliaes em larga escala: uma...
FREITAS, Luiz C. Caminhos da avaliao de sistemas educacionais no Brasil: o embate entre a cultura da auditoria e a cultura da
avaliao. In: BAUER, Adriana; GATTI, Bernardete A.; TAVARES, Marialva R. (Org.). Vinte e cinco anos de avaliao de sistemas
educacionais no Brasil: origens e pressupostos. Florianpolis: Insular, 2013. p 147-176.
HAGOPIAN, Jesse (Ed.). More than a score: the new uprising against high-stakes testing. Chicago: Haymarket Books, 2014.
HOUSE, Ernest. Arranjos institucionais para avaliao. In: SEMINRIO INTERNACIONAL DE AVALIAO EDUCACIONAL, 1998,
Braslia. Anais... Braslia: MEC; Inep; Unesco, 1998.
HYPOLITO, lvaro M. A necessria meta-avaliao das polticas de avaliao. In: BAUER, Adriana; GATTI, Bernardete A. (Org.). Vinte
e cinco anos de avaliao de sistemas educacionais no Brasil: origens e pressupostos. Florianpolis: Insular, 2013. P. 211-227.
IAIES, Gustavo. Evaluar las evaluaciones. In: Unesco. Evaluar las evaluaciones: una mirada poltica acerca de las evaluaciones de
la calidad educativa. Buenos Aires: IIPE; Unesco, 2003. p. 15-36.
KELLAGHAN, Thomas; GREANEY, Vicent. Using examinations to improve education: a study in fourteen African countries.
Washington, DC: World Bank, 1992.
KLEIN, Ruben; FONTANIVE, Nilma S. Avaliao em larga escala: uma proposta inovadora. Em Aberto, Braslia, v. 15, n. 66, p. 29-
34, abr./jun. 1995.
LEVIN, Benjamin. Reforming education: from origins to outcomes. New York: Routledge; Falmer, 2001. (Educational Change and
Development).
LIMA, Licnio C. Avaliao, competitividade e hiperburocracia. In: ALVES, Palmira; DE KETELE, Jean-Marie (Org.). Do currculo
avaliao, da avaliao ao currculo. Porto: Porto, 2011. p. 71-82.
MACHADO, Cristiane; ALAVARSE, Ocimar Munhoz. Qualidade das escolas: tenses e potencialidades das avaliaes externas.
Educao & Realidade, Porto Alegre, v. 39, n. 2, p. 413-436, abr./jun. 2014.
MADAUS, George; RUSSELL, Michael; HIGGINS, Jennifer. The paradoxes of high stakes testing: how they affect students, their
parents, teachers, principals, schools, and society. Charlotte: Information Age, 2009.
MONS, Nathalie. Theoretical and real effects of standardised assessment. [S.l.]: EACEA; Eurydice, 2009.
NEVO, David. School-based evaluation: a dialogue for school improvement. Oxford: Pergamon, 1995.
OLIVEIRA, Romualdo P. A utilizao de indicadores de qualidade na unidade escolar ou porque o IDEB insuficiente.
In: BAUER, Adriana; GATTI, Bernadete A.; TAVARES, Marialva R. (Org.). Vinte e cinco anos de avaliao de sistemas
educacionais no Brasil: implicaes nas redes de ensino, no currculo e na formao de professores. Florianpolis: Insular,
2013. p. 87-100.
OLIVEIRA, Romualdo P. Da universalizao do ensino fundamental ao desafio da qualidade: uma anlise histrica. Educao e
Sociedade, Campinas, v. 28, n. 100, p. 661-690, out. 2007.
OLIVEIRA, Romualdo P. O direito educao na Constituio de 1988 e seu reestabelecimento pelo sistema de Justia. Revista
Brasileira de Educao, Rio de Janeiro, v. 11, p. 61-74, , maio/ago, 1999.
OLIVEIRA, Romualdo P. Reformas educativas no Brasil na dcada de 90. In: CATANI, Afrnio Mendes; OLIVEIRA, Romualdo P. (Org.).
Reformas educacionais em Portugal e no Brasil. Belo Horizonte: Autntica, 2000. p. 77-94.
OLIVEIRA, Romualdo P. IDEB e trabalho pedaggico da escola: uma articulao possvel? Revista Escola Pblica, So Paulo, v.
especial, p. 76-92, 2011.
OLIVEIRA, Romualdo P. et al. Anlise das desigualdades intraescolares no Brasil. Estudos e Pesquisas Educacionais, v. 4, p. 19, 2013.
OZGA, Jenny. Investigao sobre polticas educacionais: terreno de contestao. Porto: Porto, 2000.
POPHAM, W. James. The merits of measurement-driven instruction. Phi Delta Kappan, v. 68, n. 9, p. 679-682, 1987.
SANTOS, Lucola L. A avaliao em debate. In: BAUER, Adriana; GATTI, Bernardete A. (Org.). Vinte e cinco anos de avaliao de
sistemas educacionais no Brasil: origens e pressupostos. Florianpolis: Insular, 2013. p. 229-245.
SOUSA, Sandra Z. Ensino fundamental: avaliando as polticas de avaliao educacional. Braslia: MEC/INEP, 2003. Texto
apresentado no Seminrio Avaliar para qu? Avaliando as polticas de avaliao educacional. Braslia, 08 abr. 2003.
SOUSA, Sandra Z. Avaliao e carreira do magistrio: premiar o mrito? Revista Retratos de Escola, Braslia, v. 2, n. 2/3, p. 81-
93, jan./dez. 2008.
SOUSA, Sandra Z.; OLIVEIRA, Romualdo P. Sistemas estaduais de avaliao: uso dos resultados, implicaes e tendncias.
Cadernos de Pesquisa, So Paulo, v. 40, p. 793-822, 2010.
STECHER, Brian M. Consequences of large-scale, high-stakes testing on school and classroom practice. In: HAMILTON, Laura;
STECHER, Brian M.; KLEIN, Stephen P. (Ed.). Making sense of test-based accountability in education. Santa Monica: Rand,
2002. p. 79-100.
TEDESCO, Juan C. Prlogo. In: UNESCO. Evaluar las evaluaciones: una mirada poltica acerca de las evaluaciones de la calidad
educativa. Buenos Aires: IIPE/Unesco, 2003. p. 11-14.
VIANNA, Heraldo Marelim. Avaliao: consideraes tericas e posicionamentos. In: VIANNA, Heraldo Marelim. Avaliao
educacional: teoria, planejamento, modelos. So Paulo: Ibrasa, 2000. p. 21-46.
VIANNA, Heraldo Marelim. Avaliaes nacionais em larga escala: anlises e propostas. So Paulo: Fundao Carlos Chagas /
DPE, 2003. 41 p. (Textos FCC, 23).
Ocimar Munhoz Alavarse professor no Departamento de Administrao Escolar e Economia da Educao, da Faculdade de
Educao da Universidade de So Paulo, onde coordena o Grupo de Estudos e Pesquisas em Avaliao Educacional (Gepave).
Romualdo Portela de Oliveira professor Titular no Departamento de Administrao Escolar e Economia da Educao,
da Faculdade de Educao da Universidade de So Paulo, pesquisador 1D do CNPq, membro da coordenao de Cincias
Humanas 3 (Educao e Psicologia) da FAPESP e Coordenador de Educao da Capes.
1382 Adriana BAUER; Ocimar Munhoz ALAVARSE; Romualdo Portela de OLIVEIRA. Avaliaes em larga escala: uma...