Escolar Documentos
Profissional Documentos
Cultura Documentos
Resumo
Correspondncia:
Alicia Bonamino
Pontifcia Universidade Catlica
do Rio de Janeiro
Departamento de Educao
Rua Marqus de So Vicente, 225, 1050 L
22451-900 Rio de Janeiro/RJ
alicia@puc-rio.br
373
Abstract
Contact:
Alicia Bonamino
Pontifcia Universidade Catlica
do Rio de Janeiro
Departamento de Educao
Rua Marqus de So Vicente,
225, 1050 L
22451-900 Rio de Janeiro/RJ
alicia@puc-rio.br
374
Dentre os marcos presentes na formulao e na implementao das polticas educacionais brasileiras nas duas ltimas dcadas,
ganham destaque as avaliaes com elementos
comuns a propostas realizadas em outros pases, expressando uma agenda mundial. Alm
de outros objetivos, as iniciativas de avaliao
associam-se promoo da qualidade do ensino, estabelecendo, no limite, novos parmetros
de gesto dos sistemas educacionais.
Em relao ao currculo, na maioria dos
pases, e independentemente do grau de descentralizao ou centralizao das formas de
regulao dos currculos escolares, o que se
constata uma tendncia utilizao de avaliaes centralizadas para mensurar o desempenho escolar dos alunos, sob os mesmos parmetros curriculares aos quais se considera que
todos os estudantes deveriam ter acesso.
Essa perspectiva mais universalista reforada pelo consenso que parece existir em
escala mundial a respeito da pequena variabilidade das propostas curriculares, o que se
reflete nos contedos das avaliaes nacionais e na participao recente de 65 pases
no Programa Internacional de Avaliao de
Estudantes (PISA), a partir da ideia de que o
currculo da cada pas comparvel aos dos
outros pases envolvidos.
No caso do Brasil, a anlise dos desenhos das avaliaes em andamento leva a que
se identifiquem trs geraes de avaliaes da
educao em larga escala, com consequncias
diferenciadas para o currculo escolar. Ao tempo em que se sucedem, essas geraes coexistem no mbito das redes de ensino; da a necessidade de se tomar tal classificao como um
recurso analtico.
A primeira gerao enfatiza a avaliao com carter diagnstico da qualidade da
educao ofertada no Brasil, sem atribuio de
consequncias diretas para as escolas e para o
currculo. No estgio atual das iniciativas de
avaliao em larga escala, emergem outros dois
novos modelos de avaliao com a finalidade
de subsidiar, a partir dos resultados dos alunos,
375
Embora se tenha evidncia de que, desde os anos 1930, havia interesse do Estado em
tomar a avaliao como parte do planejamento educacional, no final dos anos 1980 que
a avaliao passa paulatinamente a integrar
polticas e prticas governamentais direcionadas educao bsica. Como afirma Dirce Nei
Teixeira de Freitas (2007),
[...] foram necessrias mais ou menos cinco
dcadas para que a avaliao (externa, em
larga escala, centralizada e com foco no
rendimento do aluno e no desempenho dos
sistemas de ensino) viesse a ser introduzida
como prtica sistemtica no governo da
educao bsica brasileira. (p. 51)
376
Alicia BONAMINO; Sandra Zkia SOUSA. Trs geraes de avaliao da educao bsica no Brasil: interfaces...
dos alunos independentemente do conjunto especfico de itens respondidos; iii) opo de trabalhar com as sries conclusivas de cada ciclo
escolar (4 e 8 srie do ensino fundamental e
incluso da 3 srie do ensino mdio); iv) priorizao das reas de conhecimento de lngua portuguesa (foco em leitura) e matemtica (foco em
resoluo de problemas); v) participao das 27
unidades federais; vi) adoo de questionrios
para os alunos sobre caractersticas socioculturais e hbitos de estudo. A partir da introduo
dessas inovaes, o Saeb tornou comparveis
os desempenhos dos alunos entre anos e sries.
Os testes cognitivos do Saeb so elaborados com base em matrizes de referncia,
desenhadas a partir de uma sntese do que
comum a diferentes propostas curriculares estaduais, municipais e nacionais, alm da consulta a professores e especialistas nas reas de
lngua portuguesa e matemtica e do exame
dos livros didticos mais utilizados nas redes e
sries avaliadas.
Ainda que a elaborao dos testes leve
definio do que deve ser considerado fundamental em termos de aprendizagem escolar e,
portanto, do que todos os alunos deveriam saber
e ser capazes de fazer ao final de determinados
ciclos de escolarizao, por ser de base amostral,
o Saeb apresenta baixo nvel de interferncia na
vida das escolas e no currculo escolar.
Seu desenho mostra-se adequado para
diagnosticar e monitorar a evoluo da qualidade da educao bsica, mas no permite
medir a evoluo do desempenho individual de
alunos ou escolas. Seus resultados so divulgados de forma bastante agregada e, portanto,
no permitem apoiar a introduo de polticas
de responsabilizao de professores, diretores e
gestores por melhorias de qualidade nas unidades escolares.
Paralelamente, enquanto o MEC desenvolvia uma avaliao da educao bsica de
distintos nveis de escolaridade: no caso do Brasil, 4 e 8 sries do ensino
fundamental e 3 do ensino mdio. Isso permite comparar as mdias
de proficincia em cada disciplina entre os diversos nveis do sistema
educativo, entre as regies do pas e entre os vrios anos, situando todos
os nveis em uma mesma escala.
377
378
Alicia BONAMINO; Sandra Zkia SOUSA. Trs geraes de avaliao da educao bsica no Brasil: interfaces...
379
380
Alicia BONAMINO; Sandra Zkia SOUSA. Trs geraes de avaliao da educao bsica no Brasil: interfaces...
Essas metas ilustram a importncia atribuda aos resultados das avaliaes em larga
escala nas gestes da Secretria Maria Helena
Guimares Castro (2007 a 2009) do Secretrio
Paulo Renato de Souza (abril de 2009 a 2010). As
metas 8 e 9 permitem concluir que os objetivos
indicados para o SARESP em 1996 permanecem
at os dias atuais, evidenciando que a avaliao
deve servir tanto para uso dos gestores dos sistemas, quanto na orientao do planejamento e
do trabalho pedaggico nas escolas.
A poltica iniciada na gesto da
Secretria Maria Helena e que vem tendo
continuidade revela preocupao com a apropriao dos resultados pelos rgos gestores
do sistema e pelas escolas. Dentre as medidas
tomadas em tal gesto, est a implantao de
um currculo unificado que se apresenta como
8- Disponvel em: <www.educacao.sp.gov.br>. Acesso em: 15 jan. 2010.
381
Um aspecto central da poltica educacional no Estado de Pernambuco foi a introduo, pelo Governador Eduardo Campos e
pelo Secretrio de Educao Danilo Cabral,
de um sistema de responsabilizao educacional. Esse sistema inclui a conduo anual do Sistema de Avaliao Educacional de
Pernambuco (Saepe), a ampla divulgao de
seus resultados, avaliaes bimestrais de estudantes por notas e o monitoramento bimestral de indicadores educacionais de cada escola da rede estadual por meio de um sistema
informatizado.
O Saepe foi realizado pela primeira vez
em 2000. Em 2005, ele foi novamente aplicado, mas seus resultados somente foram consolidados e divulgados em 2007. A partir de
2008, comeou a ser realizado anualmente, e
seus resultados passaram a compor o ndice
de Desenvolvimento da Educao Bsica de
Pernambuco (Idepe).
O Sistema tambm coleta informaes
sobre as condies socioeconmicas e culturais
dos estudantes, dos professores e da equipe gestora. Seus principais objetivos so:
produzir informaes sobre o grau de
domnio dos estudantes nas habilidades e
competncias consideradas essenciais, em
382
Alicia BONAMINO; Sandra Zkia SOUSA. Trs geraes de avaliao da educao bsica no Brasil: interfaces...
e a mdia dos resultados efetivamente alcanados demonstra o percentual obtido pela escola
em relao s suas metas.
As metas de 2008 foram definidas de
forma que as escolas alcanassem o ponto mdio entre o Idepe inicial, em 2005, e a meta de
2009. Essas metas variaram entre os grupos de
baixo desempenho, desempenho intermedirio e
alto desempenho. No entanto, a partir de 2009,
as metas so nicas para todas as escolas dentro de um mesmo grupo.
O Saepe constitui uma avaliao de terceira gerao em apoio a mecanismos de responsabilizao forte cuja expresso mais consistente o referido BDE. A bonificao varia
de 50% a 100%: as escolas estaduais que obtiverem um ndice global abaixo de 50% no
recebem o bnus; a escola que alcanar 50%
da meta estipulada recebe a metade do bnus; a
partir da, o valor proporcional ao percentual
da meta atingido.
A Secretaria de Educao tambm incentiva o reconhecimento dos professores que
permanecem numa mesma escola. Para tanto, o
clculo do bnus considera a proporcionalidade
no cumprimento da meta a partir de 50% e a
lotao do professor na escola por, no mnimo,
seis meses do ano letivo de referncia para a
concesso da remunerao. O BDE coletivo,
uma vez que todos os funcionrios lotados e em
exerccio na escola tm direito ao bnus. Ele
tambm proporcional ao salrio e ao percentual
de cumprimento da meta.
Em Pernambuco, o valor mximo a ser
recebido por cada servidor no est definido a
priori. Enquanto em So Paulo esse valor chega, no mximo, a 2,4 salrios, em Pernambuco,
apenas o valor total alocado pelo governo
para pagamento do bnus fixo. Alm disso, a condio para que os servidores de uma
escola tenham acesso ao bnus a existncia
de uma das sries testadas pelo Saepe (4 e 8
srie do ensino fundamental e 3 ano do ensino
mdio). Desse modo, uma escola que atenda exclusivamente a modalidades de ensino no testadas no tem acesso ao bnus. Porm, profes-
383
colas se propem como objetivos para a formao de seus estudantes. Tambm complexo o
uso de testes padronizados para aferir objetivos
escolares relacionados a aspectos no cognitivos.
O problema decorre do fato de os currculos escolares possurem mltiplos objetivos,
ao passo que as medidas de resultados utilizadas pelas avaliaes em larga escala tipicamente visam a objetivos cognitivos relacionados
leitura e matemtica. Essa no exatamente
uma limitao das avaliaes, mas demanda
ateno para riscos relativos ao estreitamento
do currculo, os quais podem acontecer quando
h uma interpretao distorcida do significado
pedaggico dos resultados da avaliao.
Os estudos sobre o tema no Brasil so ainda limitados e bastante recentes. Mesmo assim,
eles colaboram para o entendimento sobre como
escolas e secretarias de educao interpretam e
articulam as relaes entre as trs geraes da
avaliao em larga escala e o currculo escolar.
Os resultados da pesquisa realizada por
Joo Luiz Horta Neto (2006) sobre o uso dos dados do Saeb 2003 pela Secretaria de Educao
do Distrito Federal para orientar o planejamento da rede de ensino, por exemplo, ajudam a
ilustrar a escassa interferncia de avaliaes de
primeira gerao no contexto da gesto educacional. A pesquisa indicou que, apesar de
os gestores da Secretaria de Educao defenderem a importncia do Saeb, eles tm pouco
conhecimento e praticamente no utilizam os
dados gerados pela avaliao nos processos
de gesto, principalmente devido a limitaes para compreender os resultados produzidos. Essa pesquisa, ao mesmo tempo em que
demonstra a baixa capacidade do Saeb para
impactar a gesto educacional e as atividades
escolares, contribui para a compreenso da
emergncia de uma segunda gerao de avaliao educacional que, como a Prova Brasil,
permite que as escolas enxerguem-se nos resultados produzidos.
Ana Paula Oliveira (2011) pesquisou em
que medida os resultados da Prova Brasil 2007
tm servido de subsdio para a gesto da rede de
384
Alicia BONAMINO; Sandra Zkia SOUSA. Trs geraes de avaliao da educao bsica no Brasil: interfaces...
Pesquisas que analisaram a implementao da avaliao no Estado de So Paulo destacam elementos que ilustram as transformaes
que vm ocorrendo no currculo9. Os estudos
feitos h mais tempo tendem a indicar poucos
efeitos do SARESP no cotidiano escolar, embora
destaquem reaes de desconfiana e de resistncia ao Sistema por parte dos profissionais
da educao (OLIVEIRA, 1998; ESTEVES, 1998;
FELIPE, 1999; KAWAUCHI, 2001). Esses estudos, que tiveram como foco eventuais reflexos
do SARESP na escola, considerando, em especial, opinies e reaes de professores, tendem
a no identificar influncias de seus resultados
no currculo escolar.
a partir dos estudos realizados na segunda metade da dcada de 2000 que so identificadas evidncias de efeitos do SARESP no
contexto escolar. Lilian Rose Freire (2008) reala, nas concluses de sua pesquisa, realizada
em uma escola da rede estadual, alguns usos dos
resultados do SARESP, tais como: i) utilizao
na composio das notas bimestrais dos alunos;
ii) reproduo de questes na prova unificada
criada pela escola, com a inteno de treinar
os alunos para a avaliao; iii) utilizao, pelos professores de portugus, das orientaes do
SARESP relativas correo de redaes, para
orientar os alunos nas redaes escolares, o que
pode representar aprimoramento de prticas vigentes; iv) incentivo participao dos alunos
no dia da aplicao das provas do SARESP, por
meio de atribuio de nota a ser considerada na
mdia bimestral.
As informaes apresentadas por essa pesquisa indicam que o significado assumido pelo
SARESP e por seus resultados no contexto da
escola pesquisada no se associa ideia de uma
avaliao que traga subsdios para a orientao e
o replanejamento do trabalho escolar. Com exceo da iniciativa no uso de critrios para correo
de redaes, a interao com o SARESP, ao que
parece, mais instrumental, no sentido de implantar iniciativas que possam ajudar os alunos a
9- As consideraes relativas ao SARESP foram extradas de SOUSA;
ARCAS, 2010.
obterem melhores resultados, como ensinar a preencher gabaritos e aplicar provas com questes
semelhantes s provas do Sistema.
Uma pesquisa realizada por Paulo
Henrique Arcas (2009) focalizou eventuais repercusses do SARESP na avaliao escolar,
procurando apreender caractersticas e tendncias da avaliao aps sua implantao. Para
tanto, realizou-se um estudo em uma diretoria
regional de ensino na regio metropolitana de
So Paulo, buscando-se a opinio de professores-coordenadores. Por meio de questionrio e
entrevista, o objetivo foi analisar como viam o
SARESP e como foram construindo suas opinies acerca dele no perodo de sua vigncia no
caso da referida pesquisa, at 2007. Essas opinies possibilitaram identificar como a avaliao
em larga escala vem incidindo na avaliao e
no currculo escolar.
Ficou evidente, na fala dos professores-coordenadores entrevistados, que h uma
tendncia de aceitao do SARESP, embora,
inicialmente, o Sistema tenha sido visto por
eles com desconfiana. H evidncias de que
os dados obtidos na avaliao so analisados e
discutidos no planejamento escolar, no incio
do ano, e tambm no replanejamento, no incio
do segundo semestre letivo. Os resultados da
escola e das turmas so analisados e orientam o
trabalho escolar, definindo habilidades, competncias e contedos a serem ensinados.
Assim, pode-se afirmar que o SARESP
vem-se fazendo presente gradualmente, influenciado prticas, definindo metas, estabelecendo rumos, orientando o trabalho pedaggico.
Outra revelao importante sobre as implicaes de tal avaliao no contexto escolar que
ela tem incidido sobre as prticas avaliativas
desenvolvidas na escola. As evidncias da referida pesquisa demonstraram que a avaliao da
aprendizagem realizada na escola toma a avaliao em larga escala como referncia.
Entretanto, o que pde ser constatado
que o SARESP, ao servir como referncia
para as prticas avaliativas empreendidas
385
A centralidade que o SARESP est adquirindo na organizao do trabalho escolar,
ao nortear prticas avaliativas, permite afirmar que a avaliao em larga escala vem sendo
crescentemente apropriada pelas escolas. Nesse
sentido, ao orientar os procedimentos avaliativos, o SARESP vem induzindo a uma nfase na
aplicao de provas e exames simulados como
meios de preparar os alunos para se sarem bem
na avaliao estadual.
Concluses
386
Alicia BONAMINO; Sandra Zkia SOUSA. Trs geraes de avaliao da educao bsica no Brasil: interfaces...
Referncias
ARCAS, Paulo Henrique. Implicaes da progresso continuada e do SARESP na avaliao escolar: tenses, dilemas e
tendncias. Tese (Doutorado) Faculdade de Educao, Universidade de So Paulo, So Paulo, 2009.
BONAMINO, Alicia. Tempos de avaliao educacional: o SAEB, seus agentes, referncias e tendncias. Rio de Janeiro: Quartet,
2002.
BROOKE, Nigel. O futuro das polticas de responsabilizao no Brasil. Cadernos de Pesquisa, So Paulo, v. 36, n. 128, p. 377401, 2006.
CARNOY, Martin; LOEB, Susanna. Does external accountability affect student outcomes? A cross-state analysis. Educational
Evaluation and Policy Analysis, v. 24, n. 4, p. 305-331, 2002.
CENEVIVA, Ricardo. Democracia, accountability e avaliao: a avaliao de polticas pblicas como mecanismo de controle
democrtico. Dissertao (Mestrado) Fundao Getlio Vargas, So Paulo, 2005.
ESTEVES, Maria Eunice de P. Sistema de Avaliao de Rendimento Escolar do Estado de So Paulo - SARESP: uma ao
planejada. Dissertao (Mestrado) Pontifcia Universidade Catlica de So Paulo, So Paulo, 1998.
FELIPE, Jesse Pereira. Uma anlise crtica do Sistema de Avaliao de Rendimento Escolar do Estado de So Paulo:
SARESP. Dissertao (Mestrado) Pontifcia Universidade Catlica de So Paulo, So Paulo, 1999.
FERNANDES, Reynaldo. ndice de Desenvolvimento da Educao Bsica (Ideb). Braslia: Instituto Nacional de Estudos e
Pesquisas Educacionais Ansio Teixeira, 2007.
FERNANDES, Reynaldo; GREMAUD, Amaury. Qualidade da educao bsica: avaliao, indicadores e metas. In: VELOSO, Fernando
et al. (Orgs.). Educao bsica no Brasil: construindo o pas do futuro. Rio de Janeiro: Elseiver, 2009.
FREIRE, Lilian Rose S. Carvalho. SARESP 2005: as vicissitudes da avaliao em uma escola da rede estadual. Dissertao
(Mestrado) Faculdade de Educao, Universidade de So Paulo, So Paulo, 2008.
FREITAS, Dirce Nei Teixeira de. A avaliao da educao bsica no Brasil: dimenso normativa, pedaggica e educativa.
Campinas: Autores Associados, 2007.
GATTI, Bernadete A. Testes e avaliaes do ensino no Brasil. Educao e Seleo, So Paulo, n. 16, p. 12-21, 1987.
HANUSHEK, Eric A. United States lessons about school accountability. CESifo DICE Report 4, 2004.
387
HANUSHEK, Eric A.; RAYMOND, Margaret E. Does school accountability lead to improved student performance? Journal of Policy
Analysis and Management, v. 24, n. 2, p. 297-327, 2005.
HORTA NETO, Joo Luiz. Avaliao externa: a utilizao dos resultados do SAEB 2003 na gesto do sistema pblico de Ensino
Fundamental no Distrito Federal. Dissertao (Mestrado) Faculdade de Educao, Universidade de Braslia, Braslia, DF, 2006.
KAWAUCHI, Mary. SARESP e ensino de histria: algumas questes. Dissertao (Mestrado) Faculdade de Educao,
Universidade de So Paulo, So Paulo. 2001.
LOPES, Valria Virgnia. Cartografia da avaliao educacional no Brasil. Tese (Doutorado) Faculdade de Educao, Universidade
de So Paulo, So Paulo, 2007.
OLIVEIRA, Ana Paula M. A Prova Brasil como poltica de regulao da rede pblica do Distrito Federal. Dissertao (Mestrado)
Faculdade de Educao, Universidade de Braslia, Braslia, DF, 2011.
OLIVEIRA, Duzolina Alfredo F. de. Uma avaliao poltica do SARESP. Dissertao (Mestrado) Universidade Estadual de
Campinas, Campinas, 1998.
SO PAULO. Secretaria de Estado de Educao. SARESP: documento de implantao. So Paulo: FDE, 1996.
SOUSA, Sandra Zkia; ARCAS, Paulo Henrique. Implicaes da avaliao em larga escala no currculo: revelaes de escolas
estaduais de So Paulo. Educao: Teoria e Prtica, Rio Claro, v. 20, n. 35, p. 181-199, jul./dez. 2010.
SOUSA, Sandra Zkia; OLIVEIRA, Romualdo Portela de. Sistemas de avaliao educacional no Brasil: caractersticas, tendncias
e uso dos resultados. Relatrio de pesquisa apresentado FAPESP, So Paulo, jul. 2007.
ZAPONI, Margareth; VALENA, Epifnia. Poltica de responsabilizao educacional: a experincia de Pernambuco. Abr. 2009.
Disponvel em: <www.abave.org.br>.
Recebido em: 08.08.2011
Aprovado em: 20.09.2011
Alicia Bonamino professora associada da Pontifcia Universidade Catlica do Rio de Janeiro e coordenadora do Laboratrio
de Avaliao em Educao (LAEd).
Sandra Zkia Sousa doutora em Educao, professora da Faculdade de Educao da Universidade de So Paulo, atuando
na ps-graduao em Estado, Sociedade e Educao, e do mestrado em Educao da Universidade Cidade de So Paulo.
Possui publicaes predominantemente no campo da avaliao educacional. Email: sanzakia@usp.br
388
Alicia BONAMINO; Sandra Zkia SOUSA. Trs geraes de avaliao da educao bsica no Brasil: interfaces...