em ao

PUBLICAO SEMESTRAL DA AVALIA ASSESSORIA EDUCACIONAL | N 4 2010

Prova
Brasil
Mais do que apresentar resultados,
essa avaliao contribui para a
melhoria no ensino do pas.

TEMPO DE FLORECER
Parceria entre Fundao Roberto
Marinho e AVALIA d frutos em BH

PALAVRA DE ESPECIALISTA
Seis artigos de educadores
discutem a qualidade do ensino

capa8.indd 1 11/8/10 3:22 PM

 Assessoria Educacional
Avaliar, Analisar e Refletir
Aes fundamentais para escolas e sistemas de ensino
pblicos e privados, tornarem-se referncia.
A Avaliao Educacional abrange,
alm do desempenho acadmico
dos alunos, questes relacionadas
a gesto, processos e recursos educacionais,
oferecendo informaes objetivas para
formulao de planos de excelncia.
Testes matrizes de competncias
comparveis com as do Saeb, Enem e Pisa.
Relatrio final com resultados
em Lngua Portuguesa e Matemtica,
na mesma mtrica do Saeb.
www.avaliaeducacional.com.br
Assessoria Educacional
anuncio_avalia.indd 2
FERRAMENTAS DE COLETA DE INFORMAES
Testes de Lngua Portuguesa com
Produo de Texto, Matemtica, Cincias
da Natureza e Cincias Humanas para
os alunos de 5 e 9 ano do Ensino
Fundamental e 3 ano do Ensino Mdio.
Questionrios aos diversos pblicos
da Escola ou Sistema de Ensino, alunos,
pais, professores e gestores.
RELATRIOS
Relatrio da Escola.
Relatrio de Percepo da Escola pela Comunidade.
Sumrio Executivo.
Relatrio de Frequncia (verso digital)
CD-ROM, com a verso digital de todos
os relatrios relacionados avaliao.
11/8/10 3:23 PM
 AVALIAO
EDUCACIONAL / INSTITUCIONAL

Aprendizado Contexto e Opinio

dos alunos dos alunos e da
comunidade

Testes Questionrios

Lngua Portuguesa
com Produo Matemtica
de Texto Perfil sociocultural
Viso da escola
do aluno e
ou rede
da famlia
Cincias Cincias Humanas
da Natureza

Relatrio da Relatrio de
Escola Pedaggico Percepo da Escola
pela Comunidade

.
Devolutiva

www.avaliaeducacional.com.br
atendimento@avaliaeducacional.com.br DDG: 0800 77 33990

anuncio_avalia.indd 3 11/8/10 3:23 PM

 4

Com as eleies deste ano, o Brasil vive um momento de escolhas

importantes em relao ao seu futuro prximo, que tero impacto
direto sobre os quatro anos que vm pela frente. Nada mais oportuno,
portanto, do que tratar do papel desempenhado pelas avaliaes
educacionais na evoluo do panorama no ensino no pas, seja
ele pblico ou privado.
EDITORIAL

A partir de meados da dcada de 1990, com a reformulao do

Sistema de Avaliao da Educao Bsica (Saeb), os brasileiros
passaram a ter uma noo mais clara do desempenho de seus
estudantes e, consequentemente, da qualidade da educao oferecida
a eles. Em 2005, mais um passo significativo foi dado nessa direo,
com a criao da Prova Brasil, dessa vez no mais de forma amostral,
Em 2009, mas incluindo todo o universo preestabelecido (escolas das redes
a AVALIA pblicas, em rea urbana com mais de 20 alunos em cada srie).
participou
Superadas as resistncias at naturais a uma mudana to significativa
do consrcio na forma de mensurar a qualidade do ensino, hoje a Prova Brasil
responsvel pela um instrumento consolidado de avaliao educacional. Como bem
Prova Brasil, sintetizou o professor Francisco Soares presidente do Conselho
Tcnico da AVALIA e coordenador do Grupo de Avaliao e Medidas
cuidando da
Educacionais da Universidade Federal de Minas Gerais no h mais
produo e anlise o medo da avaliao e de usar os resultados dessa avaliao, desde que
dos resultados isso signifique aprendizado. Essa foi uma das concluses do Seminrio
do exame Aprova Brasil, iniciativa da Fundao Santillana, com o apoio da
AVALIA, realizado em 11 capitais, que teve a oportunidade de ouvir
que envolveu experincias animadoras de gestores de todo o pas, como mostra
6,2 milhes de a matria de capa desta edio da revista AVALIA em ao.
estudantes
Em 2009, a AVALIA participou do consrcio responsvel pela
Prova Brasil, cuidando da produo e anlise dos resultados do
exame que envolveu 6,2 milhes de estudantes. Aplicadas as provas,
a AVALIA fez o processamento dos resultados, a anlise das bases
de dados e a gerao dos nveis de proficincia em que os estudantes
seriam classificados. Para isso, valeu-se da experincia acumulada
em cinco anos de atividades, buscando atender com a mesma
eficincia escolas das redes pblica e privada, alm de fundaes,
como a Fundao Roberto Marinho, tambm detalhada nas prximas
pginas. Sempre com a misso de contribuir para disseminar no pas
a cultura da avaliao educacional no pas.

Flvio Jos Chermont Vieira

Diretor-geral da AVALIA

sumario4rev.indd 4 11/8/10 3:23 PM

 5

Carlos Dez Polanco

em ao
Expediente
Conselho Editorial: Maria Zlia Dias Miceli
e Renato Jdice de Andrade
Coordenao editorial: Prata Design
Editoras executivas: Anna Costa, Dbora
Baptista, Letcia Tavares Quintal 22
10 CAPA
Prova Brasil
A importncia dessa
Projeto grfico e direo de arte: avaliao nacional
Didiana Prata Prata Design

SUMRIO
para a melhoria do
Redator-chefe: Fernando Leal ensino no Brasil
Editora-assistente: Renata Rossi
Arte: Gabriela Wu Prata Design
Reviso: Ana Lcia Neiva
Reprter: Denise Bobadilha
Articulistas: Francisco Soares, Philip R. Fletcher,
Luiz Carlos de Menezes, Moacir Gadotti,
Magda Soares, Rosana Aparecida Argento

Rogrio Assis
Jornalista responsvel: Anna Costa
(MTB 22255)

A revista AVALIA em Ao uma

publicao semestral da AVALIA Assessoria
Educacional, com tiragem de 20 mil
exemplares e distribuda gratuitamente
para as instituies educacionais, fontes
de informao, governos e ONGs.
32 ARTIGO
Philip R. Fletcher
Direitos reservados - proibida
a reproduo total ou parcial.
Estdio Saci

Correspondncias para a revista:

atendimento@avaliaeducacional.com.br

Quem somos
A AVALIA Assessoria Educacional uma
ENTREVISTA
Instituio especializada na avaliao de
escolas e sistemas educacionais das redes 6 Srgio Quadros
particular e pblica. Desenvolvida com foco
nas necessidades da escola, a avaliao
educacional/institucional da AVALIA se
constitui numa poderosa ferramenta de
gesto cuja finalidade orientar aes
de melhoria da qualidade do ensino. 9 ARTIGO
Moacir Gadotti 23 ARTIGO
Rosana Argento
Saiba mais: www.avaliaeducacional.com.br

15 ARTIGO 24 PERFIL
Endereo: Rua Padre Adelino, 758
Belenzinho, So Paulo - SP CEP 03303-904
Telefone: 0800 77 33 990
Magda Soares Avalia

Prata Design: 11. 3023 1569 www.pratadesign.com.br

Quintal 22: 11. 3819 7808 www.quintal22.com.br
16 DEPOIMENTO
Vilma Wille 27 ARTIGO
Luiz Carlos de Menezes

18 ARTIGO
Francisco Soares 28 MITOS E VERDADES
Margareth Zaponi

20 REPORTAGEM
Fundao Roberto Marinho 30 REPORTAGEM
Sistema UNO

sumario4rev.indd 5 11/8/10 3:24 PM

 Diretor-geral da Santillana no Brasil
Srgio Quadros

Avaliar preciso
O modelo de por Denise Bobadilha

Nos prximos anos, todos os grandes grupos de edu-

avaliao educacional/
cao tero de produzir pesquisas capazes de testar
institucional realizado milhares de estudantes em diferentes capacidades. O
Grupo Santillana j est fazendo sua parte, ao inves-
por ns no Brasil tir na AVALIA Assessoria Educacional, um sistema
ser aplicado pelas de avaliao desenvolvido no Brasil que dever ser
exportado para outros pases onde o Grupo atua. Em
outras unidades do entrevista, Srgio Quadros, diretor-geral da Santillana
Grupo Santillana, que no Brasil desde o ltimo ms de fevereiro, fala com
entusiasmo sobre os sistemas de avaliao educacio-
no desenvolveram nal/institucional e a importncia da AVALIA para o
ferramenta do gnero Grupo e para a melhoria da educao no pas.

entrevista_sergio5rev.indd 6 11/8/10 3:24 PM


Rogrio Assis
reas de negcios no Brasil
didticoS
moderna: edita, publica e
distribui livros didticos e
material de apoio para alunos e
para a formao de professores
enSino de idiomaS
Richmond: para lngua inglesa
Santillana espaol: para
lngua espanhola
entrevista_sergio5rev.indd 7
7
Qual a importncia da avalia para o Grupo
Santillana no Brasil?
A AVALIA comeou com total independncia.
Com a recente volta da equipe para a nossa prin-
cipal sede, em So Paulo, houve uma maior apro-
ximao da empresa com as demais reas do Gru-
po e isso estratgico para ns. Afinal, somos um
grupo editorial com forte foco em educao, e o
ENTREVISTA
momento de expanso.
H alguma razo especial para o
investimento em sistemas de avaliao?
Os sistemas de avaliao iro protagonizar uma
parcela importante do ensino. O nmero de alunos
avaliados tem crescido de forma exponencial, e em
breve essa ferramenta tambm ser usada pelos siste-
mas particulares e pelas universidades. A qualidade
do ensino que se mensura e que aprimorada atravs
dos resultados dessa avaliao uma tendncia que
veio para ficar. Ns temos de estar prontos, desenvol-
vendo ainda mais as nossas competncias tcnicas.
a avalia representa tambm uma posio
estratgica para as empresas do prprio
Grupo Santillana no Brasil?
Sim, porque ao trabalharmos com sistemas de ava-
liao eficazes conseguimos entender melhor o
mundo da educao no qual nossos negcios as
outras empresas do Grupo esto inseridos. Com
esses resultados podemos compreender o que fun-
ciona e o que no est adequado dentro da nossa li-
nha de negcio. A Editora Moderna, por exemplo,
desenvolveu um material focado apenas na Prova
Brasil e posso dizer que foi o primeiro produto
para avaliao de muitos que viro.
SiStema de enSino liteRatURa adUlta
Uno: utilizado tanto em escolas objetiva: publica obras de fico
pblicas quanto particulares, e no fico. Os outros selos do
oferece solues integradas e segmento so Alfaguara, Suma de
sob medida para cada cliente Letras, Fontanar e Ponto de Leitura
avaliao edUcacional/ liteRatURa infantojUvenil
inStitUcional Salamandra: traz publicaes para
avalia: faz avaliao de amplo pblico, de bebs a jovens
desempenho, de projetos e leitores. Tem a exclusividade de
anlises tcnicas e pedaggicas publicao das obras de Ruth Rocha
11/8/10 3:24 PM
 8
ENTREVISTA

possvel que os resultados das avaliaes
possam incrementar o desenvolvimento de
polticas pblicas atreladas ao ensino?
Hoje, impossvel pensar em polticas pblicas
de educao sem sistemas de avaliao eficientes.
Mas no h uma ao concreta que possa servir
como exemplo. Essa influncia acontece de forma
indireta, j que a empresa desenvolveu know-how
suficiente para fazer projetos como a Prova Brasil*.
A AVALIA j demonstrou ter tecnologia para fazer
o mesmo com o Enem. Esse conhecimento extra-
ordinrio foi comprovado pelo Fundo Nacional de
Desenvolvimento da Educao (FNDE), que nos
visitou. O nosso grande diferencial que somos re-
conhecidos como empresa de educao, no como
editora ou como fornecedora de material didtico.
Rogrio Assis
tm, um sistema de avaliao, e o nosso j est con-
solidado. A AVALIA tem uma mtrica prpria que
faz correspondncia com os sistemas de educao de
cada local. E isso um grande diferencial.
Atualmente, a AVALIA dedica-se avaliao
do desempenho de alunos do ensino
fundamental e mdio. H interesse em
desenvolver sistemas que tenham como foco
as instituies de ensino superior?
Por enquanto, o ensino superior no o nosso fo-
co, porque envolve uma complexidade diferente.
Mas, ao mesmo tempo, os sistemas de avaliao,
depois de desenvolvidos, possuem modelos se-
melhantes, o que amplia a possibilidade de futu-
ramente trabalharmos tambm com esse pblico.

* A AVALIA foi responsvel pela produo e anlise de
resultados (proficincia dos alunos) da ltima Prova Bra-
sil, feita em parceria com a Consulplan, que cuidou da
parte operacional, da reproduo e aplicao do teste. Fez
o mesmo com o Saeb, a avaliao amostral aplicada para-
lelamente Prova Brasil.
H inteno de o Grupo Santillana exportar
esse modelo de avaliao para outros pases
onde atua?
A AVALIA j est comeando a exportar seu trabalho
para outros pases do Grupo, por meio do Sistema
UNO Internacional. O modelo desenvolvido por ns
no Brasil ser aquele aplicado pelas outras unidades
do Grupo Santillana, que no tinham desenvolvido
Qual a sua opinio sobre a avaliao on-line?
O Grupo tem planos de curto prazo para
desenvolver essa ferramenta?
Criar sistemas de avaliao on-line uma tarefa
obrigatria nos dias de hoje. Do ponto de vista da
logstica, a avaliao atual uma tarefa cara, que
envolve sigilo e estudos para aplicao caso a caso.
A avaliao on-line diminui vrios desses proble-
mas. Temos, sim, planos de curto prazo para criar
uma avaliao on-line vivel.
Perfil do Grupo Santillana

Criar sistemas de avaliao

ferramentas do gnero. Nos-
so especialista em avaliao,
Renato Jdice de Andrade, ,
No mundo: presente em 22 pases
on-line uma tarefa
obrigatria. O Grupo
inclusive, o especialista em
avaliao do Grupo Santilla-
na. Essa abordagem atual
com 4.323 funcionrios

Santillana tem planos de

curto prazo para desenvolver
particularmente estratgica
porque todos os grandes gru-
pos de educao do mundo
578
No Brasil: funcionrios
essa ferramenta tero em breve, quando j no

entrevista_sergio5rev.indd 8 11/8/10 3:24 PM


Qualidade na educao,
uma nova abordagem
A Unio Nacional dos Dirigentes Muni-
cipais de Educao (Undime) ao assumir
o lema Em defesa da educao pblica
com qualidade social indica uma nova
abordagem do tema da qualidade na edu-
cao. Falar em qualidade social da edu-
cao falar de uma nova qualidade, em
que se acentua o aspecto social, cultural e
ambiental da educao.
Qualidade significa melhorar a
vida de todas as pessoas; qualidade pa-
ra poucos privilgio, no qualidade.
Quando a escola era para poucos, era
boa s para esses poucos. Agora que de
todos, principalmente os mais pobres, precisa ser apro-
priada para esse novo pblico. Isso significa investir nas
condies que possibilitam essa nova qualidade que in-
clui transporte, sade, alimentao, vesturio, cultura,
esporte e lazer. No basta matricular os pobres na escola.
preciso matricular com eles, tambm, sua cultura, seus
desejos, sonhos, a vontade de ser mais.
Vivemos hoje numa sociedade de redes e de movi-
mentos, uma sociedade de mltiplas oportunidades de
aprendizagem, chamada de sociedade aprendente, com
enormes consequncias para escola, professor e educao
em geral. Torna-se fundamental aprender a pensar auto-
nomamente, saber comunicar-se, saber pesquisar, saber
fazer, ter raciocnio lgico, aprender a trabalhar colabo-
rativamente, fazer snteses e elaboraes tericas, saber
organizar o prprio trabalho, ter disciplina, ser sujeito da
construo do conhecimento, estar aberto a novas apren-
dizagens, conhecer as fontes de informao, saber articu-
lar o conhecimento com a prtica e com outros saberes.
Qualidade no se mede s pela reproduo de conte-
dos, mas pela criao de conhecimentos e esta se conquis-
ta pela pesquisa, pela leitura, pela reflexo. Nesse contexto
de impregnao da informao, o professor muito mais
um mediador do conhecimento, um problematizador.
A educao de boa qualidade quando forma
pessoas para pensar e agir com autonomia. E isso deve
comear na creche e na pr-escola. Uma escola precisa
pouco para ser de qualidade, mas nela no podem faltar
ideias. Precisa basicamente de trs condies: professo-
artigo_moacir2.indd 9
9
Estdio Saci
Moacir Gadotti
ARTIGO |
res bem formados, condies de trabalho e um projeto
poltico-pedaggico.
Para se formar bem, o professor precisa ter paixo
de ensinar, ter compromisso, sentir-se feliz aprendendo
sempre; precisa ter domnio tcnico-pedaggico, isto ,
saber contar histrias, construir narrativas sedutoras,
gerenciar a sala de aula, significar a aprendizagem, me-
diar conflitos, saber pesquisar. Precisa ainda ser tico,
dar exemplo. Ser humilde, ouvir os alunos, trabalhar
em equipe, ser solidrio. A qualidade do ensino depen-
de muito da qualidade do professor.
Quanto escola: ela deve oferecer as condies mate-
riais, fsicas, pedaggicas e humanas para criar um ambiente
propcio aprendizagem. No ambiente oferecido a alunos e
professores em muitas escolas, eu me pergunto como eles
podem ainda aprender alguma coisa. Em geral, os professo-
res so competentes; faltam-lhes as condies para ensinar.
A escola deve tambm oferecer ao professor formao con-
tinuada. E precisa ter um projeto eco-poltico-pedaggico.
Esse um pas estranho: quer alcanar a qualidade
da educao da Finlndia sem ter as condies sociais da
Finlndia. No h como atingir a qualidade da educao
da Finlndia enquanto nossas crianas no tiveram as
condies socioeconmicas e nutricionais das crianas
daquele pas, sem a mesma relao professor-aluno, sem
o mesmo tempo de permanncia dos alunos na escola.
Moacir Gadotti doutor em Educao, professor titular da USP e
diretor-geral do Instituto Paulo Freire
11/8/10 3:27 PM
 Prova Brasil: mais que
medir competncias

materia_capa7rev.indd 10 11/8/10 3:29 PM

 11

REPORTAGEM DE CAPA
Nas duas ltimas dcadas, as avaliaes educacionais
ganharam terreno e se consolidaram como referncia
para que a sociedade conhea o nvel de qualidade do
ensino brasileiro. A Prova Brasil, criada em 2005, foi um
passo fundamental nesse sentido. Um desafio, porm,
ainda se impe diante dos gestores e dos educadores:
traduzir os resultados em aes pedaggicas com
impacto direto em sala de aula. Caso contrrio,
corre-se o risco de confundir o meio com o fim. Objetivo
o aprendizado, no a medida, afinal, acima de tudo,
est o direito de aprender de crianas e adolescentes.

por Fernando Leal com o aprendizado, com a sala de aula, promoveu o dilogo entre avaliao e es-
No h mais o medo da avaliao e de usar afirmou Soares em So Paulo, para uma cola, explorando caminhos por meio dos
os resultados dessa avaliao, desde que is- plateia composta majoritariamente por quais os resultados da Prova Brasil podem
so signifique aprendizado. A concluso professores e gestores de ensino. ser utilizados por professores, educadores e
do professor Francisco Soares presidente Iniciativa da Fundao Santillana, gestores escolares para criar oportunidades
do Conselho Tcnico da AVALIA e coorde- com o apoio da AVALIA, o Seminrio Apro- de aperfeioamento da prtica escolar.
nador do Grupo de Avaliao e Medidas va Brasil teve como objetivo discutir os sis- Entre 20 de abril e 31 de maio deste
Educacionais da Universidade Federal de temas de avaliao da educao brasileira, ano, o seminrio percorreu 11 capitais
Minas Gerais , apresentada na ltima de com especial ateno anlise e reflexo so- Recife, Salvador, Goinia, Curitiba, Porto
11 etapas do Seminrio Aprova Brasil, rea- bre os resultados da Prova Brasil, principal Alegre, Belm, So Lus, Belo Horizonte, Rio
lizado em diferentes capitais brasileiras. O instrumento de medio do rendimento de Janeiro, Fortaleza e So Paulo sempre
que ainda se rejeita a anlise rasa e limi- escolar no pas atualmente. Em outras pala- contando com a parceria das secretarias de
tada dos nmeros, sem a ponte necessria vras, como bem definiu Soares, a iniciativa educao dos Estados.
As imagens das crianas usadas nesta reportagem foram clicadas pelo fotgrafo Carlos Dez Polanco, em escolas pblicas
brasileiras, e fazem parte do livro Escolas de Valor, publicado em 2007 pela Fundao Santillana e Editora Moderna

materia_capa7rev.indd 11 11/8/10 3:29 PM

 12

Futuro promissor
CAPA

A Prova Brasil j mostrou sua importncia, mesmo

com pouco tempo de existncia. Permitiu, por exem-
plo, o surgimento do ndice de Desenvolvimento da
Educao Bsica (Ideb), indicador que vai se firmando
como referncia de qualidade de educao no pas. E
aproximou um pouco mais a escola dos processos de
avaliao, pois foi a primeira a apresentar resultados
por municpio e por unidade de ensino.
No entanto, como atestam depoimentos de es-
pecialistas e educadores, uma distncia no desprez-
vel ainda separa a Prova Brasil da sala de aula. Vencer
essa distncia fundamental para que a prova tenha
expresso pedaggica, faa sua passagem para dentro
da escola e sirva para a melhoria do aprendizado. So-
mente assim, a Prova Brasil ser efetivamente uma
avaliao. Medio no ava-
Foi a partir da Prova que liao. No s medir; preciso
saber o que se est medindo,
a comunidade escolar afirma a professora Maria Ins
comeou a entender a Fini, assessora de currculo e
avaliao da Secretaria de Edu-
importncia da avaliao. cao do Estado de So Paulo. micas. Como explica o professor Francisco Soares, o
As escolas comearam a Nesse sentido, o fato de a
Prova oferecer dados por muni-
se enxergar nos resultados cpio e por escola, j foi, em si,
um avano. Foi a partir da que a
comunidade escolar comeou a entender a importn-
cia da avaliao. As escolas comearam a se enxergar
nos resultados. O Saeb, Sistema de Avaliao da Edu-
cao Bsica (veja quadro), que amostral e apresenta
apenas dados da rede, mais distante, explica Marga-
reth Costa Zaponi, secretria-executiva de gesto de
rede da Secretaria de Educao do Estado de Pernam-
buco. Dessa forma, segundo ela, os professores passa-
ram a reconhecer a importncia
da avaliao. Mas ainda falta
incorporar melhor os resultados
na rotina de trabalho, para pro-
mover avanos no aprendizado,
acrescenta Margareth.
Direito de aprender
Outro consenso crescente entre
todos os que atuam na educa-
o diz respeito ao conceito
fundamental por detrs das
avaliaes: o direito de apren-
der de crianas e jovens. Esse
um direito pelo qual todos
temos de lutar, afirma Maria
Ins. Toda criana tem o direi-
to de aprender, no importa de
onde ela vem, quais so suas condies socioecon-
Estado tem o dever constitucional de oferecer uma
educao de qualidade que propicie o aprendizado.
A avaliao a forma de o Estado verificar se esse
direito est sendo atendido, afirma.
a partir dessa verificao que os gestores po-
dero tomar decises para corrigir rumos e aperfei-
oar tanto o currculo como as metodologias empre-
gadas. Isso se d tanto na rede de ensino, como em
cada unidade. Fica claro que a Prova Brasil um ins-
trumento de gesto. Considerando essa afirmativa,
no seria fundamental que os gestores educacionais
(secretrios, prefeitos etc.) soubessem como usar es-
ses indicadores para planejar polticas pblicas para
a educao? Polticas eficientes e eficazes?, questio-
na uma das perguntas apresentadas no Seminrio
Aprova Brasil.
Isso se consegue, por exemplo, por meio de
relatrios de avaliao que traduzam a mensurao
obtida pela aplicao da prova. Trata-se de uma es-
pcie de diagnstico da rede de ensino e das escolas.
Esse diagnstico ser cada vez mais vlido na medi-
da em que possa orientar intervenes pedaggicas,
melhorando a qualidade do ensino oferecido. Por
meio dos relatrios, fecha-se um ciclo: ensino, ava-
liao, desempenho, resultados, interpretao e, por
fim, ao. Fazer com que esse ciclo se complete com
eficcia o desafio que se coloca diante de todos que
so responsveis, de alguma forma, pelo ensino de
crianas e jovens. A boa notcia que muitas redes
de ensino j esto evoluindo no caminho certo.

materia_capa7rev.indd 12 11/8/10 3:29 PM

 Radiografia do ensino
A Prova Brasil foi criada
em 2005 para responder
necessidade de uma avaliao
mais detalhada, que oferecesse
dados sobre cada municpio
e cada escola participante.
Dessa forma, ela complementa
o Saeb, aplicado pela primeira
vez em 1990 e reformulado
em 1995. Enquanto o Saeb
amostral, a Prova Brasil
censitria, avaliando todos os
estudantes da rede pblica
de ensino, do 5 e 9 anos do
ensino fundamental. A partir
de 2007, as duas avaliaes
so a mesma, elas passaram a
ser aplicadas em conjunto, sem
que nenhum aluno tenha de ser
submetido a duas provas.

Semelhanas e diferenas

Prova Brasil Saeb

Criada em 2005, realizada de dois em dois anos. O Sistema de Avaliao da Educao Bsica (Saeb)
teve sua primeira aplicao em 1990 e foi reformulado
em 1995. realizado de dois em dois anos.

Avalia as habilidades em Lngua Portuguesa Avalia as habilidades em Lngua Portuguesa

(foco na leitura) e Matemtica (foco na resoluo (foco na leitura) e Matemtica (foco na resoluo
de problemas). de problemas).

Aplicada apenas a alunos do ensino fundamental, Aplicado a alunos do ensino fundamental, do 5 e

do 5 e 9 anos. 9 anos, e tambm aos do 3 ano do ensino mdio.

Avalia somente escolas das redes pblicas Avalia escolas das redes pblica e privada,
municipais e estaduais. E apenas aquelas com localizadas tanto em reas urbanas como rurais.
mais de 20 alunos em cada srie.

censitria. Todos os alunos do universo amostral, ou seja, apenas parte dos alunos
predeterminado so avaliados. do universo predeterminado so avaliados.

Fornece resultados de desempenho para o Brasil, Fornece resultados de desempenho apenas para
regies e unidades da Federao e para cada o Brasil, regies e unidades da Federao.
municpio e escola participante.

materia_capa7rev.indd 13 11/8/10 3:29 PM

 14
Aes colocadas
CAPA
em prtica
Alguns Estados possuem os prprios sistemas de
avaliao, que utilizam a mesma escala do Saeb, o
sistema nacional. Esses Estados tambm participam
da Prova Brasil. A produo de informaes com pe-
riodicidade bianual como a da Prova Brasil j no bas-
ta; se faz necessrio realizar avaliaes anuais. Estas
adquirem um carter complementar ao sistema de
avaliao nacional, comenta Margareth Costa Zapo-
ni, da secretaria de Educao de Pernambuco.
No Rio Grande do Sul, a Secretaria de Educao
introduziu padres de desempenho associados a metas
para indicar a situao geral dos alunos da rede estadu-
al. As proficincias dos alunos so apresentadas no
somente por meio da pontuao mdia, mas tambm
por meio do percentual de alunos que se encontra em
cada um de quatro nveis de desempenho: Abaixo do
Bsico, Bsico, Proficiente e Avanado.
Tenho percebido que h por parte dos profes-
sores a preocupao de passar o que discurso para
a prtica, afirma Snia Eliza-
A avaliao bianual, beth Bier, diretora-adjunta do
Departamento Pedaggico da
como a Prova Brasil, secretaria gacha. Ela explica
j no suficiente, que, a partir dos resultados das
avaliaes inclusive da Prova
preciso ter um cenrio de Brasil , muitos professores j
desenvolvimento anual trabalham com os alunos com-
Rogrio Assis
materia_capa7rev.indd 14
petncias e habilidades que vo alm do contedo
pelo contedo.
O Sistema de Avaliao de Rendimento Esco-
lar do Estado de So Paulo (Saresp) contempla alm
dos anos avaliados pela Prova Brasil, os alunos do 2,
4, 6 e 8 anos do Ensino Fundamental e o 3 ano
do Ensino Mdio. A partir dos resultados do Saresp
calculado o ndice de Desenvolvimento da Educao
do Estado. O foco principal do exame Lngua Portu-
guesa e Matemtica, mas tambm h as questes que
cobrem Cincias Humanas e da Natureza.
Concluda a avaliao, cada escola recebe um
boletim com seus resultados em uma escala de pro-
ficincia. As unidades de ensino tambm recebem
um relatrio pedaggico, por meio do qual podem
relacionar o desempenho geral dos alunos com itens
especficos da prova, de modo a conhecer os pontos
fracos e fortes da escola.Realizamos ainda o Dia do
Saresp na Escola, oportunidade em que possvel ti-
rar dvidas e discutir os resultados da avaliao, diz
Maria Ins Fini, da secretaria estadual.
Na cidade de So Paulo, por sua vez, a Prova So
Paulo foi realizada em novembro de 2007. Rosana Apa-
recida Argento, coordenadora do Ncleo de Avaliao
Educacional da secretaria paulistana, conta que, desde
a primeira edio da Prova So Paulo, se intensificaram
as intervenes no processo de aprendizagem, com
polticas de formao docente e elaborao de docu-
mentos curriculares. A Prova So Paulo tem tambm
papel formativo. As informaes so analisadas e com-
paradas com rigor, chegam s escolas no incio do ano
letivo subsequente ao da realizao das provas, e so
compreendidas por todos os responsveis pelo proces-
so educativo, inclusive os pais, afirma Rosana.
Os boletins pedaggicos tambm so o ponto
de partida para a ao em sala de aula com base nos
resultados das avaliaes na rede estadual de ensino
de Pernambuco. O Estado criou em 2008 o prprio
sistema de avaliao, o Saepe, realizado anualmente
nas escolas de ensino fundamental e mdio, assim
como o ndice de Desenvolvimento da Educao de
Pernambuco (Idepe).
Todas essas experincias tm gerado expectati-
vas otimistas nos gestores do ensino pblico. A ava-
liao externa e a avaliao do aluno feita pelo pro-
fessor tm utilidades diferentes e se complementam,
afirma a professora Rosana, da secretaria paulistana.
As avaliaes nacionais, estaduais e municipais tm
conseguido no apenas produzir informaes impor-
tantes para a tomada de deciso, mas, especialmente,
incluir os diversos atores educacionais no processo
da percepo dos problemas e das solues, garante
a professora Margareth, de Pernambuco.
11/8/10 3:29 PM
 15

Prova Brasil e leitura a Prova Brasil. Direcionando a pergunta para

a avaliao da leitura na Prova Brasil, pode-se
assim formul-la: os resultados de desempe-
nho dos alunos em leitura revelam que o que

Magda Soares
No que diz respeito ao ensino da Lngua Portuguesa, ao est sendo ensinado corresponde a uma concepo atuali-
privilegiar a leitura, a Prova Brasil reconhece a indiscut- zada das habilidades de leitura fundamentais formao
vel importncia do domnio dessa habilidade, fundamen- de um leitor competente? Naturalmente, o pressuposto
tal no processo de escolarizao, essencial nas interaes que a matriz de referncia da Prova Brasil abranja as com-
sociais e indispensvel no mundo do trabalho. petncias e habilidades que deve ter um leitor eficiente.
Em que, porm, a avaliao proposta pela Prova Assim, equivocado buscar nos resultados da Pro-
Brasil se distingue das avaliaes que so feitas no coti- va Brasil o que, lamentavelmente, muitas vezes tem

ARTIGO |
diano da escola? Que contribuio seus resultados tra- ocorrido resposta pergunta: os alunos esto apren-
zem para os sistemas de ensino e as escolas, que se dife- dendo o que est sendo ensinado? A busca equivoca-
rencie da contribuio da porque o que est

Estdio Saci
que se atribui s avalia- sendo ensinado pode
es rotineiras realiza- no ser o que deveria
das pelos professores? estar sendo ensinado e
Prope-se aqui aprendido.
a distino entre du- A Prova Brasil no
as modalidades de pretende informar s
avaliao: a avaliao escolas o desempenho
da aprendizagem e a de seus alunos, porque
avaliao do ensino. A avalia o que deveria ter
avaliao da aprendiza- sido aprendido, e no
gem tem como sujeito o que foi realmente
o aluno e seu desem- aprendido; no preten-
penho; busca resposta de avaliar a competn-
pergunta: o aluno cia dos professores, que
aprendeu o que lhe foi podem ser competen-
ensinado? avaliao tes para ensinar o que
interna escola; mais se propuseram ensinar,
que isso, interna sala mas que no o que
de aula, definida pelos deveria ter sido ensina-
professores de acordo com o que ensinaram, ou pretende- do. Os resultados da Prova Brasil permitem detectar a
ram ensinar. distncia entre as habilidades de leitura desenvolvidas e
A avaliao do ensino pode assumir duas carac- as que deveriam ser desenvolvidas, evidenciando modi-
tersticas: pode ser tambm interna escola, ou a uma ficaes e intervenes necessrias.
rede de ensino, quando h, nesta, um projeto coletivo Esses resultados vm demonstrando a defasagem
que envolva todas as escolas; e pode ser externa, com entre o ensino de leitura que as escolas tradicionalmente
origem em polticas educacionais que ultrapassam o ministram e o ensino fundamentado em teorias lingusti-
mbito de escolas ou redes. A avaliao do ensino in- cas, psicolgicas e pedaggicas, e nas demandas sociais de
terna busca resposta pergunta: foi ensinado o que se letramento. Uma das principais causas dessa defasagem
planejou ensinar? Embora avaliando os alunos, o que so os cursos de formao de professores, desatualizados
realmente se quer avaliar o processo pedaggico, o em relao s concepes atuais de leitura. Assim, a Prova
que inclui no apenas a avaliao do desempenho dos Brasil contribui para que se reformule a formao inicial e
professores, mas tambm da gesto escolar. continuada dos professores.
J a avaliao do ensino externa s escolas busca res-
posta pergunta: foi ensinado o que deve ser aprendido Magda Soares doutora em Didtica, professora titular da UFMG e membro
e, portanto, o que deve ser ensinado? Aqui que se situa da Associao Nacional de Ps-graduao e Pesquisa em Educao

artigo_magdasoares2.indd 15 11/8/10 3:30 PM

 Acervo da Secretaria Municipal de Educao
Os benefcios da avaliao
O Municpio de Lapa, no
Paran, utiliza dados de
avaliao educacional
para mapear problemas
e implementar aes
em suas 27 escolas. Os
resultados positivos
so contados por Vilma
Piovesan Wille, secretria
municipal de Educao

depoimento_vilma4rev.indd 16 11/8/10 3:31 PM


17

DEPOIMENTO
A partir da avaliao das escolas de nosso munic- atuao pedaggica de todos,
pio, pudemos conversar com as escolas, com cada em todas as sries. Tambm per-
direo e cada professor para aprimorar o ensino. cebemos que existe dificuldade
Foi uma chamada responsabilidade. Depois que da maioria dos professores de
passamos por esse trabalho com a AVALIA, en- agregar interpretao e racioc-
volvendo os alunos do 5 ano, percebemos que nio ao contedo. Outra consta- Vilma Piovesan Wille,
a maioria deles ainda estava no nvel Bsico de tao que, apesar de muitas das secretria municipal de
proficincia. O diagnstico nos deu subsdios pa- 27 escolas da rede municipal de Educao de Lapa, Paran
ra traar metas de qualidade. A principal zerar o Lapa ficarem em rea rural e a
contingente de alunos no Abaixo do Bsico e fazer menor delas ter apenas quatro alunos, os estudan-
com que grande parte dos que esto no Bsico pas- tes das escolas rurais, em geral, se saram melhor.
se para o Proficiente. Isso porque a AVALIA utili- Todos esses resultados influenciaram diretamente
za quatro nveis de proficincia para classificar os o planejamento pedaggico deste ano e, para no-
estudantes: Abaixo do Bsico, Bsico, Proficiente e vembro, est prevista uma nova aplicao.
Avanado. As aes especficas por uni-
dade de ensino foram possveis graas
forma como os dados da avaliao foram
apresentados. Essa devolutiva de extre- Em detalhes
ma importncia, afinal o momento em
que se orientam e se esclarecem as esco- As escolas da rede municipal de Lapa utilizam
las sobre como ler e interpretar os resul- o Sistema UNO e, por conta disso, tiveram
tados. Os professores compreenderam a a oportunidade de contar com os servios da
seriedade dessa avaliao e a importn- AVALIA . Em novembro de 2009, a avaliao
cia do trabalho coletivo, da gesto e da foi aplicada aos cerca de 840 alunos do 5 ano
do ensino fundamental, pouco mais de 20% dos
cerca de 4 mil alunos da rede. Foram avaliadas
competncias de Leitura e Matemtica.

depoimento_vilma4rev.indd 17 11/8/10 3:32 PM

 18

Prova Brasil e o
Francisco Soares

direito de aprender
O direito educao, durante longos anos,
significou no Brasil o direito de matrcula
em alguma escola. Depois da promulgao
da Constituio Federal de 1988, com sua n-
ARTIGO |

fase nos direitos individuais, e da influncia

do pensamento expresso em muitos acordos
internacionais, o direito educao significa
hoje o direito ao aprendizado.
Para definir a qual aprendizado, fico com
o equilbrio e a beleza da proposta de Antnio
Nvoa, socilogo portugus: vale a pena ser
ensinado tudo o que une e tudo o que liberta.
Tudo o que une, isto , tudo o que integra cada
indivduo num espao de cultura e de sentidos.
Tudo o que liberta, isto , tudo o que promove
a aquisio de conhecimentos, o despertar do
esprito cientfico. [...] e tudo o que torna a vida
mais decente.
Como so muitas as competncias ne-
cessrias para o exerccio da cidadania, as dife-
rentes estruturas educativas devem ter nfases
distintas. Por exemplo, a famlia e a religio so
foras muito mais poderosas do que a escola na
formao da viso de mundo e dos valores de ca-
da criana ou jovem. Assim, a escola no pode ser
responsabilizada sozinha por insucessos nessas
reas, mas deve responder majoritariamente pelo
eventual fracasso de seus alunos no aprendizado
de competncias cognitivas.
Como no Brasil h milhes de alunos matri-
culados em escolas de educao bsica, o Estado,
para cumprir sua funo e verificar se o di-
reito ao aprendizado foi atendido, introdu-
necessrio ziu a Prova Brasil. Trata-se de um teste que
definir o que permite medir o nvel de domnio das com-
saber ler petncias leitora e matemtica, aplicado em
praticamente todas as crianas e jovens ma-
para uma triculadas na quarta srie quinto ano e na
criana de 11 oitava srie nono ano em escolas pbli-
cas de educao bsica.
anos ou um
A pertinncia de dois elementos defi-
jovem de 14 nidores da Prova Brasil a padronizao e o
uso da medida precisa ser entendida. Como o di-
reito ao aprendizado de competncias cognitivas
de todos os alunos, fica excluda a possibilidade
de definir esse direito de forma diferente para di-
ferentes grupos de alunos. Como consequncia,
o instrumento verificador do direito tem de ser o
mesmo em todo o pas. No entanto, considerando
a variao natural presente nos seres humanos,
aceita-se que alguns alunos tero a competncia
leitora em nvel mais avanado do que outros,
ainda que todos devam ler acima de um nvel con-
siderado adequado.
Verificar o direito ao aprendizado s neces-
srio pelo fato de o Brasil ter, como dito, milhes
de alunos matriculados na escola bsica. Se fos-
sem apenas algumas dezenas, outros processos
poderiam ser pensados. Isso deixa clara a grande
diferena entre a Prova Brasil, um instrumento
do Estado, e a avaliao da aprendizagem, um
instrumento que o professor no exerccio de sua
autonomia usa na sala de aula como uma de suas
estratgias de ensino.
A Prova Brasil um teste composto apenas

artigo_soares_3rev.indd 18 11/8/10 3:32 PM


de itens calibrados e pertencentes a uma escala pre-
viamente definida. Se, por exemplo, o aprendizado
da leitura um direito, necessrio definir opera-
cionalmente o que saber ler para uma criana de
11 anos ou um jovem de 14. Isso foi feito pelo Inep
(Instituto Nacional de Estudos e Pesquisas Educa-
cionais Ansio Teixeira), quando desenvolveu a es-
cala de medida usada na Prova Brasil.
A AVALIA utiliza quatro conceitos para di-
vulgar a nota do aluno em Leitura e Matemtica
na Prova Brasil, identificados pelas etiquetas: Abai-
xo do Bsico, Bsico, Proficiente e Avanado. Esses
conceitos so definidos de forma que os alunos de
conceito Proficiente demonstram slido conhe-
cimento dos contedos e habilidades esperados
para alunos de seu estgio escolar e esto aptos
a continuar com sucesso seus estudos nas etapas
posteriores de ensino. Os alunos que receberam o
conceito Avanado dominam a competncia de
forma especialmente completa e sabem us-la pa-
ra a soluo de problemas complexos. Os alunos
do conceito Bsico demonstram um domnio
parcial da competncia e, finalmente, quem rece-
artigo_soares_3rev.indd 19
Estdio Saci
be o conceito Abaixo do Bsico tem
conhecimentos rudimentares da
competncia, completamente inade-
quados para o estgio escolar em que
se encontram.
No entanto, preciso estabe-
lecer a expectativa de desempenho
para os alunos de uma escola. Entre
muitas indicaes, merece desta-
que especial a opo adotada pelo
Movimento Todos pela Educao.
Essa organizao no-governamen-
tal, livre de quaisquer presses e com
consultoria tcnica competente, de-
finiu que 70% ou mais dos alunos de
uma escola deve receber os conceitos
Proficiente ou Avanado.
Embora o sentido embutido
nos conceitos seja, por si s, muito
esclarecedor para o uso social dos
resultados da Prova Brasil, isso no
suficiente para que a escola use na
sua rotina pedaggica os resultados
da Prova Brasil.
Para essa finalidade preciso
identificar e descrever itens que os
alunos que receberam cada um dos quatro con-
ceitos so capazes de fazer. Isso a essncia dos
relatrios pedaggicos que a AVALIA produz.
Toda a riqueza da informao gerada pela
Prova Brasil s possvel pelo uso
de vrias tcnicas sofisticadas de-
senvolvidas pela pesquisa estats- Verificar o direito
tica para atender s necessidades ao aprendizado
criadas por esse tipo de teste. O diag-
nstico deve ser feito considerando
necessrio pelo
competncias complexas, o que exi- fato de o Brasil ter
giria testes mais longos que o aluno milhes de alunos
poderia responder. Alm disso, o
resultado de uma edio deve ser na escola bsica
comparvel ao da prxima. Por isso
os testes da Prova Brasil so planeja-
dos com o uso da tcnica BIB (Blocos Incompletos
Balanceados) e a nota atribuda a cada aluno ob-
tida com a TRI (Teoria de Resposta ao Item).
Francisco Soares ps-doutor em Educao pela
Universidade de Michigan, especialista em avaliaes
educacionais e presidente do Conselho Consultivo da AVALIA
11/8/10 3:32 PM
 20
RESPONSABILIDADE

Carlos Fernando
Fundao Roberto Marinho
investe em acelerao escolar
Em 2010 foi iniciado por Renata Rossi

o Programa Florao, O direito de estudar garantido a todo cidado.

Entretanto, na prtica, algumas crianas no tm a
em Belo Horizonte, oportunidade de concluir os estudos de forma ade-
uma iniciativa quada sua faixa etria. Uma das solues para esse
problema so as turmas de acelerao escolar.
diferenciada que Desenvolvido pelas instituies Fundao
envolve mais o Roberto Marinho, Fiesp e Sesi-Senai SP, o Telecurso
um programa de educao que atende estudantes
educador e j com essa defasagem, alm daqueles que participam
apresenta bons da Educao de Jovens e Adultos (EJA) ou que resi-
dem em locais com dificuldade de atendimento pela
resultados rede convencional de ensino.

reportagem_roberto marinho_3.indd 20 11/8/10 3:33 PM

 A partir de materiais impressos e visuais, como
livros e teleaulas, o Telecurso oferece escolarizao
bsica. reconhecido internacionalmente como uma
proposta pedaggica inclusiva e at 2010 atendeu
mais de 5 milhes de estudantes nas 27 mil salas de
aula instaladas nas 1.500 instituies em todo o Brasil.
O Estado de Minas Gerais recebeu a mais re-
cente iniciativa da Fundao com o apoio do Tele-
curso. Trata-se do Programa Florao, iniciado em
fevereiro deste ano. Fruto da parceria entre a Fun-
dao e a Secretaria Municipal de Belo Horizonte,
o objetivo do programa, presente em 91 escolas, a
acelerao escolar dos anos finais do Ensino Funda-
mental. Atualmente, so atendidos 4.500 estudantes
com idade entre 15 e 19 anos.
So alunos que passaram por repetncias e pre-
cisam de diferenciais no ensino, tanto para motivar
quanto para acompanhar sua realidade. A vivncia
e as perspectivas de um aluno de 18 anos que est no
5 ano diferente daquelas do que tem 11 anos, e ns
precisamos adequar a metodologia para esses casos,
diz Vilma Guimares, gerente-geral de educao da
Fundao Roberto Marinho. Para tanto, a instituio
conta com metodologia diferenciada.
No Florao, cada professor se dedica a apenas
uma turma durante todo o perodo letivo. Graas a es-
sa imerso no cotidiano dos seus 30 alunos, o educa-
dor passa a conhecer melhor o seu grupo de aprendi-
zagem, as possibilidades e desafios de cada estudante.
Desempenho avaliado
Uma das caractersticas do programa a avaliao,
que tem carter processual e formativo. Para ns
Programa Florao
em nmeros
91
Presente em escolas
5.200 alunos atendidos
entre 15 e 19 anos, do EJA
e do ensino fundamental
Turmas de 30 alunos, com
dedicao exclusiva do professor
reportagem_roberto marinho_3.indd 21
uma estratgia fundamental.
No adianta avaliar, deixar de
analisar os resultados e no
se estruturar para que as mu-
danas ocorram. como usar
um termmetro para medir a
temperatura, confirmar que
est alta e no fazer nada, de-
fende Vilma. Para ela, preciso
avaliar e saber o que ser feito
com os resultados e a anlise
dos dados levantados. Seja pa-
ra adotar medidas preventivas,
melhorias da aprendizagem ou
festejar bons resultados.
O Telecurso tem um pro-
cesso de avaliao contnua pa-
ra verificar se os alunos esto, de
fato, construindo as competn-
cias necessrias. Essa avaliao A dedicao do professor
feita internamente pela Fun- a um pequeno grupo
dao de forma sistemtica. Em-
bora tambm tenha o objetivo de estudantes reflete
de diagnosticar, mais voltada em bons resultados de
para a gesto do aprendizado e,
de forma preventiva, para que aprendizagem
evite frustraes no processo de
ensino-aprendizagem.
A importncia de medir o impacto educacio-
nal do programa na vida dos alunos, para aprimor-
-lo ou corrigir possveis erros durante o processo, fez
com que a Fundao Roberto Marinho contratasse a
AVALIA Educacional para fazer a avaliao externa.
11/8/10 3:33 PM
 22
RESPONSABILIDADE

No caso do Programa Florao, os alunos passam
por duas avaliaes externas. A primeira tem como ob-
jetivo medir as competncias construdas durante os
anos de estudo antes do programa. Dessa forma, pos-
svel obter o diagnstico de entrada, que registra, pelo
desempenho, a situao de aprendizagem apresentada
pelos estudantes no incio do processo. Essa primeira
avaliao foi amostral e aplicada em 2 mil alunos.
A partir desse diagnstico, a Fundao planeja
a estrutura curricular e a formao dos professores,
diz a gerente-geral. So propostas atividades que
atendam as competncias que precisam ser aprimo-
radas, por meio de materiais especficos, por exem-
plo. Na formao dos professores, eles so alertados
para as dificuldades mais recorrentes de acordo com
a avaliao. Esse o primeiro ano do programa.
No fim do ano ser realizada uma nova aplica-
o. Nesta, a AVALIA ir levantar as competncias
adquiridas durante o ano letivo. Queremos identi-
ficar o crescimento desses alunos dentro das turmas
de acelerao. Os estudantes saem do programa e vo
para o ensino mdio com a conscincia do que apren-
deram e do que precisam aprimorar, afirma Vilma.
A devolutiva compartilhada no s com os gestores
educacionais, mas tambm com os estudantes, que j
tm maturidade para receber esse retorno.

Retrato de estudante
Foram ouvidos 3.124
alunos, que informaram suas Perfil dos entrevistados
caractersticas socioeconmicas, identificaram atributos 12%
pessoais relacionados s suas habilidades e apontaram reas
de interesse profissional. 39%
14%

O estudo mostrou que:

> 64% dos alunos so do sexo

masculino;
15%
> 86% tm menos de 18 anos;

> 36% no contam com a presena

A Fundao Roberto Marinho
incluiu no Programa Florao
uma pesquisa cujo resultado
subsidiar o planejamento para
os Cursos de Formao Bsica e
Fortalecimento da Cidadania dos
estudantes do programa
20%
paterna na vida domiciliar;
>39% gostariam de fazer
> 5% no contam com a presena cursos voltados para a rea
materna; administrativa, como auxiliar
administrativo;
> 6,5% residem com outros
parentes que no os pais. >20% preferem a rea tcnica
como pintura automotiva, confeco
de vesturio ou manuteno de
computadores e impressoras;
Revelou ainda que 48% dos
responsveis pelos alunos do >15% escolheram cursar aulas
Florao no concluram o relacionadas ao atendimento
pblico;
ensino fundamental e 5% so
analfabetos, com renda mdia >14% tm inclinao para
familiar de R$ 1.100,00 e que o setor mdico e social como
auxiliar de enfermagem e
69% dos alunos no trabalham, formao de agentes sociais;
mas 38% afirmam buscar uma
vaga no mercado de trabalho. >12% preferem a rea de
eventos como decorao e
animao de festas.

reportagem_roberto marinho_3.indd 22 11/8/10 3:33 PM


Avaliaes e intervenes pedaggicas
Na dcada de 1990, foi criado o Sistema Nacional de Ava-
liao da Educao Bsica (SAEB) e a Prova Brasil, com o
objetivo de avaliar e monitorar o nvel de aprendizagem
dos alunos em Lngua Portuguesa e Matemtica, contri-
buir para a definio e regulao de polticas pblicas gem dos estudantes e ainda acompanhar longitudinal-
educacionais, alm de servir como estmulo para Estados
e Municpios criarem suas avaliaes de sistema.
Nesse contexto, a Secretaria Municipal de Educa-
o de So Paulo (SME) instituiu, em 2005, o prprio
Sistema de Avaliao de Aproveitamento Escolar dos
Alunos da Rede Municipal de Ensino de So Paulo e o
seu Ncleo de Avaliao Educacional, com a respon-
sabilidade de coordenar e supervisionar a operaciona-
lizao do principal instrumento do sistema, a Prova
So Paulo, e outras avaliaes educacionais propostas
pela Secretaria.
Em novembro de 2007, foi realizada a primeira
verso da Prova So Paulo para todos os alunos dos 2
e 4 anos dos ciclos I e II em Lngua Portuguesa e Ma-
temtica. Os resultados foram organizados em boletins
enviados s escolas, no incio do ano letivo de 2008.
Intensificaram-se, assim, as intervenes no processo
de aprendizagem, com polticas de formao docente e
elaborao de documentos curriculares.
Mas foi com a segunda edio da Prova So Paulo,
em dezembro de 2008, que ocorreram os maiores avan-
os na sua elaborao, como o envio de carta aos pais pa-
ra orientao sobre a realizao das provas, a ampliao tivo subsequente ao da realizao das provas, que sejam
do nmero de itens para as provas de Lngua Portuguesa
e Matemtica e tambm a elaborao do Relatrio de
Anlises Pedaggicas, com informaes mais precisas
sobre os nveis de proficincia e sobre as intervenes
pedaggicas adequadas, alm da divulgao dos resul-
tados em reunies para todos os supervisores escolares,
diretores de escola e coordenadores pedaggicos.
artigo_argento2.indd 23
23
Rosana Argento
Diante dos resultados das Provas So Paulo 2007
e 2008, foi possvel analisar a evoluo das mdias das
proficincias das turmas e dos alunos de toda a Rede Mu-
nicipal, identificar dificuldades e avanos na aprendiza-
mente a evoluo das mdias no ensino fundamental.
Com isso, criaram-se condies para novas es-
ARTIGO |
tratgias de trabalho, como a produo dos Cadernos
de Apoio e Aprendizagem para professores e alunos,
maior investimento na formao continuada e acom-
panhamento constante das aes desenvolvidas nos
vrios mbitos da Secretaria Municipal de Educao.
Na terceira edio da Prova So Paulo, realizada
em 2009, mais novidades: as Matrizes de Referncia pa-
ra a Avaliao do Rendimento Escolar foram revisadas
por especialistas, consultores e professores da Rede; com
vistas divulgao e interpretao dos resultados, foram
definidos trs pontos de cortes e quatro nveis de profici-
ncia para cada ano de escolaridade e componente curri-
cular (Abaixo do Bsico, Bsico, Adequado e Avanado);
criou-se o Boletim do Aluno, enviado s residncias, com
as proficincias em Lngua Portuguesa e Matemtica.
Alm de diagnstica, tambm com papel forma-
tivo que a Prova So Paulo da Secretaria Municipal de
Educao de So Paulo tem se comportado, garantindo
que as informaes sejam analisadas e comparadas com
mais rigor, que cheguem s escolas no incio do ano le-
compreendidas pelos responsveis no processo educati-
vo, inclusive os pais, para que de imediato se iniciem as
intervenes adequadas em todos os mbitos da SME.
Rosana Aparecida Argento Mestre em Educao pela PUC-SP,
coordenadora do Ncleo de Avaliao Educacional da Secretaria
Municipal de Educao
Estdio Saci
11/8/10 3:34 PM
 24

Um retrato da educao
Contribuir para disseminar
no pas a cultura da avaliao
educacional/institucional.
Essa a misso da AVALIA,
uma assessoria educacional
que est fazendo a diferena
PERFIL
Foi nesse contexto que surgiu a AVALIA As-
sessoria Educacional, com o objetivo de desenvol-
ver projetos em avaliao de desempenho, acom-
panhados de anlises tcnica e pedaggica, tanto
dos instrumentos de avaliao como dos resultados
obtidos. Conhecedora da realidade educacional bra-
sileira, a AVALIA sabia desde o incio que era preci-
so prestar esses servios tendo como base a misso
de contribuir para disseminar no pas a cultura da

avaliao educacional/institucional, que ganhou

em escolas e governos
O ano de 2005 foi um marco para a educao bra-
sileira. A reformulao do Sistema de Avaliao da
Educao Brasileira (Saeb) completava dez anos e se
consolidava como referncia para gestores, especia-
listas e educadores, mudando de vez a forma como
se mede a qualidade do ensino no pas. Tambm era
criada a Prova Brasil, passo fundamental para que
cada municpio e cada escola do territrio nacional
tomassem conhecimento do resultado de seu traba-
lho por meio do desempenho dos alunos.
fora nas duas ltimas dcadas. Aps cinco anos de
atividade, pode se orgulhar de atuar com abrangn-
cia significativa, prestando seus servios tanto para
a rede privada como para a rede pblica de ensino.
Nessa trajetria, um dos pontos culminantes
foi a participao no consrcio responsvel, em
2009, pela Prova Brasil. Tendo ao seu lado um par-
ceiro operacional, a AVALIA cuidou da produo e
anlise dos resultados do exame de 6,2 milhes de
estudantes. Fizemos o processamento dos resul-
tados, a anlise das bases de dados e a gerao dos
nveis de proficincia no qual os estudantes seriam
classificados, afirma Renato Jdice de Andrade, ge-
rente da rea tcnica.

Resumo

Carlos Dez Polanco

da atuao

Em 2009, foi
responsvel pela
produo e anlise
dos resultados da
Prova Brasil,
que envolveu
6,2 milhes
de estudantes
em todo o pas

Atende redes
pblicas e
particulares
de ensino

reportagem_avalia_4rev.indd 24 11/8/10 3:36 PM

 Rogrio Assis
A AVALIA foi
criada em 2005

Participa de
seminrios e
congressos sobre
o tema e apoiou
a realizao
do Aprova
Brasil, que
discutiu questes
relativas
Prova Brasil
com milhares
de professores
em 11 estados
brasileiros

Trabalho diferenciado
Estamos alinhados com o que existe de mais mo-
derno em sistemas de gesto. Produzimos relatrios
pedagogicamente interpretados e contextualizados,
que contribuem para a gesto de ensino, permitindo
diagnosticar problemas, identificar as possveis mu-
danas necessrias e orientar aes de melhoria da ver indicadores de qualidade e
qualidade, define Maria Zlia Dias Miceli, gerente
de relaes institucionais da AVALIA.
A instituio atua em cinco reas. Em primei-
ro lugar, vem a avaliao educacional propriamente
dita, ou seja, medir o conhecimento dos alunos, ge-
ralmente em Leitura, Produo de Texto, Cincias da
Natureza, Cincias Humanas e Matemtica, e princi-
palmente dos 5 e 9 anos do ensino fundamental e
do 3 ano do ensino mdio.
Pode tambm acompanhar a avaliao educa-
cional uma avaliao institucional que analisa indi-
cadores de gesto da instituio ou rede de ensino. A
terceira rea a que a Assessoria Educacional se dedi-
ca a consultoria, o que a torna capaz de desenvol-
de gesto prprios.
A AVALIA ainda est
So cinco reas de
preparada para realizar a ava- atividade: avaliao
liao de impacto de projetos
educacionais especficos, de
educacional, institucional,
forma que essa avaliao no se de impacto, consultoria
restringe anlise subjetiva. Por
fim, desenvolve cursos e aes
e capacitao de
de capacitao para educadores. educadores e cursos

reportagem_avalia_4rev.indd 25 11/8/10 3:36 PM

 26

Rogrio Assis
PERFIL

Entre as
fundaes
para as quais j
realizou avaliaes
educacionais,
destacam-se
Fundao Iochpe,
Fundao Bradesco,
Fundao Ita-
Social e Fundao
Roberto Marinho

J em 2010 destaca-se a
Dos nmeros ao avaliao educacional realizada nas
Em quase todos os projetos que abraa, a AVALIA tem escolas da Associao Nacional
como diferencial o momento da devolutiva, na certeza de Educao Catlica (Anec),
de que no basta avaliar; crucial interpretar os resul- nas escolas do Sistema UNO
tados e propiciar que as escolas utilizem os de Ensino e a avaliao institucional
resultados como ferramenta de interven- no Estado do Cear
no momento o pedaggica. No basta o mdico pedir
da devolutiva que ao paciente que faa um exame de sangue
ou uma radiografia. Isso apenas o diagns-
a escola tem um tico. preciso que o mdico interprete os
retrato detalhado do resultados e prescreva as aes necessrias
para eliminar o problema do paciente, se-
ensino que pratica jam remdios, seja uma dieta, por exemplo,
e pode elaborar as compara Renato Jdice de Andrade.
A AVALIA no faz, ela prpria, inter-
medidas corretivas veno pedaggica nas instituies para as
quais presta servios, mas oferece os meios
para direcionar o planejamento de aes.
no Relatrio da Escola que gestores e professores
encontram os dados que podero orientar medidas
corretivas e o planejamento pedaggico. o instru-
mento que direciona o fechamento do ciclo: ensino,
avaliao, desempenho, resultados, interpretao e,
por fim, ao, explica Maria Zlia. Para que esse fe-
chamento ocorra com sucesso, essencial o momen-
to da devolutiva, quando a escola orientada sobre
como ler e interpretar os resultados da avaliao.

reportagem_avalia_4rev.indd 26 11/8/10 3:36 PM


As mltiplas
linguagens na escola
Na evoluo humana, a razo no se desenvolveu
separadamente da fala, nem a cultura humana seria
a mesma sem a escrita. Desde sempre, portanto,
cada campo de conhecimento envolve linguagens.
Uma criana chega escola j sabendo se expressar e
comunicar por gestos e palavras, mas l que desenvolve
a leitura e a escrita que do acesso cultura em todas as
disciplinas, e essa centralidade das linguagens precisa
ser explicitada. E no se alfabetiza em abstrato, mas sim
tratando diferentes temas, e o aprendizado se torna mais
efetivo quando os alunos fizerem uso dessas linguagens
para se expressar, tratando de assunto de seu interesse,
que o que lhes garante sua efetiva apropriao das
linguagens que lhe esto sendo ensinadas. Nesse sentido,
as leituras obrigatrias podem ser contraproducentes,
se o interesse por elas no for despertado.
A Matemtica constitui outra provedora
de linguagens, desde o aprendizado dos nmeros
nos primeiros anos da escola, e natural que uma
alfabetizadora reconhea o papel de linguagem do
aprendizado dos nmeros e na designao de formas
planas e de slidos geomtricos. Mas, em outras etapas,
h professores sem conscincia de que desenvolvem
linguagens e, assim, subestimam essa dimenso da
formao. A alfabetizao cientfico-tecnolgica, ou conscincia da importncia da dimenso linguagem
ACT, j revela essa conscincia no ensino de cincias
da natureza, pois a leitura de bulas de medicamentos,
de rtulos de alimentos ou mesmo do manual de
artigo_luizcarlos_2.indd 27
27
instruo de equipamentos so s uns
ARTIGO | Luiz Carlos de Menezes
poucos exemplos triviais de linguagens
cientficas que precisariam ser dominadas
por consumidores em geral.
Na Geografia, so linguagens que
permitem no uso de guias e mapas, mas
Estdio Saci
nas humanidades em geral preciso uma
reviso de nfases, por exemplo, com uma
presena maior de conceitos da Economia.
O acompanhamento dos noticirios
de TV d uma ideia da importncia das
linguagens de carter econmico ou
financeiro para entender o que se passa no
mundo e para orientar aes individuais
em funo das circunstncias. O carter
global das trocas econmicas e culturais
demanda compreenso de linguagens
cada vez mais complexas. Nesse sentido,
a problematizao em sala de aula das
temticas dominantes na mdia uma das
mais eficazes formas de serem explicitadas
e desenvolvidas as linguagens nas cincias humanas.
Professores se queixam do pouco hbito de leitura
de seus alunos e lamentam o fato de a escrita deles estar
se transformando nos chats, blogs e twitters, mas todos
ns vivemos um delicado momento de transio e
no podemos fazer de conta que o mundo continua ao
mesmo. Por isso, sem abrir mo da adequao gramatical,
igualmente importante lanar mo de outros meios
atuais, de forma que as buscas que sempre fazamos
em dicionrios e enciclopdias sejam igualmente feitas
pela internet, recados podem tambm ser torpedos
por celular, e cartas possam ser trocadas por mensagens
por e-mail. No excluamos sequer a possibilidade de
redaes em cadernos serem trocadas por seu registro
em computadores, assim como de lies de casa serem
trazidas para a classe em pen drives...
Quaisquer que sejam os meios, as linguagens so
os instrumentos para ler o mundo e interagir com o
mundo e, talvez, a mais importante funo da escola
bsica seja promover o domnio das linguagens. Sem
elas, as demais competncias, como as de compreenso,
interveno, argumentao e proposio, no poderiam
ser promovidas. Por isso, o ensino de qualquer disciplina
to mais eficaz quanto mais o professor tenha
para o aprendizado de seus alunos.
Luis Carlos de Menezes fsico e educador na Universidade de So Paulo
11/8/10 3:37 PM
 28

Ensino pblico na berlinda

MITOS E VERDADES

Mestre em Administrao, Margareth Por Fernando Leal

Zaponi, secretria-executiva de Boa mesmo era a escola dos nossos pais.

MITO. Naquela poca, a educao no era para
Gesto de Rede da Secretaria todos e havia uma parcela significativa da popu-
da Educao de Pernambuco, lao em idade escolar fora da escola. Impulsiona-
dos pela Constituio de 1988, os governos federal,
conhece de perto a realidade do estadual e municipal ampliaram vagas em todas
ensino pblico e dos desafios da as modalidades e nveis de ensino. Esse movimen-
to se intensificou em meados da dcada de 1990 e,
universalizao da escola pblica. a partir de 2003, a taxa de atendimento de crianas
Aqui ela abre o jogo e comenta quais de 7 a 14 anos tem se mantido em torno de 98%.
Assim, a democratizao das oportunidades edu-
os mitos e verdades que contribuem cacionais est possibilitando a insero de estu-
para a qualidade da educao no dantes provenientes de ambientes socioeconmi-
cos mais desfavorveis. Essa nova realidade requer
Brasil. Aponta ainda caminhos para a construo de uma nova escola que d conta da
a melhoria do ensino e d o recado: universalizao da educao com qualidade social
para todos os estudantes.
possvel sim fazer mais e melhor
se educadores, governos e pais Escolas em que os pais participam
apresentam melhor desempenho.
trabalharem juntos VERDADE. As experincias pedaggicas exitosas
no Brasil tm sempre como pano de fundo uma no-
va ordem, que passa a espiralar as responsabilidades
de cada ator no contexto educacional, buscando na
participao dos pais a construo de um acordo
de coresponsabilidades entre educadores e famlia.
Nesse contexto, as escolas nas quais os pais parti-
Alyne Pinheiro

cipam das suas atividades e se informam sobre o

desenvolvimento da aprendizagem de seu filho
onde se encontra, aonde precisa chegar e o que fazer
para chegar l conseguem melhores resultados.

A violncia um dos maiores problemas

do ensino pblico.
Margareth Zaponi e o secretrio de
Educao (2007 a maro de 2010)
Danilo Cabral com os 17 Gestores
das Gerncias Regionais (GREs)
VERDADE. A escola encontra-se cada vez mais
permevel ao quadro de violncia social que ha-
bita a vida urbana, particularmente em bairros
perifricos ou comunidades carentes. Esse qua-
dro foi intensificado pelo processo de abertura
das oportunidades escolares, que absorveu amplo
contingente de estudantes oriundos dos segmen-
tos empobrecidos da sociedade, e tambm pela ex-
panso do ensino pblico sob condies precrias,
expressas na ausncia de investimentos na rede de
escolas e na formao dos docentes, e na falta de
projetos educativos capazes de absorver essa nova
realidade escolar.

mitos_e_verdades_margareth4.indd 28 11/8/10 3:38 PM

 Ademar Filho
Falta infraestrutura maioria das escolas
de estados e municpios brasileiros.
VERDADE. O crescimento exponencial de matr-
culas no foi acompanhado da necessria expanso
e melhoria da infraestrutura, apesar dos esforos
do MEC em disponibilizar livros didticos, compu-
tadores, verbas para a execuo dos seus planos de
ao da escola, alm de repasse de recursos financei-
ros para a implantao de uma dezena de projetos.
Construir escolas no deve ser mais
a prioridade do pas.
MITO. A universalizao do ensino fundamental
e o aumento de matrculas na educao infantil e
no ensino mdio no resultaram uma expanso
da rede fsica escolar compatvel com a necessida-
de de atendimento. A destinao de espaos para
as escolas ocorreu sem planejamento e sem a de-
finio de um padro bsico construtivo. Assim,
comum na maioria das redes estaduais e muni-
cipais de ensino o funcionamento de escolas em
espaos adaptados, como residncias e galpes.
essencial, para assegurar igualdade e equidade na
oferta de oportunidades educacionais, a definio
de um padro nacional de escola capaz de atender
s diversas demandas da educao formal e a alo-
cao de recursos financeiros, pelo MEC, em quan-
tidade suficiente e um planejamento integrado
dos governos federal, estadual e municipal.
Os investimentos das trs esferas de governo
so insuficientes.
VERDADE. O gasto pblico em educao no
Brasil, em 2007 foi de 5,1% do PIB, segundo o Inep,
pouco inferior ao gasto em educao de alguns
pases desenvolvidos como os Estado Unidos, que
de 5,3%. No entanto, as condies precrias de
infraestrutura em que se encontra grande quanti-
dade de escolas pblicas estaduais e municipais,
sobretudo no que se refere rede fsica, equipa-
mentos, materiais e recursos humanos, aponta
para a necessidade de aporte considervel de re-
cursos financeiros. Atualmente, mais de 60% dos
recursos financeiros destinados educao so
investidos no pagamento de pessoal. O restante
investido em custeio, sobrando pouco mais de 6%
para melhoria e expanso de infraestrutura.
mitos_e_verdades_margareth4.indd 29
Margareth Zaponi
e estudantes da
preciso repensar a formao inicial Escola Estadual
dos professores. Apolnio Sales,
VERDADE. A dinmica mais importante do plantando hortalias
processo de ensino e aprendizagem a que acon- (Programa Ao
Saudvel)
tece entre professor e estudante. Assim, torna-se
essencial que os cursos de formao inicial sejam
capazes de oferecer aos futuros professores si-
tuaes de aprendizagem vinculando a teoria
prtica, para que eles possam construir em seus
alunos a capacidade de aprender. Atualmente, a
estrutura dos cursos no prioriza a integrao da
teoria prtica, assim como a maioria dos profes-
sores formados no apresenta as competncias
docentes necessrias para ensinar e fazer com
que os estudantes aprendam de acordo com os
objetivos e metas educacionais estabelecidas pa-
ra a educao pblica.
As desigualdades sociais so um grande
obstculo melhoria da qualidade da educao.
MITO. Pesquisas sobre eficcia e melhoramento
escolar desenvolvidas em escolas secundrias em
Londres apontam que a escola tem maior influ-
ncia sobre o estudante do que o estudante sobre
a escola. Acredito que, independentemente da
condio socioeconmica dos estudantes, todos
podem aprender, desde que tenham oportunida-
des e liberdade de escolhas.
11/8/10 3:38 PM
 UNO: testado e aprovado
Bons resultados de escolas Por Renata Rossi
e internacionalizao do Ter entre seus clientes a primeira coloca-
da no Exame Nacional do Ensino Mdio
mtodo aquecem a nova (Enem 2009) um diferencial e tanto. Para
fase do Sistema de Ensino o diretor-geral de Sistemas de Ensino, Vi-
cente Avanso, essa chancela a compro-
do Grupo Santillana vao de um excelente resultado. O Enem
no simplesmente uma prova que verifi-
ca o que o aluno sabe hoje. Para fazer essa
avaliao, preciso ter raciocnio e com-
petncias que so adquiridas ao longo dos
anos, na formao escolar, defende.
materia_uno2rev.indd 30
Os bons resultados nas escolas que
utilizam o Sistema UNO de Ensino mos-
tram que os sistemas se aperfeioaram.
Cada vez mais as instituies agregam
novos mtodos, e quem ganha com isso
so os estudantes. Atualmente, h es-
colas que usam exclusivamente os sis-
temas de ensino, enquanto outras mes-
clam com os livros didticos.
Primeiro sistema de ensino cria-
do por uma editora de livros didticos,
o UNO est no mercado desde 1998.
11/9/10 9:38 AM
 31
lvaro Motta

REPORTAGEM
Vicente Avanso, diretor-geral
de Sistemas de Ensino

Os primeiros materiais eram destinados
ao ensino mdio, pois a demanda de pre-
parar os alunos para o vestibular na po-
ca era grande. At a dcada de 1990 as
escolas focavam a formao do cidado,
integrando-o sociedade. Quando se
pensava em vestibular, automaticamen-
te as famlias procuravam os cursinhos
pr-vestibulares para essa preparao,
explica Vicente. Foi assim que boa parte
dos sistemas de ensino foi criada: a partir
dos materiais utilizados nos cursinhos.
Do ensino mdio, o UNO ampliou
sua linha e hoje atende todos os segmen-
tos, desde o maternal. Em 2005, uma no-
va demanda deu origem ao UNO Pbli-
co, sistema de ensino voltado s escolas
da rede pblica. Esse mercado est atre-
lado s prefeituras para a pr-escola e o
ensino fundamental, por conta da Lei de
Diretrizes e Bases, que estabelece esses
nveis de ensino como responsabilidade
dos municpios, afirma Vicente.
O material pensado para ser utili-
zado em todo o Brasil, mas carrega tam-
bm as particularidades que cada regio
tem. O mercado para o sistema UNO est
em expanso, e desde 2008 a equipe tra-
balha para manter uma slida estratgia
de crescimento.
Ultrapassando fronteiras
Com a presena do Grupo
Santillana na America Latina,
natural que o Sistema UNO de
Ensino ultrapasse as fronteiras
brasileiras e chegue a outros
pases. Segundo o diretor-geral
do UNO, Vicente Avanso, o
processo de internacionalizao
est em curso. Atualmente,
Mxico, Colmbia, Venezuela
e pases da Amrica Central j
trabalham com o UNO. A grande
vantagem dessa evoluo a
maior troca de experincias,
explica Vicente.

materia_uno2rev.indd 31 11/9/10 9:39 AM

 32
A equalizao das provas
Philip R. Fletcher
A equalizao das provas constitui uma parte es-
sencial de qualquer programa de avaliao que
produza cadernos alternativos da mesma prova e
que requerem que os escores de escala permane-
am equivalentes ao longo do tempo. Embora se
espere que as diferentes edies da prova meam
os mesmos construtos e sigam as mesmas espe-
ARTIGO |
cificaes tcnicas, suas propriedades estatsticas
quase sempre variam por razes imprevisveis.
Um caderno pode ser um tanto mais difcil que
outro, o que leva a escores mais baixos para os
examinados que receberam o caderno mais difcil.
Nesse caso, torna-se imprescindvel equalizar es-
ses cadernos para relacionar as unidades das me-
didas em um s unidades do outro , para que os
escores obtidos dos dois cadernos, depois da equa-
lizao, sejam ento diretamente comparveis.
Por exemplo, num programa de certificao
profissional, mltiplos cadernos da mesma prova
podem ser elaborados para que a prova seja aplicada
vrias vezes ao longo do ano. A equalizao dos ca-
dernos se torna necessria para ser equitativa com
os examinados que tomam os diferentes cadernos
da prova e para oferecer aos usurios dos seus resul-
tados escores que representam a mesma coisa, mes-
mo que os cadernos respondidos pelos examinados
contenham itens diferentes. Estabelecer escores
equivalentes em cadernos alternativos da mesma
prova conhecido como equalizao horizontal.
Da mesma forma, diferentes cadernos da mesma
prova podem ser elaborados para as diferentes s-
ries do ensino. Esses cadernos seriam intencional-
mente diferentes por causa do seu propsito. Para
compreender a trajetria dos alunos, precisam-se
determinar escores comparveis ao longo das di-
versas sries. Estabelecer escores equivalentes para
uma prova aplicada nos diferen-
Quando a equalizao tes nveis do ensino conhecido
como equalizao vertical.
for bem implementada,
Quando a equalizao for
torna-se vivel juntar bem implementada, torna-se
os resultados, mesmo vivel medir o crescimento cog-
nitivo, acompanhar a trajetria
quando vm de diferentes de aprendizagem e juntar os re-
formas da prova sultados, mesmo quando vm de
artigo_fletcher4_maiorrev.indd 32
diferentes formas da prova, em que as caractersticas
dos itens so bem diferentes. Torna-se possvel com-
parar diretamente o desempenho de duas pessoas
que tomaram diferentes cadernos da prova. Um erro
na funo da equalizao ou da converso dos esco-
res pode comprometer os resultados para o conjun-
to dos examinados. Por essa razo, mais provvel
que a credibilidade de uma organizao envolvida
na produo das provas seja mais questionada por
causa de problemas relacionados com a equalizao
do que com uma falha na lgica de um item revelada
quando a prova j est em campo.
importante diferenciar entre as trs maneiras
que as escalas de uma prova podem ser relaciona-
das. Os procedimentos que relacionam os resulta-
dos envolvem a previso, o alinhamento das esca-
las e a equalizao. As distines entre essas tc-
nicas ganham relevncia porque frequentemente
so consideradas similares ou idnticas, quando de
fato so bem diferentes. Os profissionais da rea da
avaliao precisam compreender essas diferenas,
nas circunstncias as quais um procedimento que
relaciona os resultados mais relevante do que
outro, e quando for necessrio comunicar essas
distines para os usurios das provas.
A previso a forma mais antiga de relacionar os
escores e tambm habitualmente confundida com
a equalizao. O objetivo da previso de calcular
o escore de um examinado numa prova a partir das
outras informaes disponveis para o examinado.
Essas outras informaes poderiam ser um escore
numa outra prova, escores em toda uma srie de
provas, informaes demogrficas, srie frequen-
tada e notas recebidas em vrios cursos. O fato de
que as informaes da fonte e do alvo do clculo no
sejam da mesma natureza implica uma assimetria
entre o que deve ser predito e as informaes usa-
das para fazer a predio. Essa assimetria se torna
evidente ao regressar uma dessas medidas na outra.
A regresso linear que prediz o escore Y a partir do
valor de X no ser o inverso da regresso linear que
prediz o valor de X do valor de Y. Essa assimetria im-
plica que a predio no permite satisfazer um dos
requisitos fundamentais da equalizao, em que o
objetivo o de produzir escores substituveis.
11/8/10 3:39 PM

O objetivo de alinhar as escalas de transformar
os escores de duas provas alternativas em uma escala
mtrica comum para fins de reportagem dos resulta-
dos. Muitas vezes, as medidas das provas se baseiam
em formulrios de comprimentos diferentes. Por
exemplo, um formulrio comprido aplicado no m-
bito clnico versus um formulrio curto usado como
edio de pesquisas para ser aplicada num inqurito
domiciliar. Embora os escores desses dois instrumen-
tos nunca poderiam ser considerados equivalentes,
muitas vezes podem ser calibrados na mesma escala
mtrica para produzir escores comparveis.
Os examinados nunca so indiferentes es-
colha dos cadernos que representam diferentes
nveis de fidedignidade. Por exemplo, perante op-
es de acertar 75% dos penaltis no futebol, um
jogador que normalmente acerta o gol em 55%
das vezes invariavelmente prefere o formulrio
curto baseado em quatro tentativas, enquanto que
um jogador que consistentemente acerta em 90%
dos penaltis invariavelmente opta para o formu-
lrio comprido que incorpora vinte tentativas. O
jogador menos apto tem uma oportunidade me-
lhor de se qualificar na prova curta, enquanto que
o jogador mais apto tem uma chance ligeiramente
melhor para se qualificar na prova comprida. Para
uma pessoa com proficincia abaixo do padro,
a probabilidade de vencer por pura sorte muito
mais alta com quatro do que com vinte tentativas.
artigo_fletcher4_maiorrev.indd 33
Estdio Saci
A melhor
maneira de
relacionar os
escores em duas
provas envolve
a equalizao
A melhor e mais forte maneira de relacionar os
escores em duas provas envolve a equalizao. O
objetivo da equalizao de produzir escores subs-
tituveis, como se viessem da mesma prova. Para
alcanar esse objetivo, as provas deveriam seguir
o mesmo conjunto de especificaes de contedo,
medir o mesmo construto no mesmo nvel de difi-
culdade e com a mesma preciso. Isso permite que
os escores de qualquer uma das provas sejam usa-
dos de forma substituvel para qualquer finalidade.
Esse objetivo exigente e s pode ser alcanado de-
pois de satisfazer uma srie de requisitos fortes.
Os cinco requisitos citados para obter escores
equalizados incluem:
1. construtos iguais. As duas provas devem me-
dir o mesmo construto, caracterstica laten-
te, habilidade ou proficincia.
2. fidedignidades iguais. As duas provas deve-
riam ter as mesmas fidedignidades.
3. simetria. A transformao da equalizao
que mapeia os escores da prova Y para os da
prova X deve ser o inverso da transformao
da equalizao que mapeia os escores da
prova X para os da prova Y.
4. equidade. Deve ser uma questo de indife-
rena para o examinado receber qualquer
um das provas equalizadas.
5. invarincia populacional. A transformao da
equalizao que relaciona escores das provas
11/8/10 3:40 PM
 34
ARTIGO
X e Y deve ser a mesma, seja qual for a amos-
tra de observaes usada na sua derivao.
Os primeiros dois requisitos requerem que
as provas sejam elaboradas seguindo as mesmas
especificaes tcnicas e de contedo. O terceiro
requisito exclui efetivamente o uso das tcnicas
de regresso. O quarto requisito, introduzido por
Lord (1980), de significncia terica ao explicar
porque os dois primeiros requisitos so necess-
rios. O quinto e ltimo requisito de relevncia
prtica ao explicar porque os dois primeiros re-
quisitos so necessrios. Isso justifica o uso em
grande escala dos mtodos da teoria da resposta
ao item (IRT) e a anlise do funcionamento dife-
rencial dos itens (DIF) no processo da equalizao.
Quando as provas so elaboradas seguindo especi-
ficaes de contedo diferentes, improvvel que examinados. Essa mesma situao se aproxima
a propriedade da invarincia dos parmetros de
item seja obtida, o que mostra que as provas no
podem ser equalizadas.
Uma preocupao
constante na
equalizao das provas
como controlar
as diferenas
no desempenho
dos alunos
Referncias a esses requisitos se encontram em
Angoff (1971), Lord (1980), Kolen & Brennan (2004)
e Holland & Dorans (2006). Dorans & Holland
(2000) citam explicitamente esses cinco requisitos
e admitem que alguns desses possam ser caracteri-
zados de vagos, pouco prticos ou exigentes demais.
Apesar dessas diferenas de opinio, os cinco requisi-
tos so critrios valiosos para avaliar se duas provas
podem ser ou j foram equalizadas com xito.
Uma preocupao constante na equalizao
das provas como controlar as diferenas no
desempenho dos alunos durante a equalizao.
Quando duas provas so aplicadas em dois grupos
diferentes de examinados, existem dois fatores
que complicam a interpretao dos resultados.
Um desses fatores seria a dificuldade relativa das
duas provas, que propriamente o objetivo da
artigo_fletcher4_maiorrev.indd 34
equalizao, e o outro o desempenho relativo
dos dois grupos de examinados, um fator confli-
tante que precisa ser excludo do procedimento
de equalizao. O foco de interesse de compen-
sar diferenas nas caractersticas das provas, sob
condies que nos obriga a controlar quaisquer
diferenas no desempenho dos examinados, as-
sim que fazemos o ajuste da equalizao.
Na prtica, existem basicamente duas ma-
neiras alternativas para separar a dificuldade das
provas das diferenas no desempenho dos exami-
nados. A primeira envolve o uso de uma popula-
o comum de examinados, enquanto a segunda
utiliza os itens ncora. O fato de que os mesmos
examinados tomaram ambas as provas controla
explicitamente as diferenas no desempenho dos
quando se obtm duas amostras equivalentes da
mesma populao, por exemplo, quando as duas
provas so distribudas de forma sistemtica entre
alunos nas mesmas salas de aula. Quando no for
possvel obter amostras equivalentes de uma po-
pulao comum, o desempenho dos examinados
num conjunto comum de itens ncora pode ser
usado para quantificar as diferenas no desempe-
nho das duas amostras distintas, mas no necessa-
riamente equivalentes, de examinados.
Existem vrios desenhos para a coleta de da-
dos que podem ser usados para a equalizao das
provas. Um tratamento desses desenhos seria im-
prprio numa nota introdutria breve como esta.
No entanto, o papel do desenho de coleta de dados
sempre o de controlar pelas diferenas no de-
sempenho dos examinados ao estimar a funo de
transformao que torna os escores equivalentes e
substituveis. Nesse mesmo contexto, deve-se no-
tar que a quantidade dos dados levantados impacta
a utilidade da equalizao resultante. Devido ao
desejo de tornar a incerteza estatstica associada
equalizao muito menor que os outros fatores
de variao, importante que as amostras que for-
mam a base para a equalizao sejam de porte o
suficiente para assegurar o resultado desejado.
preciso sempre manter esse fator em mente assim
que for selecionar um desenho para o levantamen-
to dos dados a serem usados na equalizao.
Philip R. Fletcher Ph.D. em Educao pela Universidade de
Stanford com mais de 20 anos de experincia em pesquisas e
avaliaes de larga escala
11/8/10 3:40 PM
 Enquanto os alunos falam presente,
a gente fala futuro

Os municpios que j contam com o Sistema UNO Pblico de Ensino contam

tambm com melhores ndices no IDEB, o ndice de Desenvolvimento
de Educao Bsica. Isso porque recebem solues sob medida para uma
educao inovadora. Material completo do ensino infantil ao pr-vestibular,
assessoria pedaggica permanente, contedo digital em um portal exclusivo,
formao continuada da equipe e avaliao educacional. Tudo para garantir
resultados comprovados e alunos bem preparados.

www.avaliaeducacional.com.br

www.unopublico.com.br

anuncio_avalia.indd 35 11/8/10 3:40 PM

Anuncio Uno Publico 210x279.indd 1 9/9/10 4:28 PM

 www.avaliaeducacional.com.br

contra_capa.indd 36 11/8/10 3:40 PM