Escolar Documentos
Profissional Documentos
Cultura Documentos
ISSN: 0101-7330
revista@cedes.unicamp.br
Centro de Estudos Educao e Sociedade
Brasil
Faculdade de Educaco da U niversidade Federal de Minas Gerais (UFMG). Belo Horizonte (MG) -
Brasil.
Faculdade de Educaco da U niversidade Federal de Minas Gerais (UFMG). Belo Horizonte (MG) -
Brasil.
Contato com os autores: <francisco-soares@ufmg.com.br>
Introduco
Unio, os estados e os municpios brasileiros esto usando, cada vez com
2007 (BRASIL, 2007), cuja primeira diretriz "estabelecer como foco a aprendiza-
gem, apontando resultados concretos a atngir".
A ideia de que o sistema educacional deve ser analisado pelos seus resultados
tem origem nas anlises educacionais realizadas com os dados coletados nos censos
demogrficos. Rigotti (2004) mostra como esto redigidas as quest6es relativas edu- a
cacao nos diferentes censos. O trabaIho de Fletcher e Ribeira (1989) mostra, usando
dados censitrios, que a repetencia era a grande caracterstica do sistema brasileiro
de educaco bsica e nao a evaso. Esses autores cunharam o termo "pedagoga da
repetncia", conceito que teve profundo impacto nas polticas para a educaco funda-
mentaL Uma dessas influencias foi a reformulaco do Censo Escolar, hoje um refinado
sistema de coleta de dados sobre cada aluno matriculado. Com os dados, obtidos nos
censos demogrfico e escolar, calculam-se indicadores de analfabetismo, de acesso e
cobertura, resultados fundamentais para a anlise de um sistema de educaco bsica.
Um indicador especialmente importante para o conhecimento de um sistema educa-
cional, mas que exige anlises especficas, o fluxo de seus alunos (KLEIN, 2006).
Com a introduco do Sistema de Avaliaco da Educaco Bsica (Saeb). ' a ideia
de que, alm dos indicadores de rendimento, uma medida de aprendizado dos alu-
nos deveria ser usada para o monitoramento do sistema foi ganhando espa\;o. Isso
culminou, em 2005, na criaco da Prava Brasil e, em 2006, na introduco do Ideb.
Uma justificativa nunca explicitada para o uso de resultados de rendimento e apren-
dizado no monitoramento de sistemas de educaco bsica que apenas dessa forma
a
o Estado fica sabendo se o direito educaco de seus cidados est sendo atendido.
Na ausencia de um sistema como esse, o direito pblico subjetivo estabelecido no
texto constitucional nao pode ser monitorado e, eventualmente, exigido.
O objetivo deste artigo explicitar as opces metodolgicas feitas na cons-
truco do Ideb, bem como os efeitos diretos e indiretos que ele induz quando a
escola decide buscar, por meio de polticas e prticas internas, a sua maximizaco.
Como qualquer indicador, o Ideb faz um recorte e uma reduco do foco de anlise
e, assim, importante identificar e discutir como esse indicador define a qualidade
e a equidade dos sistemas educacionais brasileiros. Como ser mostrado, se o Ideb,
como definido atualmente, for o nico indicador usado para guiar as polticas edu-
cacionais de educaco bsica e, no caso otimista de que suas metas sejam atingidas,
podemos ainda assim nao ter um sistema educacional que garanta o direito consti-
tucional de educaco. Essa constataco importante, principalmente, no momento
em que se discute o novo Plano Nacional de Educaco (PNE).
com um . res~nh . das princip ais crtioas qu~ o ld~b tem r<2c~bido. A abordag~m
d~st ~ .rtigo ~mpric . Os d.dos dos qu.tro cicios d ~ clrulo do l d~b s ao utilizo-
Os componentes do Ideb
O ld~b d ~ um. esml. ou d~ um . r<2d ~ d~ ~nsino dclinido como o produto
d~ um indic.dor d~ desempruho, tomado como o nv~1 mdio d . p rofi cii'm cia dos
alunos d . es col. ou sist~m., oblido n . Provo Brasil, por um indic.dor d~ rrndimenlD,
dclinido como o valor mdio das laxas d~ aprova,ao da ~ s col. ou s't~m., obtido
no Censo Esmlar. O valor do ld~b =sc~ com m<dhor<2s r<2sult.dos do , p r<2n di z. do
dos . Iu no s ~ c.i s ~ as taxas d~ aprova,aotambm oa~m Um dos motivos d . grand~
resp<dt .bilid.d~ qu ~ o ld~bobt~v~ ofoto d ~ ' gr~g a r, em um nicoindic.dor, um.
al O indicador de desempenho
O desemp=ho d~ um. escol . dclinido, paro o clrulo dold~b, como. m-
di . das proficifutcias em L ~itur. ~ Mat~mtica, oblidas p l2Ios seus alu nos n. Provo
Br.sil. Como os ~ s c . l as d as m~did.s dos du.s comp<tfutcias sao dif~ent~s, faz-s~
um . padroniza,ao d~ssas m~did os antes d~ s ~ ""Irul ar . su . m di . A m <todologi .
do l d~b . ssu m~ qu~, paro tornar mmparv~is as proficifutcias d~ L"ur. ~ Matem -
tic., basto fazer mm qu~ vari~m no mesmo int~rvalo. Para isso, utiliza o s~guint~
algoritmo'
(Prof '" ,...... ~ . ~ E.., o, o no Pro"," lIro.il- L, m''''" f ........ ~ . Pro f "' , )
I'}
(L. m". 5""..." ,r .~. P r of '" '"""' . . L""" '"'" f ...,,,,. .~. P r of ."' )
res situ ados alNs d~syios-padrao acima ~ abaixo d . proficifutci . m ~di . d~ todos os
alunos qu~ fizeram o Sa ~b d~ 1997, ano ~m qu~ ~ s c. l . foi dclinid.
Ed,c. Sac" C>.mpinu, v. H, n. 1 , ~, p. '03 _" ', juL_,". ' ' ' '
D;,p",'''] "" """'1/""""'-"'"."";''''''"'''''
p. ~ o p, .. 8
S' 1! t;" p; ~
, ..2'. " ~ ~ P, : ~
.. o ,, ~, ~ ~ "'
~ "'~ ' aa :;. ,
.. B ~' ''' .,e ~o p, I!:
~ ~ a, '{j ~, ~ .. '"
.. ~' g", P.O
n ~ ~
.." ,,' s on ! e , f
Illl ~ ~
.8 '~1J" "& o ~ ~
~ ~ &~
: 0~3 " ", ..
.. 1, j
1 1 ~
" o 3 oo' ..o ~ ""'
o '" ,, "
~~ , r , ,
~ p, ..
"'ie. ;: i"l'::
a a aa a "'
!f'E: i
P,
".; aO ' ~;
~ ~ ~ g: g
, o " ~ ~ ~I!: ;; ~
.. _. s
.." ; ~ "" ~ a p.
"' o
1! ~ ~ 1 ~ ~ ~ ~ "'
o ""' ~ ; ee o
~ ,C>- Il "
~~ ~ CL P. ~ !>!e. ~
,f
~' o~ C1!
.. , "' t
.. "' I!: ~ n
~ ~ ~U<,
_ ~ ..p. '~ "~ ~ e !
,"' "'"'
" ,C>-
~ ~ ~
o
9", "' e tS ~ e !
.. " p. n
, ", ,"' ,"'t ,"'t
~ ~ ~
..[~ '"~ 8~ ;~,i; e e
P .. ~' - ~ ; I
~~ ~~ ~ a " Z8 ..I!l ... .. ~ 8 8
" ';;'
""
", """'
; 8' ~ ~ 5.
""~'
' ~~, ~~ S"
e,
o '\1
o
a ~~ ~ .. !l-
_
:' .~ ~ .,
p. g
e ~'
,
~ e- "' ': '"
l!J ~' ~
"
~
1
"'
"' il 5' O ,,; ~~o C ; e- .~ :, ~ s ~ I ,
o ;l ~ ~ { ." . "
~,
, I!l ~~ ; g -,
,
e8~ ~ 6 " [ ~ '{l ~
!,
,"' &
.. .
,"' , ~ n ~ "
~~ 1lI' ''':t ..~ E ~ n
[' p. " 2~
t a~
.. ~ ~ ~ ~ ! u . , "'
p.; ,z ij ~ 18 "'
'"
~ p~ !o' ~, rl: ,
""'
"' 1~ ~ 1 e ~; S ~ 8, .. ~ o ~
"' ,~ f. ~
" ~ ~ Sg. 8 P'~' '' 1l
~~ ~ g g'
, ;' ., ... ~ ~ ~e ~
" r-t-l ~,"
0 1! ~:t O;~ n ll
" , ;;- " ~ ~ t ~
a
; ~ ~ ~ =! ~ n ~ :- ..
~ 3
,, o r
..u
~
a s'"
~ ~ ~, ~ i 1o a '"e ~ '".. , ; ;f ~ ~'
~ ~ o "'
; ; a ~ 1!l
,"'e
p, ~ ~ !" l:" 8
.. ,, ~~ r
~; s e
, , ?. '.o 8 e f "'!,
"
if ~~ <~ <r "
~1!: ~ CL
3'"1:_g e "' ""' ""' .J'I ; "'~
i5 ~' o :t
o, ~ ~, .. l:l
~ ~ ~ :g p.
o ", ~ a .. ;' !~' ~ ~
,i
"', CL
~
"
S~ o~ .. "' e,~ o " ~ ~ ~
f "
~ G" _ l .~ "~ :;< p. .. -, B ~ ~ I"
o o ~ ~ ,.. -. , .
~ ~ ~ ~, ~ p. .. ., o ; f ~
. s e ~ ~s
~~ o
~
"' "'
9 '"" ..l<. a l'3 e.
"o ~"
1...." ':"5 8:0- 11&, .,.'1 ~ ,~~ '1 "" > "' "'
,
"
"
" "' "'
Pressupostos educacionais e estatsticos do Ideb
em urna situaco muito improvvel: aquela em que todos os seus alunos tiveram, em
Leitura e em Matemtica na Prova Brasil, proficincias iguais aos limites superiores
apresentados na Tabela 1. Analogamente, urna escola tem proficinca padronizada
igual a O apenas se todos os seus alunos tiverem a mesma proficincia. desde que
esta seja igual ao limite inferior da Tabela 1.
Usando-se os d ad os da Prova Brasil de 2011, as proficincias padronizadas
das eseolas de quinto ano variam de acordo com o histograma do Grfico 1. Como
previsto, essas proficincias cobrem apenas urna parte do intervalo [O, 10].
Grfico 1
Histograma das proficincias padronizadas do quinto ano de 2011
1.500
1.600
soo
,00 1,00 2,00 3,00 -1,00 5,00 6,00 7,00 8,00 9,00 10,00
quatro sao ruins. Aqui os valores acima de oito nao ocorrem e, entre valores abaixo
de quatro, h valores possveis e outros quase impossveis.
Urna consequncia menos conhecida e mais intrigante do processo de padre-
nzaco utilizado na construco do Ideb que as proficincias padronizadas em Ma-
temtica das escolas sao, frequentemente - em 2011 foram 94,8% -, muito maiores
do que as proficiencias padronizadas em Leitura. Isso fruto do conhecido fato de
que, na Prova Brasil, as proficiencias em Matemtica sao expressas por nmeros
maiores do que aqueles usados para Leitura. O algoritm.o de padronizaco, princi-
palmente no nono ano (antiga oitava srie), nao leva esse fato em consideraco, pois
prescreve valores iguais, como se pode observar na Tabela 1.
Assim, as proficiencias padronizadas de Matemtica sao, em geral, maiores
que as de Leitura. Como consequncia, a proficincia mdia, usada na construco
do Ideb, mais influenciada pela proficincia em Matemtica. Em outras palavras,
o indicador de aprendizado do Ideb assume, equivocadamente, que os alunos brasi-
le iros de ensino fundamental sabem mais Matemtica do que Leitura. Esse diagns-
tico nao um retrato fiel da realidade educacional, quando esta considerada sob o
prisma da interpretaco pedaggica dos testes da Prava Brasil ou dos resultados de
outras avaliaces.
b) O indicador de rendimento
Tabela 2
Algoritmo de clculo do indicador de rendimento de runa escola
Ano escolar
1 2 3 4 5
Taxa de aprovaco (%) 82,4 79,1 78,4 97,1 88,4
Clculo do Ideb
Tabela 3
Diferentes combinaces dos indicadores de rendimento e proficincia padronizada
que produzem o mesmo Ideb de 6
Rendimento 0,7 0,76 0,78 0,8 0,86 0,88 0,9 0,92 0,96
Desempenho 8,57 7,89 7,69 7,5 6,98 6,82 6,67 6,52 6,25
Interpretaco normativa
Em muitos textos sobre o Ideb, principalmente os publicados na grande m-
dia, recorrente a ideia de que se trata de um indicador de fcil compreenso. j que
usa valores entre Oe 10. Com isso, assume-se que vale para o Ideb o bom senso acu-
mulado nas avaliaces escolares, em que notas acima de 9 sao excelentes e abaixo de
5 sao muito ruins. Entretanto, como visto na seco sobre O indicador de desempenho, o
valor do Ideb est concentrado em urna parte menor do intervalo de Oa 10.
Na realidade, a escala do Ideb tem caractersticas difceis de serem apreciadas,
em um primeiro momento, por um nao especialista. Por exemplo, um Ideb de 4,5
um valor mdio, nao baixo, e est longe e nao perto do valor 6. Isso consequncia
do fato de que os valores extremos da escala, acima de 6 e abaixo de 3, sao raros e
valores acima de 8 e abaixo de 2 sao quase impossveis.
Faixas do Ideb
TabeIa 4
Niveis de desempenho para Leitura e Matemtica
Leitura Matemtica
Nvel
4 Srie EF I 8 Srie EF 4 Srie EF I 8 Srie EF
Abaixo do bsico <150 <200 <175 <225
Bsico Entre 150 e 200 Entre 200 e 275 Entre 175 e 225 Entre 225 e 300
Adequado Entre 200 e 250 Entre 275 e 325 Entre 225 e 275 Entre 300 e 350
Avancado Acima de 250 Acima de 325 Acima de 275 Acima de 350
Ponte: Soares (2009).
Tabela 5
Faixas para o Ideb
Baixo <3,5
**A primeira faixa foi definida a partir do intervalo inferior calculado para a segunda faixa.
Tabela 6
Evoluco do Ideb para escolas que oferecem quarta srie (quinto ano), por percentual em cada
runa de cinco faixas de valores
Tabela 7
Proporco de alunos nos niveis de desempenho e Ideb das escolas
(quinto ano) - Prava Brasil (2011)
DESEMPENHO
Ideb
Insuficiente Bsico Adequado Avan~ado TOTAL
Baixo 58,6 34,1 6,6 0,7 100
Apenas valores do ldeb acima de 6,5 (Alto) nao sao compatveis com muilos
alunos de desempenho medocre.
o Ideb tem sido muito usado e as vezes criticado, mas poucas vezes analisa-
do. Esta seco pretende suprir em parte tallacuna.
muito mais altos no Ideb. Como se viu, esses valores muito altos s ocorrem em
situaces raras. Um Ideb em torno de 7 - um excelente resultado - , por outro lado,
urna nota escolar mediana.
Urna grande e slida literatura mostra que o desempenho dos alunos est
muito associado ao seu nvel socioeconmico. Assim, nao surpreende o fato de que
a assocaco entre o Ideb e o NSE das escolas seja alta. O Grfico 2, construdo com
o Ideb das escolas pblicas do municpio de Sao Paulo que oferecem a primeira
etapa do ensino fundamental, aponta uma associaco de 0,694 entre o ldeb de 2011
e o respectivo NSE das escolas. Ou seja, isoladamente, o Ideb tambm um indi-
cador das condices socioeconmicas das escolas.
bons resultados apenas porque atendem a alunos que trazem muito do capital
cultural de suas famlias. Um esforco nesse sentido foi feito recentemente por
Soares e Alves (2013).
Grfico 2
Correlaco entre o Ideb e o NSE das escolas pblicas de Sao Paulo (SP)
8,00
o o
o
7,00 o
4,00
o o
o
3,00
g) AIgumas limitaciies
que revela se o aluno est ou nao assimilando informaces fornecidas pelo siste-
ma educacional, mas nao considera aspectos que tm impacto sobre a qualidade,
como a valorizaco dos profissionais e a infraestrutura" (AVANCINI, 2008). Em-
bora muito veiculada, nao se trata exatamente de urna crtica ao indicador, mas a
seu uso isolado. A sensata advertencia do autor indica que a avaliaco de escolas
e redes de ensino nao deve se restringir ao Ideb, e que o indicador de resultados
deve ser contextualizado por indicadores que descrevam as condices reais de
oferta do ensino.
[oo Batista de Oliveira, na mesma reportagem (AVANCINI, op. ct.), diz: "Ao
agregar coisas diferentes, o Ideb d algumas indicaces sobre qualidade, mas ele nao
sinaliza claramente o que precisa ser melhorado". De fato, como qualquer indica-
dor-sntese, um Ideb baixo apenas diz que h algo ruim acontecendo, mas nada diz
sobre o que fazer. Anloga a essa crtica, aparece com frequncia outra, apontando
que faltam esclarecimentos sobre o que significam os nmeros. Ou seja, qual tipo
de intervenco escolar um dado valor do Ideb sugere. Alm disso, como as polticas
pblicas para conter o abandono e a repetncia nao sao necessariamente as mesmas
a serem usadas para aumentar o indicador de desempenho, nao claro como passar
do diagnstico para a proposco de polticas. Essas sao reflexes slidas que preci-
sam merecer mais espa\;o nos esforcos de anlise do Ideb.
Outras crticas
o Ideb tem, no entanto, recebido crticas que um debate educacional mais
plural e substantivo j poderia ter respondido. UItrapassa o objetivo deste artigo
nomear e refletir sobre cada urna delas. Citam-se algumas consideradas tpicas na
literatura.
A primeira crtica, por exemplo, formulada por Vieira (2010, p. 3), considera
"a Prova Brasil como um dispositivo de controle que atuanos poros das prticas cur-
riculares cotidianas dos/as docentes, agindo de forma a limitar cada vez mais as suas
a
alternativas em relaco sua autonoma". Esse tipo de pensamento conflita com os
termos do artigo 210 da Constituico Federal, que estabelece: "Sero fixados conte-
dos mnimos para o ensino fundamental, de maneira a assegurar formaco bsica
comum" (BRASIL, 1988). Ou seja, a discusso que precisa ser feita se a Prava Brasil
urna forma adequada de verificar se os conhecimentos que asseguram a formaco
bsica comum esto de fato sendo aprendidos pelos alunos das escolas brasileiras
de educaco bsica. Nesse sentido, o uso na Prova Brasil apenas de testes de Leitura
e Matemtica urna clara limitaco.
Outra crtica centra-se na questo federativa. Atravs do Ideb, o governo fe-
deral evidencia as fortalezas e limitaces das escolas dos sistemas de ensino esta-
duais e municipais. Essa interferencia direta nos sistemas pode ter consequncias
indesejveis, na viso de Vera Maria Vidal Peroni: "Esse processo de centralizaco
pode impactar na gestao democrtica que havia sido construida em alguns estados
e muncpos".' No en tanto, nao fica claro se a ausencia do indicador contribuiria de
forma positiva para a soluco da questo colocada.
Discusso
O ldeb deve ser divulgado de forma contextualizada, que contenha pelo me-
nos urna descrico do nvel socioeconmico das escolas ou dos municipios. Ideal-
mente, outras caractersticas das escolas, como sua infraestrutura, devem tambm
ser consideradas. Isso nao advoga que as expectativas relativas ao aprendizado
dos alunos devem ser diferentes em diferentes muncpos, mas apenas que, para
atingir os aprendizados necessrios, alguns cenrios sociais sao mais adversos do
que outros.
Alm disso, junto com o Ideb, cada escola ou rede de ve receber tambm
urna descrico de quantos alunos esto em nveis de desempenho mediocres.
Claro que es colas e redes com Ideb maiores do que 6,5 esto em urna situaco
privilegiada, pois esse valor nao permite que muitos estudantes tenham apren-
dido muito pouco.
Notas
1. o Sistema de Avalaco da Educaco Bsica (Saeb) foi criado no incio da dcada de 1990, ten-
do como objetivo medir o desempenho acadmico dos alunos da educaco bsica e os fato res
associados a esse desempenho e que nele interferem (fatores intra e extraescolares). O sistema
composto por duas avaltaces: 1) Avaliaco Nacional da Educaco Bsica (Aneb) - divulgada
com o nome de Saeb, aplicada a urna amostra de estudantes das redes pblicas e privadas do
pas, localizados na rea rural e urbana e matriculados no SQe 9 anos do ensino fundamental
e tambm no 3 ano do ensino mdio; 2) Avaliaco Nacional do Rendimento Escolar (Anresc) -
divulgada e conhecida com o nome de Prova Brasil-, aplicada censitariamente a alunos de S e
9 Q anos do ensino fundamental pblico, nas redes estaduais, municipais e federais, de rea rural
e urbana, em escolas que tenham no mnimo vinte alu nos matriculados na srie avaliada. Outras
tnformaces e resultados do Saeb podem ser encontrados em: <http://portal.inep.gov.br/web/
prova-brasil-e-saeb/prova-brasil-e-saeb>
2. Criado em setembro de2006, o "Todos Pela Educaco" um movimento financiado exclusivamen-
te pela iniciativa privada, congregando sociedade civil organizada, educadores e gestores pblicos,
que tm como objetivo contribuir para que o Brasil garanta a todas as enancas e jovens o direito
a educaco bsica de qualidade. O movimento trabal ha para que sejam garantidas as condtces
de acesso, alfabetzaco e sucesso escolar, alm de lutar pela ampltaco e boa gesteo dos recursos
pblicos investidos na educaco. Esses grandes objetivos foram traduzidos em cinco metas, com
prazo de cumprimento at 2022, ano do bicentenrio da Independencia do Brasil.
3. "The more any quantitative social indicator used for social decston-makng. the more subject it
will be to corruption pressures and the more apt it will be to distort and corrupt the social processes
it is intended to monitor".
4. Reportagem do Portal Aprendiz, "Avaltaces devem oferecer diagnstico do sistema educacional",
de 7 de outubro de 2009. Disponvel em: <http://aprendiz.uol.com.br/content/shiricumug.mmp>.
Referencias
ALVES, M.T.G.; SOARES, j.F.; XAVIER, F.F. O nve1 socoeconmco das escolas de edu-
cac;iio bsica braeileiras: verso 2. Belo Horizonte: GAME; Sao Paulo: Instituto Uni-
banco, 2013. 64p. (Relatrio tmico).
CAMPBELL, D.T. Assessing the impact of planned social change. New Hampshire:
The PublicAffairs Center, Dartmouth CoIlege, 1976. Disponvel em: <https://www.
globalhivmeinfo.orWCapacityBuildinWOccasional%20Papers/08%20Assessing%20
the%20Impact''10200f%20Planned%20Social%20Change.pdf>. Acesso em: 29 abr. 2013.
FLETCHER, P.R.; RIBEIRO, S.e. Modeling education system perjrmance with demo-
graphic data: an introduction to the Profluxo ModeI. Paris: Unesco, 1989.
KLEIN, R. Como est a educaco no Brasil? O que fazer? Ensaio: Avalacao e Polticas
Pblicas em Educaco, Rio de [aneiro, v. 14, n. 51, p. 139-172, jun. 2006.
PETERSEN, n.s., KOLEN, M.j.; HOOVER, H.O. Scaling norming and equating. In:
LINN, R.L. (Ed.). Educational measurement. 3. ed. New York: American Council on
Education; MacmilIan, 1989. p. 221-262.
SOARES, j.F.; ALVES, M.T.G. Ejeiio e eficincia de escolas e sistemas de ensino fundamen -
tal. Belo Horizonte, 2013. (Nao publicado).
VIEIRA, I.S. Prova Brasil como dispositivo de controle da prtica curricular. In:
COLQUIO INTERNACIONAL EOUCAc;:O E CONTEMPORANEIDAOE, 4., 2010,
Laranjeiras, SE, 2010. Oisponvel em: <http://www.educonufs.com.br/IVcoloquio/
cdcoloquio/eixo_02/e2-92.pdf>. Acesso em: 1 maio 2013.