Avaliaes Externas no Brasil: uma anlise entre ENEM, SIMAVE e vestibulares

Avaliaes Externas no Brasil: uma anlise entre ENEM, SIMAVE e vestibulares

Carlos Renato Soares Brasil Universidade Federal de Juiz de Fora UFJF crsoarys@oi.com.br Maria Cristina Arajo de Oliveira Brasil Universidade Federal de Juiz de Fora mcrisoliveira6@gmail.com Resumo O presente texto analisa, relativamente Matemtica, trs tipos de avaliaes externas aplicadas a estudantes da terceira srie do ensino mdio em Minas Gerais: o Exame Nacional do Ensino Mdio ENEM, o Sistema Mineiro de Avaliao da Educao Pblica/Programa de Avaliao da Rede Pblica de Educao Bsica SIMAVE/Proeb e o vestibular da Universidade Federal de Lavras UFLA. O estudo situado no mbito da Histria da educao matemtica se utiliza de aportes tericometodolgicos da Histria Cultural. Nessa perspectiva, considerando como fontes as avaliaes, suas matrizes de referncias e o programa do vestibular discute-se o papel e as interferncias que essas avaliaes exercem na disciplina Matemtica. A investigao aponta para um possvel empobrecimento do currculo, na medida em que o professor se v pressionado a organizar seu trabalho didtico tendo em vista um bom desempenho sobretudo no SIMAVE. Palavras chave: histria da educao matemtica, avaliao externa em Matemtica, ENEM, SIMAVE/Proeb, vestibular. Introduo Esse artigo discute o papel e as provveis interferncias de trs avaliaes externas Exame Nacional do Ensino Mdio (ENEM), Sistema Mineiro de Avaliao da Educao Pblica/Programa de Avaliao da Rede Pblica de Educao Bsica (SIMAVE/Proeb) e vestibular da Universidade Federal de Lavras (UFLA) - na disciplina Matemtica da 3a srie do Ensino Mdio em Lavras - MG. O estudo integra uma pesquisa de mestrado profissional em Educao Matemtica desenvolvida na Universidade Federal de Juiz de Fora. Mais especificamente, analisamos provas, matrizes de referncia para a elaborao das mesmas e programas do vestibular da UFLA, considerando o papel de cada uma dessas avaliaes na formao e na vida dos estudantes da 3a srie do ensino mdio.

XIII CIAEM I ACME, Recife, Brasil, 2011.

Avaliaes Externas no Brasil: uma anlise entre ENEM, SIMAVE e vestibulares

A Teoria e os Mtodos Nesse Estudo A investigao situa-se no mbito da Histria da Educao Matemtica e foi desenvolvida na perspectiva da Histria Cultural. O trabalho de Andr Chervel (1990), Histria das Disciplinas Escolares: reflexes sobre um campo de pesquisa, aborda historicamente a noo de disciplina escolar. Sua tese que a escola cria a disciplina de acordo com seu contexto cultural, econmico e social. O autor suscita a relao entre o uso do termo disciplina e o emprego da avaliao como forma de controle do processo. Uma disciplina, igualmente, para ns, em qualquer campo que se encontre, um modo de disciplinar o esprito, quer dizer de lhe dar os mtodos e as regras para abordar os diferentes domnios do pensamento, do conhecimento e da arte (Chervel,1990,p.178). importante ressaltar que a histria das disciplinas escolares expe plena luz a liberdade de manobra que tem a escola na escolha de sua pedagogia (Chervel,1990,p.193). Assim, a avaliao externa escola, pode passar a regular o que a escola ensina e tambm pode ditar qual o currculo a ser seguido a fim de obter os ndices esperados. Para analisar o contexto da escola nos baseamos em Julia, que define cultura escolar como:
um conjunto de normas que permitem a transmisso desses conhecimentos e a incorporao desses comportamentos; normas e prticas coordenadas a finalidades que podem variar segundo as pocas (finalidades religiosas, sociopolticas ou simplesmente de socializao). Normas e prticas no podem ser analisadas sem se levar em conta o corpo profissional dos agentes que so chamados a obedecer a essas ordens e, portanto, utilizar dispositivos pedaggicos encarregados de facilitar sua aplicao, a saber, os professores primrios e os demais professores. (p.10-11)

O autor ao definir a cultura escolar, afirma que no se pode analis-la sem levar em conta suas relaes com outras culturas. Alm das relaes entre culturas religiosas, polticas e sociais, destacamos a cultura avaliativa1 que a escola impe aos alunos ao longo de sua histria influenciadas por outras culturas, conforme cita Julia. Mudanas ocorreram no formato de aplicao das avaliaes: orais, escritas, com consulta, tradicionais, operatrias, dentre outras, mas seu carter impositivo e muitas vezes ameaador permaneceu tornando-a como um fator de seleo e classificao social. As avaliaes externas trazem em si finalidades impostas escola e podem significar a insero de novas normas e novas prticas em sua cultura, como proposto por Julia. Quanto ao trabalho do historiador da educao matemtica Valente (2005) nos provoca como devemos proceder para o estabelecimento de fatos? Qual mtodo seguir?(Valente, 2005,
1 Destacamos que cultura avaliativa se refere forma pela qual a escola ao longo de sua histria avalia seus alunos, no paradigma positivista com a inteno de produzir estatsticas e selecionar alunos quantitativamente. A avaliao pode reafirmar ou coibir interesses, produzir sentidos, valores e at mesmo comportamentos. Uma cultura avaliativa pode provocar mudanas ou transformaes em uma realidade.

XIII CIAEM I ACME, Recife, Brasil, 2011.

Avaliaes Externas no Brasil: uma anlise entre ENEM, SIMAVE e vestibulares

p.3) e responde:
O ofcio do historiador no parte dos fatos como um dado 'a priori'. Assim, cabe perguntar o que precede o estabelecimento dos fatos? Como resposta, na sua quarta aula, Antonie Prost responde que so as questes do historiador, suas hipteses iniciais. Assim, no haver fatos sem questes prvias para o seu estabelecimento. Em sntese, no existem fatos histricos sem questes postas pelo historiador. (p.4)

Ainda nesse sentido buscamos, em Le Goff (1990), orientao para o trabalho com as fontes de pesquisa:
o que sobrevive no o conjunto daquilo que existiu no passado, mas uma escolha efetuada quer por foras que operam no desenvolvimento temporal do mundo e da humanidade, quer pelos que se dedicam cincia do passado e do tempo que passa, os historiadores (p.535).

Questionando sobre a fabricao do historiador e sobre a quem serve, Certeau (1982) discorre o que esta profisso e afirma que:
Certamente no existem consideraes, por mais gerais que sejam, nem leituras, tanto quanto se possa estend-las, capazes de suprimir a particularidade do lugar de onde falo e do domnio em que realizo uma investigao. Esta marca indelvel. No discurso onde enceno as questes globais, ela ter a forma do, idiotismo: meu pato representa minha relao com um lugar (p.65).

O lugar para este autor que determinar a anlise historiogrfica e este lugar se manifesta em lugares sociais, econmicos, culturais, etc.. (CERTEAU, 1982, p.65). A anlise, segundo ele, se realizar encarando a histria como uma operao que, mesmo de maneira limitada, traria a compreenso da relao existente entre um lugar, que em nossa pesquisa o do professor crtico ao modo de operacionalizao destas avaliaes; um procedimento, as anlises das avaliaes externas de Matemtica aplicadas aos estudantes da 3a srie do Ensino Mdio e de suas matrizes de referncias, alm dos programas do vestibular da UFLA; e a construo de um texto, que configura a materializao da pesquisa na qual analisamos comparativamente essas avaliaes. Assim, para nossas consideraes acerca das questes de pesquisa, consideraremos os conceitos de estratgias e tticas desenvolvidos por Certeau. Para este autor, as relaes sociais so constitudas por prticas cotidianas de modo que cada sujeito, de acordo com seu lugar, com sua trajetria pessoal, produzindo maneiras de fazer prprias. E este processo entendido por meio de conceitos distintos, que devem ser analisados conjuntamente: estratgias e tticas, sendo que as tticas podem ser encaradas como uma srie de procedimentos que constantemente utilizam as referncias de um lugar prprio, um espao que controlado por um conjunto de operaes, estratgias, fundadas sobre o desejo e sobre um conjunto desnivelado de relaes de poder (JOSGRILBERRG,2005, p. 23).

XIII CIAEM I ACME, Recife, Brasil, 2011.

Avaliaes Externas no Brasil: uma anlise entre ENEM, SIMAVE e vestibulares

Avaliaes Externas As avaliaes externas no Brasil foram implementadas ao longo da dcada de 1990, com exceo do vestibular que j tradicional como instrumento de seleo de novos estudantes para ingresso no Ensino Superior, e gradativamente aplicadas a toda rede educacional pblica. A dcada de 1990 foi um perodo de muitas mudanas na poltica brasileira, imergindo o pas no quadro do mercado globalizado comandado pelo capital financeiro (Saviani, 2007). Essas mudanas polticas levam a uma nova postura governamental com relao educao e entra em vigor a nova Lei de Diretrizes e Bases da Educao Nacional, Lei no 9394/96 (LDB), que legitima a implantao de sistemas de avaliao em larga escala. O Sistema Nacional de Avaliao da Educao Bsica (SAEB) ento oficializado, pois j vinha sendo aplicado desde o ano de 1988 com outra denominao, Sistema de Avaliao do Ensino Pblico (SAEP), colocando como responsabilidade da Unio a avaliao do rendimento escolar em nvel nacional. As avaliaes externas so enfatizadas na LDB, por recomendao de instituies internacionais como o Banco Mundial (BM) e o Fundo Monetrio Internacional (FMI), como uma das maneiras de verificar se o currculo oficial est sendo cumprido. Assim, em vrios estados tambm se criam sistemas de avaliao externa com objetivos semelhantes e todos estes sistemas ou programas de avaliao externa afirmam categoricamente que no tem a inteno de avaliar o trabalho docente, mas sim a realidade educacional de seu estado e/ou municpio. Em Minas Gerais, o SIMAVE foi institudo pela Resoluo N o 14 de abril de 2000, pelo ento governador de Minas - Itamar Franco, que ao mesmo tempo criou o Proeb, fundamenta-se em aes que tem como princpios gerais: descentralizao, participao, centralidade da escola, gesto consorciada, formao de professores, equidade, publicidade e independncia (Minas,2001,p.19), iniciando assim um processo de construo de uma nova cultura avaliativa, que segundo o documento, est orientada por valores que trazem justia, igualdade e solidariedade. Estes princpios foram balizados pelo documento Escola Sagarana: educao para a vida com dignidade e esperana2 que sugeria o rompimento da escola com a imposio histrica das elites, decidindo seu caminho de forma a garantir o acesso e permanncia da criana na escola, com um ensino de qualidade, profetizando que a educao verdadeiramente comprometida com a cidadania responder aos desafios contemporneos, atuando nas mais diversas reas, tais como sade, trabalho, ao comunitria, segurana, consumo, meio ambiente, corporalidade, segurana alimentar, sexualidade entre outras. (Minas, 2001, p. 3). O ENEM, criado em 1998, um exame individual, com participantes voluntrios, 2 Documento referncia do governo de Minas Gerais, que norteou as discusses de encontros regionais, em forma de
fruns, como parte do debate para discutir o Plano Decenal de Educao.

XIII CIAEM I ACME, Recife, Brasil, 2011.

Avaliaes Externas no Brasil: uma anlise entre ENEM, SIMAVE e vestibulares

oferecido anualmente aos estudantes que esto concluindo o Ensino Mdio ou que j concluram em anos anteriores. De acordo com o stio do Instituto Nacional de Pesquisas Educacionais Ansio Teixeira (INEP), seu objetivo principal possibilitar uma referncia para auto-avaliao, a partir das competncias e habilidades que estruturam o exame. A partir de 2009, o ENEM passou a ser utilizado nos processos seletivos de universidade pblicas federais, objetivando democratizar as oportunidades de acesso, alm de induzir a reestruturao dos currculos do Ensino Mdio. Por fim, a nota obtida no ENEM pode significar tanto uma bolsa integral ou parcial do ProUni3 quanto a conquista de uma vaga em algumas das mais prestigiadas instituies de ensino superior do Pais (INEP, 20104). Mesmo com esta reestruturao, mantem-se suas caractersticas principais com a novidade de ser um exame que confere a certificao de concluso do Ensino Mdio. J o vestibular, tambm chamado processo de seleo, exame de seleo dentre outras denominaes, se configura como uma avaliao externa para o ingresso de novos estudantes nas universidades. Geralmente esses processos so compostos por uma ou mais provas de aferio de conhecimentos sendo, at o momento, o principal meio de acesso ao ensino superior. As Questes de Investigao Diante da possibilidade que estas avaliaes externas abrem aos estudantes e tambm das influncias que certamente exercem naquilo que ensinado na sala de aula, formulamos as seguintes questes para a investigao: Que interferncias as avaliaes do ENEM, do SIMAVE/Proeb e do vestibular podem ocasionar na disciplina Matemtica? Como as avaliaes externas do ENEM, SIMAVE/Proeb e do vestibular se organizam e qual o papel que exercem na cultura escolar de um aluno de terceiro ano do ensino mdio? As Provas e as Comparaes Matrizes de Referncia Para a realizao de avaliaes externas em larga escala so elaboradas Matrizes de Referncia, que descrevem o que se pretende avaliar com os itens contidos nas provas realizadas pelos alunos. Esses itens so as questes apresentadas e para serem elaborados necessitam de algo que descreva de forma clara e objetiva o que se pretende avaliar. O Boletim Pedaggico do SIMAVE alerta para a suposta diferena de objetivos da matriz de referncia frente s diretrizes curriculares. Numa tentativa de evitar o uso da matriz de referncia como parmetro para a construo do currculo, pode-se encontrar no documento trechos como:
3 O ProUni Programa Universidade para Todos do governo federal, tem como finalidade a concesso de bolsas de estudo integrais ou parciais a estudantes de cursos de graduao e sequenciais de formao especfica, em instituies privadas de ensino superior credenciadas.

4 Disponvel em www.inep.gov.br, acesso em 10/10/2010.

XIII CIAEM I ACME, Recife, Brasil, 2011.

Avaliaes Externas no Brasil: uma anlise entre ENEM, SIMAVE e vestibulares

Uma Matriz de Referncia de avaliao no pode ser concebida como o conjunto de indicaes norteadoras de estratgias de ensino nas escolas, sendo este o papel reservado aos parmetros, currculos e diretrizes curriculares. Uma Matriz de Referncia para uma avaliao em larga escala apenas uma amostra representativa da Matriz Curricular do sistema de Ensino utilizada como fonte para os testes que iro avali-lo. A Matriz Curricular ampla e espelha as diretrizes de ensino cujo desenvolvimento deve ser obrigatrio para todos os alunos. (Boletim Pedaggico SIMAVE/Proeb-2007, 2007, p.13) As matrizes das vrias avaliaes externas que a escola passa ao longo do ano letivo se balizam pelos PCN's, com algumas diferenas na descrio das habilidades e das competncias. A conceituao de competncia e habilidades assumida pelo INEP pode ser entendida por: competncias so as modalidades estruturais da inteligncia, ou melhor, aes e operaes que utilizamos para estabelecer relaes com e entre objetos, situaes, fenmenos e pessoas que desejamos conhecer. As habilidades decorrem das competncias adquiridas e referem-se ao plano imediato do saber fazer. Atravs das aes e operaes, as habilidades aperfeioam-se e articulam-se, possibilitando nova reorganizao das competncias. (INEP, 1999, p.9)

Os documentos de Minas Gerais, tais como o Guia do Especialista e a Matriz de Referncia para a Avaliao do SIMAVE apresentam competncia a partir da definio de Perrenoud (1999), como a faculdade de mobilizar um determinado conjunto de recursos cognitivos tais como os saberes, as habilidades e as informaes, para solucionar com pertinncia e eficcia uma srie de situaes (Guia da Matriz de Referncia/SIMAVE,2009, p. 13). Nas palavras do prprio Perrenoud (1999), so mltiplos os significados de competncia. Eu a definirei aqui como sendo uma capacidade de agir eficazmente em um determinado tipo de situao, apoiada em conhecimentos, mas sem limitar-se a eles (p.7). Cada uma das competncias que orientam o ENEM e o SIMAVE/Proeb representa um elemento desse conjunto de aes e operaes mentais que atua na construo de conhecimentos. As matrizes de referncia se diferenciam na quantidade de competncias e na descrio das habilidades a serem avaliadas. A Matriz de Referncia que orienta os testes de Matemtica do SIMAVE estruturada por um conjunto de habilidades consideradas fundamentais e possveis de serem mensuradas em um teste de mltipla escolha. Os documentos oficiais, dentre eles as Diretrizes Curriculares Nacionais para o ensino fundamental e mdio, os PCN's dos diferentes nveis de ensino, e em particular os que regem o SIMAVE trazem a necessidade de centrar o ensino e a aprendizagem no desenvolvimento de competncias e habilidades por parte do aluno, em detrimento da centralizao conceitual e conteudista. A Matriz do SIMAVE/Proeb composta por um conjunto limitado de habilidades e competncias definidas em seus descritores, agrupados em Tpicos para o teste de Lngua Portuguesa e em Temas para a avaliao de Matemtica. XIII CIAEM I ACME, Recife, Brasil, 2011.

Avaliaes Externas no Brasil: uma anlise entre ENEM, SIMAVE e vestibulares

No caso da Matemtica esta matriz foi construda respeitando os temas propostos pelo PCN's: Espao e Forma, Grandezas e Medidas, Nmeros e operaes lgebra e Funes e Tratamento da Informao. Neste documento a noo de competncia privilegiada, sendo tomada como princpio de organizao curricular, engendrando habilidades que os alunos devem dispor e demonstrar nas avaliaes, mas so enfatizadas as competncias observveis. A Matriz de Referncia para a avaliao sistmica promovida pela Secretaria de Estado da Educao de Minas Gerais balizada naquelas feitas para outras avaliaes sistmicas, como o caso do Saeb, Prova Brasil, ENEM e o PISA.
As Matrizes de Referncia do Saeb so resultados dos estudos dos Parmetros Curriculares, Diretrizes Curriculares e livros didticos e da reflexo realizada por professores, pesquisadores e especialistas que buscam um consenso a respeito das habilidades consideradas essenciais em cada etapa do Ensino Fundamental e Mdio. (Guia de Elaborao dos itens, 2009, p. 14)

As Matrizes de Referncia so compostas por um conjunto de descritores, que contemplam dois pontos bsicos do que se pretende avaliar: o contedo programtico e o nvel de operao mental necessrio para a habilidade avaliada. Tais descritores so selecionados para compor a matriz, considerando-se aquilo que pode ser avaliado por meio de itens de mltipla escolha. O descritor o detalhamento de uma habilidade cognitiva, e este considera o grau de complexidade do item, que est sempre associado a um contedo que o estudante deve dominar na etapa de ensino em anlise. Esses descritores so expressos da forma mais detalhada possvel, para a mensurao por meio de aspectos que podem ser observados. A seguir apresentamos um exemplo de descritor: D-14 resolver situaes-problema envolvendo o clculo de porcentagens (Guia da Matriz de Referncia/SIMAVE, 2009, p. 65) J para o ENEM, foi estabelecida uma matriz com competncias e habilidades gerais, no esmiuando os contedos como nas demais, mesmo com a modificao de sua estrutura para o ano de 2009. Se constitua de uma prova com sessenta e trs itens interdisciplinares buscando:
verificar como o conhecimento assim construdo pode ser efetivado pelo participante por meio da demonstrao de sua autonomia de julgamento e de ao, de atitudes, valores e procedimentos diante de situaes-problema que se aproximem o mximo possvel das condies reais do convvio social e de trabalho individual e coletivo. (ENEM Relatrio Pedaggico-2007, 2008, p. 43)

Assim, suas questes/itens no se distinguiam em disciplinas conforme aquelas ministradas ao longo da vida escolar do participante. A partir de sua reformulao em 2009, passou a estruturar-se por 4 (quatro) provas objetivas, com 45 (quarenta e cinco) itens/questes de mltipla escolha cada uma e uma redao. Essas provas avaliam as seguintes reas do conhecimento: Linguagens, Cdigos e suas Tecnologias e Redao, que contempla os contedos de Lngua portuguesa, Lngua Estrangeira (Ingls e Espanhol), Artes e Educao Fsica; Matemtica e suas Tecnologias, que avalia Matemtica; Cincias Humanas e suas Tecnologias, abrangendo Histria, Geografia, Filosofia e Sociologia; e Cincias da Natureza e suas XIII CIAEM I ACME, Recife, Brasil, 2011.

Avaliaes Externas no Brasil: uma anlise entre ENEM, SIMAVE e vestibulares

Tecnologias, cobrando os contedos de Qumica, Fsica e Biologia. A Matriz de Referncia do novo ENEM, no apresenta descritores detalhados como a do SIMAVE, mas foi organizada de forma que se tenha maior possibilidade de elaborao de itens interdisciplinares, no fechando o item/questo em um nico contedo ou algoritmo de resoluo. Para exemplificar apresentamos a Competncia da rea 4 de Matemtica Construir noes de variao de grandezas para a compreenso da realidade e a soluo de problemas do cotidiano (Matriz de Referncia/ENEM , 2009, p.1). Os vestibulares no se organizam a partir de matrizes de referncia, mas sim de programas de contedos do ensino mdio. Escolhemos o tema porcentagem como elo de ligao entre as questes do SIMAVE, ENEM e vestibular, que so comparadas a seguir. Questes Envolvendo Porcentagem Para se ter uma ideia das diferenas entre o que se avalia em cada uma das avaliaes externas discutidas nesse estudo ENEM, SIMAVE e vestibular da UFLA, elencaremos a seguir questes destas trs avaliaes que exigem dos alunos a habilidade de resoluo de uma situaoproblema envolvendo porcentagem. No ENEM de 2009, a prova azul apresenta uma questo que avalia, entre outras, a compreenso dos estudantes sobre porcentagem. QUESTO 141 Uma resoluo do Conselho Nacional de Poltica Energtica (CNPE) estabeleceu a obrigatoriedade de adio de biodsel ao leo dsel comercializado nos postos. A exigncia que, a partir de 1o de julho de 2009, 4% do volume da mistura final seja formada por biodsel. At junho de 2009, esse percentual era de 3%. Essa medida estimula a demanda de biodsel, bem como possibilita a reduo da importao de dsel de petrleo.
Disponvel em: http://www1.folha.uol.com.br. Acesso em: 12 jul. 2009 (adaptado).

Estimativas indicam que, com a adio de 4% de biodsel ao dsel, sero consumidos 925 milhes de litros de biodsel no segundo semestre de 2009. Considerando-se essa estimativa, para o mesmo volume da mistura final dsel/biodsel consumida no segundo semestre de 2009, qual seria o consumo de biodsel com a adio de 3%? A) 27,75 milhes de litros. C) 231,25 milhes de litros. B) 37,00 milhes de litros. D) 693,75 milhes de litros. E) 888,00 milhes de litros.

Fonte: ENEM 2009 MT Caderno 7 Azul, p.20

Segundo a Matriz de Referncia do ENEM, avaliamos que essa questo contemple as competncias: da rea 1 Construir significados para os nmeros naturais, inteiros, racionais e reais e da rea 4 Construir noes de variao de grandezas para a compreenso da realidade e a soluo de problemas do cotidiano (Matriz de Referncia de Matemtica e suas Tecnologias, XIII CIAEM I ACME, Recife, Brasil, 2011.

Avaliaes Externas no Brasil: uma anlise entre ENEM, SIMAVE e vestibulares

2009, p.1). As avaliaes do SIMAVE/Proeb no so divulgadas e nem o professor de Matemtica regente da turma avaliada tem acesso ao contedo desta prova. Assim selecionamos um item/questo contido no Boletim Pedaggico da Escola: SIMAVE/Proeb 2009, volume III, que enviado s escolas no ano posterior a realizao do Proeb. (M08337SI) Um elstico em sua posio normal mede 300 cm. Quando esticado, o seu comprimento aumenta em 5 %. Qual o comprimento desse elstico depois de esticado? A) 301 cm. B) 305 cm. C) 315 cm. D) 350 cm. E) 450 cm
Fonte: Caed/UFJF

Na Matriz de Referncia do SIMAVE/Proeb esse item est associado ao descritor D-14 resolver situaes-problema envolvendo o clculo de porcentagens (Guia da Matriz de Referncia/SIMAVE, 2009, p. 65). Destacamos que a questo de vestibular da UFLA foi escolhida tendo o contedo como ponto de ligao conceitual entre as questes anteriores, pois os programas apresentados nos editais do vestibular no so organizados na forma de uma Matriz de Referncia. QUESTO 31 Um copo de base quadrada est com 80% de sua capacidade com gua. O maior ngulo possvel que esse copo pode ser inclinado, sem que a gua se derrame : a) 45o b) 30o c) 60o d) 15o

Fonte: Vestibular UFLA/2008, p.13.

Percebemos que as questes diferem muito tanto no grau de dificuldade de interpretao, quanto nos conhecimentos que devem ser mobilizados para suas resolues, embora abordem um mesmo conceito matemtico porcentagem. Enquanto os itens do SIMAVE/Proeb so mais diretos, minimizando possveis dvidas sobre quais competncias e habilidades sero utilizadas, a questo do ENEM exige uma maior complexidade interpretativa e apresenta uma contextualizao relacionada com problemticas da atualidade. A questo do vestibular tambm apresenta alguma contextualizao, mas apresenta-se de maneira que afere outros descritores alm da resoluo de problemas envolvendo porcentagem. Em relao ao SIMAVE/Proeb, a questo avalia a competncia para a situaes-problema envolvendo o clculo de porcentagem, ligada ao tema Operaes. O edital do vestibular, no apresenta uma Matriz de Referncia, programa de contedos dos ensinos fundamental e mdio possveis de serem resoluo de Nmeros e mas sim um cobrados nas

XIII CIAEM I ACME, Recife, Brasil, 2011.

Avaliaes Externas no Brasil: uma anlise entre ENEM, SIMAVE e vestibulares

10

questes do exame vestibular, no qual se encontra um item referente ao uso da porcentagem. A Matriz de Referncia para avaliao de Matemtica implementada pelo SIMAVE/Proeb tem como eixo central a habilidade de resolver problemas em consonncia com os PCN's e os CBC's. Os temas selecionados Espao e Forma, Grandezas e Medidas, Nmeros e Operaes e Tratamento da Informao representam contedos com base nos quais so elaborados descritores que expressam habilidades em Matemtica. Alm disso, a Matriz de Referncia do SIMAVE/Proeb no menciona certas habilidades e competncias que, embora sejam importantes, no podem ser medidas por meio de uma prova objetiva. Em outras palavras, as Matrizes de Referncia do ENEM, e do SIMAVE/Proeb no permitem avaliar todos os contedos que devem ser trabalhados pela escola, mas sim os contedos eleitos como bsicos e que podem ser aferidos por um teste de mltipla escolha. As Matrizes de Referncia no trazem sugestes ou orientaes de como trabalhar em sala de aula. Isto feito com o envio s escolas dos boletins pedaggicos, aps um ciclo de avaliao, alm de conter estas sugestes, neles so apresentados alguns dados e comentrios sobres alguns itens que estiveram presentes na avaliao daquela escola. Nestes boletins pedaggicos publicados para divulgao dos resultados e para implementao de aes de interveno pedaggica dentro da escola, no sentido de melhorar os ndices de desempenho dos alunos, salienta-se que a Matriz de Referncia no pode ser assumida como plano de ensino, nem to pouco como currculo de Matemtica para as diversas sries/anos da Educao Bsica. Contudo os resultados da avaliao do SIMAVE so utilizados para efetuar premiao em dinheiro aos professores e todos os funcionrios da escola quando bem avaliada, o quantitativo recebido depende do desempenho dos alunos e do cumprimento de metas, que variam ano aps ano, dependendo do Acordo de Resultados5. Consideraes Finais Ao longo da pesquisa de mestrado analisamos vrias provas das avaliaes externas em questo, a limitao desse artigo nos impede de apresentar muitos exemplos. Pudemos verificar a partir da comparao das questes/itens que so apresentados que existe uma grande distino de profundidade em relao aos contedos abordados. O SIMAVE/Proeb, que uma avaliao externa com o intuito de aferio e gerao de dados para aes governamentais, no tem o objetivo de selecionar. Levanta-se ento uma preocupao: a simplicidade dos itens no representaria uma possibilidade de exibir melhores ndices estatsticos sobre a educao mineira? Exigir interpretaes menos elaboradas, resolues em que a utilizao de algoritmos 5 O Acordo de Resultados uma iniciativa do Governo de Minas Gerais e consiste na pactuao de resultados
alinhados aos objetivos estratgicos do Estado, expressos no Plano Mineiro de Desenvolvimento Integrado - PMDI.

XIII CIAEM I ACME, Recife, Brasil, 2011.

Avaliaes Externas no Brasil: uma anlise entre ENEM, SIMAVE e vestibulares

11

diretos so recorrentes, no facilitaria, ou tenderia a facilitar a resoluo das questes/itens e consequentemente indicar, mesmo que de forma ilusria uma melhora crescente dos ndices? Por que avaliar a escola a partir de questes relativamente fceis e to diferentes das utilizadas nas avaliaes externas que selecionam para a continuidade dos estudos dos alunos? Se o propsito da educao em Minas Gerais tornar a rede estadual de ensino um sistema de alta qualidade, ser que esta configurao de avaliao contribui para isto? importante considerarmos que a nova configurao do ENEM tem a inteno explcita de reestruturao curricular. Assim o distanciamento entre essas avaliaes ainda mais preocupante. A distino entre as questes do SIMAVE/Proeb, do ENEM e do vestibular dificulta o estabelecimento de uma convergncia para contribuir na formao do educando na escola. As diferenas em grau de complexidade, abordagem e tambm estruturao praticamente obrigam o professor a priorizar o ensino tendo como objetivo aproximar-se de uma dessas avaliaes. A vinculao de retorno financeiro frente aos resultados do SIMAVE pode ser sim uma motivao a mais para a escolha dessa avaliao como norte do processo de ensino. Se a educao na rede pblica estadual pretende dar oportunidades iguais aos estudantes de todas as classes sociais, o ENEM e o vestibular, que hoje so a porta de entrada em diversas universidades pblicas, requerem, cobram em seus testes conhecimentos e habilidades muito alm daquelas que esto presentes nas avaliaes do SIMAVE/Proeb, ficamos diante de uma dicotomia. Tal situao nos leva a considerar que o bom desempenho da escola ou mesmo do aluno no SIMAVE, no garante as mesmas oportunidades de sucesso em outras avaliaes para o mesmo nvel de escolarizao, seja o ENEM, ou o vestibular, com inteno de ascenso social por meio da realizao de um curso superior ou at mesmo em outras avaliaes para entrada no mercado de trabalho. Assim, para que as finalidades propostas pela Secretaria de Estado da Educao sejam cumpridas, o Estado apresenta suas estratgias e tticas e a escola e o professor tambm criam e aplicam suas tticas e estratgias. Segundo Certeau estes conceitos no so estticos e se alternam diante das situaes de exerccio ou de submisso frente s estruturas de poder. Essa dinmica faz com que a disciplina Matemtica tenha uma configurao a partir destas relaes, o que a modifica daquilo que previsto perante a liberdade que a escola tem para a aplicao de um currculo. Bibliografia e Referncias
Brasil (2010). Histrico do Enem. Disponvel em <www.enem.inep.gov.br> acesso em: 20/09/2009. _______ (1999). Matrizes Curriculares de Referncia para o SAEB/Maria Ins Gomes de S Pestana. et. al. Braslia, DF. 2 edio revisada e ampliada. INEP. 134.

XIII CIAEM I ACME, Recife, Brasil, 2011.

Avaliaes Externas no Brasil: uma anlise entre ENEM, SIMAVE e vestibulares

12

_______ (2006). Fundamentao Terico-Metodolgica: ENEM. Ministrio da Educao. Instituto Nacional de Estudos e Pesquisas Educacionais Ansio Teixeira. Braslia, DF. INEP. 121. _______ (2008). Relatrio Pedaggico: ENEM 2007. Ministrio da Educao. Instituto Nacional de Estudos e Pesquisas Educacionais Ansio Teixeira. Braslia, DF. INEP. 121. _______ (2009). Caderno 7 Azul. Exame Nacional do Ensino Mdio. Prova de Redao e de Linguagens, Cdigos e suas Tecnologias; Prova de Matemtica e suas Tecnologias. INEP. _______ (200). Vestibular 2008 Primeira fase. Biologia, Fsica, Matemtica e Qumica. Universidade Federal de Lavras UFLA. Lavras, MG. Disponvel em www.ufla.br. Acesso em 14/08/2010. Bloch, Marc (2001). A apologia da Histria ou o ofcio de Historiador. So Paulo, SP. Jorge Zahar Editora. Caed (2009). Guia de Elaborao dos Itens: Matemtica. Faculdade de Educao - Universidade Federal de Juiz de fora. Faculdade de Educao. Juiz de Fora, MG. 146. Certeau, Michel de (1982). A Operao Historiogrfica. In: _______ A Escrita da Histria. Traduo Maria de Lourdes Menezes. Rio de Janeiro, RJ. Forense Universitria. Chervel, Andr (1990). Histria das Disciplinas Escolares: Reflexes sobre um campo de pesquisa. Teoria & Debate, vol. 2, p.177-229. Josgrilberg, Fbio B. (2005). Cotidiano e Inveno: o espaos de Michel de Certeau. Coleo Ensaios Transversais. So Paulo, SP. Editora Escrituras. Julia, Dominique (2001). A Cultura Escolar como Objeto Histrico. In: Revista Brasileira de Histria da Educao. Campinas, SP. SBHE / Editora Autores Associados. Jan/Jun, no. 1. Le Goff, Jaques (1990). Documento/Monumento. In: Histria e Memria. Traduo Bernardo Leito. Coleo Repertrios. Campinas, SP. Editora da Unicamp. p. 535 553. Minas Gerais (2007). Boletim Pedaggico da Avaliao da Educao do SIMAVE/Proeb 2007: Matemtica 3o ano do ensino mdio. UFJF/Caed, Faculdade de Educao. Jan/Dez. 2007. _______ (2001). Escola Sagarana: educao para a vida com dignidade e esperana. Coleo Lies de Minas, 2a edio Revisada e Ampliada, 39. _______ (2008). Boletim Pedaggico da Avaliao da Educao do SIMAVE/Proeb 2008: Matemtica 3o ano do ensino mdio. UFJF/Caed, Faculdade de Educao. Jan/Dez. 2008. _______ (2008). Guia do Professor Alfabetizador. Programa de Interveno Pedaggica. Secretaria do Estado da Educao. Belo Horizonte, MG. Disponvel em http://crv.educacao.mg.gov.br/aveonline40/sistema_crv/pav/Guia%20do%20professor.pdf. Acesso em 20/07/2010. _______ (2007). Contedos Bsicos Comuns CBC Matemtica Ensino Fundamental e Mdio: Proposta curricular. Secretaria do Estado da Educao. Belo Horizonte, MG. 80. _______ (2009). Matrizes de Referncia para Avaliao. Sistema Mineiro de Avaliao da Educao Pblica SIMAVE Matemtica. Secretaria do Estado da Educao. Belo Horizonte, MG. Perrenoud, Philippe (1999). Avaliao: da excelncia regulao das aprendizagens entre duas lgicas. Porto Alegre, RS. Artimed. Valente, Wagner Rodrigues (organizador) (2008). Avaliao em Matemtica: Histria e Perspectivas Atuais. Coleo Magistrio: Formao e Trabalho Pedaggico. Campinas, SP. Papirus.

XIII CIAEM I ACME, Recife, Brasil, 2011.