ANLISE PRELIMINAR DOS RESULTADOS

PROVAS FINAIS DE CICLO EXAMES FINAIS NACIONAIS 2013

2013
Pgina 1 de 18

AGOSTO

Ficha Tcnica
TTULO

ANLISE PRELIMINAR DOS RESULTADOS PROVAS FINAIS DE CICLO EXAMES FINAIS NACIONAIS 2013

DIREO E COORDENAO

Helder Diniz de Sousa Helder Diniz de Sousa Maria Manuel Sampaio Maria Teresa Castanheira Sandra Pereira Vanda Loureno

AUTORIA

Agosto 2013

Pgina 2 de 18

ndice

Nota introdutria ____________________________________________________ 04

Nota metodolgica ___________________________________________________ 05 A. A variao interanual da classificao mdia das provas ____________ 05 B. As classificaes mdias totais, as classificaes dos alunos internos e o significado do conceito de classificao positiva ou negativa __________________________________________________ 07 C. As classificaes mdias das provas finais de ciclo _________________ 08 1. Os resultados dos exames finais nacionais do ensino secundrio ___________ 10

2. Os resultados das provas finais de ciclo do ensino bsico _________________ 13

Concluso ___________________________________________________________ 17

Anexo ______________________________________________________________ 18

Pgina 3 de 18

Nota introdutria
Os resultados das provas finais de ciclo e dos exames finais nacionais registados em 2013 evidenciam uma tendncia de estabilidade, em linha com o que tem sido observado nos ltimos quatro anos. Esta tendncia indica que a qualidade do desempenho dos alunos, quando caracterizada a partir dos resultados da avaliao externa do ano letivo que agora termina, no teve alteraes significativas em relao aos anos anteriores. As variaes registadas nas classificaes mdias, na generalidade das disciplinas dos diferentes ciclos de escolaridade, em relao aos valores de 2012, no permitem uma caracterizao da evoluo dos resultados que sustente a ideia de degradao generalizada da qualidade da aprendizagem dos alunos. A existncia de uma quebra abrupta de resultados constitui, de facto, uma falsa questo para a qual foram avanadas mltiplas explicaes; mas tal procura carece de sentido, uma vez que se procuram as causas de algo que no aconteceu. Reitera-se uma perspetiva j apresentada no contexto do debate relativo ao significado dos resultados dos exames nacionais: no sendo a conceo de exames uma cincia exata, a sua validade depende tambm da forma como so lidos os resultados. Segundo Stobart (2008, p. 174), um teste bem construdo torna-se invlido se os resultados so mal entendidos ou interpretados de forma errada. Muito do debate que anualmente se gera em torno dos resultados dos exames, em Portugal, alimentado por opinies mal informadas ou por leituras, intencionalmente ou no, desfocadas, ignora a realidade atrs descrita.1 As abordagens incorretas desviam o foco da ateno dos problemas reais que se tm verificado nos anos recentes e que necessrio enfrentar para melhorar a qualidade da aprendizagem dos alunos. A criao e a tentativa de explicao de uma realidade ficcionada, como se observa no corrente ano letivo, conduzem, seguramente, a um diagnstico errado, o que dificulta a identificao das insuficincias da aprendizagem dos nossos alunos, como tem sido referido nos vrios relatrios do GAVE sobre os resultados dos exames e dos testes intermdios publicados desde 20092. Assim, considerando, por um lado, a importncia que uma anlise rigorosa dos resultados da avaliao externa dos alunos representa para o diagnstico do sistema de ensino nacional e, por outro lado, o potencial valor formativo dessa anlise no desenho de uma estratgia de superao dos problemas identificados, afigura-se indispensvel apresentar uma breve nota metodolgica, que visa proporcionar uma leitura e uma interpretao dos resultados no contaminadas pelo uso de indicadores e de conceitos menos adequados ou mesmo incorretos.

Sousa, H. (2012). Exames nacionais: instrumentos de regulao de boas prticas de ensino e de aprendizagem? In A Avaliao dos Alunos. Lisboa: Fundao Francisco Manuel dos Santos, p. 55. Sugere-se a consulta em http://www.gave.min-edu.pt/np3/24.html.

Pgina 4 de 18

Nota metodolgica

A. A variao interanual da classificao mdia das provas As variaes interanuais das classificaes mdias das provas, que constituem a dimenso de anlise mais elementar e a que mais expresso assume em termos sociais, quando sujeitas a uma leitura simplista, como habitualmente sucede, assumem-se como um elemento pouco relevante ou mesmo sem qualquer utilidade para um diagnstico rigoroso da qualidade do sistema de ensino, medida por indicadores baseados na avaliao externa. No contexto de uma aplicao de provas em diferentes momentos (neste caso, com cerca de 12 meses de intervalo) haver sempre diferenas de resultados. A replicao de um mesmo resultado em dois anos diferentes , teoricamente, possvel, mas tem uma probabilidade de ocorrncia extremamente baixa. Tal afirmao seria verdadeira ainda que estivssemos a aplicar a mesma prova ao mesmo conjunto de alunos, o que no sucede. As provas finais de ciclo e os exames finais nacionais so provas pblicas e, nessa medida, irrepetveis; alm disso, os alunos que as realizam, na sua maioria, no so os mesmos. Esta alterao das duas componentes em presena provas e alunos , por si s, motivo bastante para que numa mesma disciplina se verifiquem diferenas de resultados em anos diferentes 3. Com o objetivo de demonstrar que os resultados gerados por uma determinada prova dependem, entres outas variveis, da populao de alunos que a realiza, foi desenvolvido o seguinte exerccio: considerando os alunos internos que realizaram a prova de Matemtica A, na 1. fase, em 2013, foram constitudos, aleatoriamente, trs grupos de dimenso equivalente (cerca de 10 mil alunos por grupo). As mdias da classificao de exame obtidas, para cada um dos trs grupos foram, em pontos, as seguintes: 93,6 97,0 100,2. Ou seja, uma das mdias situa-se abaixo da marca dos 95 pontos (valor que delimita a fronteira entre o que se considera um resultado positivo e um resultado negativo), enquanto as duas outras so classificaes mdias positivas. De notar que a mdia nacional para a totalidade dos alunos foi 97 pontos (10 valores). Em suma, a aplicao de uma mesma prova, no mesmo momento, permite encontrar diferenas de resultados que podem chegar a 7 pontos 4, dependendo dos subgrupos de alunos formados a partir do universo que a realizou, sem que tenha havido qualquer interferncia na constituio das vrias amostras com potencial impacto significativo nas respetivas classificaes mdias (natureza do estabelecimento de

No ensino secundrio, a escala de medida 0 a 200 pontos (0 a 20 valores) e, no ensino bsico, 0 a 100 pontos percentuais. Sabendo que as variaes encontradas esto tambm dependentes do valor do desvio padro dos resultados de cada disciplina, outras combinaes amostrais podero gerar diferenas de outra amplitude, no sendo de excluir a possibilidade de poderem ser observadas amplitudes de valor mais elevado.

Pgina 5 de 18

ensino, rea geogrfica frequncia).

de provenincia,

gnero,

classificao

interna de

Este exerccio, no sendo conclusivo, e no esquecendo que em cada ano estamos a avaliar alunos diferentes e a utilizar provas diferentes, embora no necessariamente de grau de dificuldade ou de complexidade desigual, permite-nos sustentar que uma variao interanual de resultados no superior a um valor (14 pontos, numa escala de de 0 a 200 pontos) aceitvel como indicadora da estabilidade do desempenho dos alunos e do grau de equidade garantido por provas que so nicas em cada ano 5. Como se referiu, e pelo exemplo apresentado, normal a ocorrncia de variaes de resultados entre dois ou mais anos, numa mesma disciplina. Consequentemente, realar apenas o nmero de disciplinas cujas classificaes mdias subiram ou desceram de um ano para o outro, sem uma cuidadosa anlise da amplitude dessas variaes, um exerccio intil e desprovido de qualquer valor informativo. Para uma correta compreenso dos resultados das provas, relevante ter em conta, sem mais, o nmero de disciplinas cuja classificao mdia subiu ou desceu, mas imprescindvel partir da identificao cuidadosa daquelas em que as oscilaes apresentam amplitude significativa (superior a 14 pontos no ensino secundrio e a 7 pontos no ensino bsico). Variaes desta dimenso podero ser explicadas, entre outras, por uma ou mais das seguintes razes: alterao significativa da qualidade dos desempenhos da coorte de alunos avaliada (situao pouco provvel no intervalo de um ano); alterao das condies de aplicao ou de realizao das provas 6; alterao das caratersticas das provas, no que se refere sua estrutura ou ao seu grau de dificuldade. Por ltimo, de notar que as concluses atrs apresentadas pressupem que se estejam a considerar apenas os resultados dos alunos internos e, em particular, em disciplinas cujo universo, pela sua ordem de grandeza, garanta consistncia estatstica entre vrios anos, razo pela qual se privilegia a anlise de resultados de disciplinas com um nmero de alunos internos igual ou superior a 2500.

No ensino bsico (cuja escala apresenta um amplitude de 0 a 100 pontos percentuais), e semelhana do princpio enunciado, considera-se que valores iguais ou inferiores a 7 pontos constituem uma variao que retrata um quadro de estabilidade. Exemplo que se ilustra na anlise dos resultados da disciplina de Matemtica do 9. ano, tendo por referncia a sucesso das classificaes mdias observadas em 2011, 2012 e 2013, situao que se retoma mais adiante.

Pgina 6 de 18

B. As classificaes mdias totais, as classificaes dos alunos internos e o significado do conceito de classificao positiva ou negativa O recurso ao valor das classificaes mdias totais, aquele que de forma generalizada divulgado e analisado publicamente, enferma de uma limitao que invalida qualquer comparao estatisticamente significativa. Estes resultados englobam as classificaes dos alunos internos e dos alunos autopropostos (a esmagadora maioria com Classificao Interna de Frequncia (CIF) negativa). Estes ltimos, no obtiveram uma classificao interna que lhes permitisse realizar os exames na condio de aluno interno, isto , obtiveram classificao negativa no final do ano letivo; dito de outra forma, os professores no consideraram que estes alunos estivessem devidamente preparados para realizar o exame. Na tabela 1, ilustra-se o efeito do peso relativo dos alunos autopropostos, no conjunto do total de alunos de uma dada disciplina, e o efeito que as respetivas classificaes mdias produzem no valor das classificaes mdias totais.
Tabela 1 Simulao de classificaes mdias totais condicionadas pela interferncia de resultados dos alunos autopropostos

Disciplina A 2012 Classificaes Totais Alunos internos Alunos autopropostos Classificao positiva
Alunos Classif. mdia

A 2013
Alunos Classif. mdia

B 2013
Alunos Classif. mdia

C 2013
Alunos Classif. mdia

50000 70% 30%

101 110 80

50000 70% 30%

92 110 50

50000 50% 50%

80 110 50

50000 30% 70%

68 110 50

Classificaes negativas

Nos exemplos apresentados, a classificao mdia dos alunos internos constante (11 valores, 110 pontos). O nmero total de alunos tambm o mesmo em todos os casos. Considere-se a disciplina A. Em 2012, os alunos autopropostos representaram 30% do total e a sua classificao mdia foi 8 valores (80 pontos). Em 2013, manteve-se a mesma proporo (30%), mas a classificao mdia destes alunos baixou para 5 valores (50 pontos). Em consequncia, no ano de 2012 a mdia total foi positiva (10 valores, 101 pontos), mas em 2013 passou a ser negativa (9 valores, 92 pontos). Considere-se agora as disciplinas A, B e C, no mesmo ano letivo (2013). Sendo constante a classificao mdia dos alunos autopropostos (5 valores, 50 pontos), a Pgina 7 de 18

simples variao do seu peso relativo tem um forte impacto na classificao mdia total: na disciplina B, com 50% de alunos autopropostos, a classificao desce para 8 valores (80 pontos) e, quando a percentagem desses alunos aumenta para 70%, a classificao desce ainda mais, fixando-se em 7 valores (68 pontos). Sublinha-se que em todas as situaes exemplificadas a classificao mdia dos alunos internos se manteve inalterada. Assim, sabendo que a percentagem de alunos autopropostos, de um ano para o outro, numa mesma disciplina, varivel, e sabendo ainda que a percentagem dos alunos autopropostos nas vrias disciplinas pode ser muito significativa7, entende-se que a anlise dos resultados das classificaes das provas finais e dos exames nacionais deve centrar-se exclusivamente nos valores relativos aos alunos internos. Por ltimo, as quantificaes relativas ao nmero de disciplinas com classificaes negativas (ensino secundrio), divulgadas publicamente, apresentam-se, em regra, aliceradas em valores incorretos, sendo por vezes contabilizadas como negativas as classificaes inferiores a 100 pontos e no a 95 pontos, como seria correto. De facto, positiva a classificao que assegura a cada aluno a aprovao na respetiva disciplina (quando apenas se considera o resultado do exame). Neste caso, como a classificao expressa em valores inteiros na escala de 0 a 20 valores, qualquer classificao igual ou superior a 95 pontos (9,5 valores) corresponde a uma classificao de 10 valores, garantindo a aprovao, pelo que s pode ser contabilizada como positiva.

C. As classificaes mdias das provas finais de ciclo Como anteriormente foi referido, as classificaes mdias dos alunos nas provas finais de ciclo (ensino bsico) no esto condicionadas, de forma significativa, pelos resultados dos alunos autopropostos. O seu peso relativo no universo de alunos avaliados extremamente baixo, pelo que as classificaes totais diferem das classificaes dos alunos internos, em regra, no mais do que 1 ponto (numa escala de 0 a 100). Porm, sabendo-se que a classificao das provas finais ou mesmo a classificao final da disciplina, desde que garantida a aprovao, no tem qualquer interferncia no prosseguimento de estudos, no se pode descurar o efeito que o clculo da classificao final pode ter nos nveis de empenho dos alunos aquando da realizao das provas finais.

Em 2013, a percentagem dos alunos autopropostos nas 23 disciplinas do ensino secundrio situa-se entre 0% (Portugus Lngua No Materna, cdigo 739) e 99,6% (Ingls, cdigo 550), sendo 41,8% em Biologia e Geologia (cdigo 702), 42,3% em Fsica e Qumica A (cdigo 715), 34% em Matemtica A (cdigo 635) e 29,2% em Portugus (cdigo 639). As classificaes mdias dos alunos autopropostos nestas 4 disciplinas so, em mdia, 2,1 valores inferiores s dos alunos internos (ver anexo 1). Note-se que este fenmeno inexpressivo nas classificaes do ensino bsico.

Pgina 8 de 18

Na realidade, a frmula de clculo da classificao final 8 permite que os alunos que tenham obtido, em Portugus ou em Matemtica, uma classificao de frequncia no final do 3. perodo de nvel 3, 4 ou 5 possam ser aprovados obtendo uma classificao na prova final de ciclo da mesma disciplina muito inferior (1, 2, 3 ou mesmo 4 nveis abaixo da classificao de frequncia), conforme se pode observar na tabela 2.
Tabela 2 Classificao final da disciplina em funo da classificao de frequncia (final do 3. perodo) e da classificao da prova final

Classificao de frequncia no final do 3. perodo 3 Classificao prova final 1 2 3 4 5 2 3 3 3 4 4 3 3 4 4 4 5 4 4 4 5 5

Classificao final da disciplina Aprovado Classificao final da disciplina No aprovado

CF = (7 Cf + 3 Cp)/10, em que: CF = classificao final da disciplina; Cf = classificao de frequncia no final do 3. perodo; Cp = classificao da prova final.

Pgina 9 de 18

1. Os resultados dos exames finais nacionais do ensino secundrio

Os resultados das classificaes mdias dos exames finais nacionais em 2013 indicam uma situao de relativa estabilidade, que tem vindo a ser observada nos ltimos quatro anos. Os resultados dos alunos internos que realizaram as provas na 1. fase mostram-nos que, de entre 23 disciplinas, apenas em duas foram registadas classificaes mdias negativas (inferiores a 95 pontos): Biologia e Geologia, com 84 pontos (8 valores), e Fsica e Qumica A, com 81 pontos (tambm 8 valores). Temos, assim, um nmero de disciplinas com classificao negativa igual ao observado em 2012. Em 2013, considerando o conjunto de disciplinas com 2500 ou mais provas realizadas por alunos internos, 11 disciplinas no total (ver anexo 1), registam-se nove resultados positivos. Em Portugus, Matemtica A, Geografia A, Filosofia e Matemtica Aplicada s Cincias Sociais, as classificaes mdias situam-se em torno dos 10 valores. Distanciam-se ligeiramente deste valor as classificaes mdias das disciplinas de Histria A e de Economia A, com 11 valores (106 e 113 pontos, respetivamente). Por ltimo, as disciplinas das reas das Expresses, Desenho A e Geometria Descritiva A, so aquelas em que se registam resultados mdios da ordem dos 12 valores (122 e 124 pontos, respetivamente). A mdia das classificaes das 11 disciplinas referidas foi 105 pontos, em 2012, tendo-se fixado em 102 pontos em 2013, o que equivale a uma descida inexpressiva de apenas trs pontos. No conjunto das quatro disciplinas com mais provas realizadas (Portugus, Matemtica A, Fsica e Qumica A e Biologia e Geologia), apenas num caso, Biologia e Geologia, se observa uma descida cuja amplitude toca o limite do intervalo de variao considerado como resultante de uma normal oscilao interanual dos resultados, no ensino secundrio. Neste caso, a classificao mdia desceu 14 pontos em comparao com o resultado de 2012. Nos restantes casos, a variao no foi alm de 7 pontos (Matemtica A), sendo de 6 pontos em Portugus e sendo nula na disciplina de Fsica e Qumica A. Como se pode observar na figura 1, considerando uma srie de variaes interanuais de quatro pares de anos consecutivos, para o conjunto das quatro disciplinas com maior nmero de provas realizadas por alunos internos, apenas em trs situaes (de 16 possveis) se registam variaes que ultrapassam os 14 pontos: em 2010-2011, nas disciplinas de Matemtica A e de Fsica e Qumica A, e em 2011-2012, novamente na disciplina de Fsica e Qumica A. Em 2012-2013, todas as variaes esto dentro do intervalo que delimita a amplitude das variaes interanuais consideradas normais, no quadro de aplicao de provas pblicas. Em 2013, apenas na disciplina de Geometria Descritiva A (no representada na figura), cuja classificao mdia subiu 15 pontos, no se verifica uma variao dentro do intervalo referido.

Pgina 10 de 18

Considerando as diferenas entre as classificaes mdias das quatro disciplinas representadas na figura 1 (em mdulo), registam-se os seguintes valores: variao mdia de 4 pontos em 2009-2010, de 16 pontos em 2010-2011, de 12 pontos em 20112012 e de 7 pontos em 2012-2013. Assim, no corrente ano, a variao interanual mdia regista mesmo a segunda menor amplitude desde 2009-2010 e inferior registada no ano transato.
30 15 0 -15 -30 2009-10 2010-11 2011-12 2012-13

Portugus Biologia e Geologia Matemtica A Fsica e Qumica A

Variaes de amplitude igual ou inferior a 14 pontos, cuja ocorrncia se enquadra numa evoluo considerada normal Figura 1 Variao das classificaes mdias dos alunos internos, na 1. Fase, entre 2009 e 2013 (valores em pontos, numa escala de 0 a 200)

Na figura 2, pode observar-se a evoluo das classificaes mdias para o conjunto das 10 disciplinas com 2500 ou mais provas realizadas por alunos internos 9. Embora se denote uma tendncia ligeiramente descendente, o resultado geral mantm-se claramente num nvel positivo. Classificao mdia positiva
125 120 115 110 105 100 95 90 85 80 75 2010 2011 2012 2013

Classificao mdia negativa Mdia Portugus Biologia Geologia Matemtica A Fsica e Qumica A

Figura 2 Evoluo das classificaes mdias dos alunos internos, na 1. Fase. Valor da mdia para as disciplinas com 2500 ou mais provas realizadas, em pontos (escala de 0 a 200 pontos)
9

A partir de 2012, a disciplina de Filosofia passou a integrar o grupo de disciplinas com 2500 ou mais provas realizadas por alunos internos, elevando para 11 o nmero de disciplinas neste grupo.

Pgina 11 de 18

Relativamente evoluo dos resultados das quatro disciplinas com mais provas realizadas, verifica-se que no caso das disciplinas de Portugus e de Matemtica A as classificaes mdias registam valores sempre positivos, acima dos 95 pontos. J no caso de Biologia e Geologia, 2013 o ano com pior resultado, alis, o nico negativo na srie considerada. Por fim, constata-se que em Fsica e Qumica A persistem os resultados cronicamente mais baixos, sempre prximos dos 80 pontos, com exceo do nico registo positivo desta srie, 105 pontos, observado em 2011. Como nota final, faz-se uma breve referncia aos resultados dos alunos autopropostos, no sentido de ilustrar as observaes apresentadas na nota metodolgica. Em 2013, as classificaes mdias dos alunos autopropostos no grupo das 11 disciplinas com mais provas realizadas (anexo 1) foram, em mdia, 26 pontos inferiores s registadas pelos alunos internos. Considerando as quatro disciplinas com mais provas realizadas, aquele valor desce para 22 pontos. Em todo o caso, cumpre registar que em oito dessas disciplinas os resultados dos alunos autopropostos foram dois ou mais valores inferiores aos dos alunos internos. Estas diferenas assumem uma expresso muito significativa nas disciplinas de Matemtica A (-43 pontos) e de Portugus (-31 pontos). Nestas duas disciplinas, a percentagem de alunos autopropostos foi de, respetivamente, 34% e 29%.

Pgina 12 de 18

2. Os resultados das provas finais de ciclo do ensino bsico

As provas finais de ciclo no final do 4. ano de escolaridade realizaram-se pela primeira vez no corrente ano letivo e foram distribudas por duas fases. Aps as reunies de avaliao do final de ano, que incluram a ponderao dos resultados da 1. fase, os alunos que no obtiveram aprovao puderam usufruir do prolongamento da durao do ano letivo, beneficiando, para o efeito, de acompanhamento extraordinrio, uma das medidas de promoo do sucesso escolar previstas no Despacho Normativo n. 24-A/2012, de 6 de dezembro. Na 1. fase, a classificao mdia foi 49% na disciplina de Portugus, tendo 53% dos alunos obtido uma classificao de nvel 3 ou superior. J na disciplina de Matemtica, a classificao mdia foi 57%, tendo 68% dos alunos alcanado uma classificao de nvel 3 ou superior. No final da 1. fase ficaram retidos 3856 alunos, o que corresponde a 3,6% do total de alunos inscritos. Ainda no final da 1. fase, embora em condies de transio para o 2. ciclo, encontravam-se sem aprovao na disciplina de Portugus 628 alunos e na disciplina de Matemtica 2100 alunos. A realizao da 2. fase, de acordo com as condies previstas no presente ano letivo, em conjunto com o perodo de acompanhamento extraordinrio, veio permitir tanto a reduo do nvel de reteno como a diminuio dos nveis de reprovao por disciplina, atrs referidos. A taxa de reteno em 2013, aps a realizao da 2. fase, a mais baixa de uma srie de resultados registados desde o ano 2000. Conforme se observa na figura 3, aquele indicador registou valores inferiores a 5% a partir de 2006, tendo-se fixado em 3% no corrente ano letivo 10. 12 10 8 6 4 2
2000 2001 2002 2003 2004 2005 2006 2007 2008 2009 2010 2011 2012 2013 (F1) 2013 (RF) DGEEC Valores de 2012 preliminares (8 julho, 2013) GAVE/JNE Valores preliminares (1 agosto, 2013)

Fonte: DGEEC, 2000-2012; GAVE/JNE, 2013. 2013 (F1) Taxa de reteno no final da 1. fase; 2013 (RF) Taxa de reteno final (valores preliminares).

Figura 3 Evoluo da taxa de reteno no final do 1. ciclo do ensino bsico (%)

10

Pgina 13 de 18

De registar tambm que dos 628 alunos em condies de transio, no final da 1. fase, mas sem aprovao na disciplina de Portugus, 71 obtiveram aprovao na disciplina aps a realizao da prova da 2. fase, isto , alcanaram um nvel igual ou superior a 3. Em idntica situao, na disciplina de Matemtica, dos 2100 alunos, 658 obtiveram classificao positiva. Estes alunos transitam, assim, para o 2. ciclo com aprovao nestas duas disciplinas.

Os resultados mdios dos alunos internos nas provas finais do 2. ciclo, 52% na disciplina de Portugus e 49% na disciplina de Matemtica, e no obstante ser prematura qualquer anlise cronolgica dos resultados (apenas com dois anos de aplicao das provas), mostram variaes, em relao aos resultados de 2012, que se enquadram nos intervalos que retratam evolues consideradas normais. Regista-se uma descida de 7 pontos percentuais na disciplina de Portugus e uma descida de 5 pontos percentuais na disciplina de Matemtica (tabela 3). Com estes resultados no se pode inferir uma degradao da qualidade da aprendizagem, quando medida pelos resultados da avaliao externa, sendo mais legtimo concluir que se est perante um quadro de estabilidade. Ainda assim, estes resultados evidenciam lacunas de aprendizagem, identificadas em anos anteriores com base nos resultados das provas de aferio, que se reconhece ser necessrio ultrapassar.
Tabela 3 Resultados das provas finais do 2. ciclo e dos exames/provas finais do 3. ciclo do ensino bsico dos alunos internos, na 1. chamada (valores em percentagem)

Ciclo 2.

Disciplina Portugus Matemtica Portugus Matemtica

2010

2011

2012 59 54

2013 52 49 48 44

3.

57 51

51 44

54 54

Em relao s classificaes mdias dos alunos internos do 3. ciclo nas disciplinas de Portugus e de Matemtica, observam-se situaes distintas. Na disciplina de Portugus, com uma classificao mdia de 48%, em 2013, regista-se uma descida de 6 pontos percentuais em relao ao resultado de 2012, isto , ainda dentro de um intervalo de variao que pode ser considerado normal. Uma descida de igual amplitude tinha j ocorrido entre 2010 e 2011. O resultado de 2013, embora sendo o mais baixo da srie apresentada na tabela 3, inferior ao registado em 2011 em apenas 3 pontos percentuais e, por si s, no indica nenhuma regresso na qualidade da aprendizagem dos alunos, semelhana do referido para os resultados do 2. ciclo. Pgina 14 de 18

Importa recordar que, no caso da disciplina de Portugus, uma parte das oscilaes dos resultados entre dois ou mais anos se fica a dever s diferenas do desempenho dos alunos quando em presena de tipologias textuais diversas; destaca-se o texto potico, presente na prova do 3. ciclo do corrente ano, que implica, em regra, respostas cujas classificaes mdias apresentam pontuaes mais baixas. No que se refere disciplina de Matemtica, nos ltimos trs anos assistiu-se a uma oscilao com uma descida de 7 pontos percentuais em 2010-2011, uma subida de 10 pontos percentuais em 2011-2012 e uma descida de 10 pontos percentuais no corrente ano. As oscilaes superiores a 7 pontos percentuais atrs referidas, contrariamente ao que se poderia supor, no decorrem de uma alterao significativa da estrutura das provas, do seu enunciado, do seu grau de dificuldade ou dos respetivos critrios de classificao. As provas de 2011 e de 2012 foram consideradas, quer pela Associao de Professores de Matemtica quer pela Sociedade Portuguesa de Matemtica, como tendo um nvel de dificuldade equivalente. J neste ltimo ano, a Sociedade Portuguesa de Matemtica reconheceu o equilbrio no grau de dificuldade da prova em relao do ano transato. Tambm no expectvel que, no intervalo de um ano, as variaes observadas possam ser explicadas por uma melhoria (ou por uma regresso) da qualidade dos desempenhos dos alunos. Qualquer explicao apenas poder ser sustentada a partir da anlise das caratersticas das futuras provas e dos futuros resultados. No entanto, a anlise que se apresenta no Relatrio PROVAS FINAIS DE CICLO E EXAMES FINAIS NACIONAIS 2012 como provvel justificao da inusitada subida de 10 pontos percentuais no resultado de 2012, com uma prova qualificada por vrios interlocutores como muito exigente, ganha agora uma outra dimenso. semelhana do observado em 2012 11, em 2013 tambm o resultado do Teste Intermdio, aplicado a um universo de cerca de 96 mil alunos, em 99,1% dos estabelecimentos de ensino, registou uma mdia nacional de 32,4%. Porm, este resultado no gerou, em 2013, qualquer reao mediatizada e de mbito nacional. Ao contrrio dos alunos que realizaram a prova final de ciclo em 2012, pressionados pela difuso de notcias fortemente alarmantes em relao possvel dificuldade da prova final, em 2013 este tipo de presso no se ter feito sentir.

11

Conforme explicitado no Relatrio PROVAS FINAIS DE CICLO E EXAMES FINAIS NACIONAIS 2012, A nica varivel extrnseca prova que poder constituir uma possvel explicao para este fenmeno foi a ampla mediatizao do resultado do Teste Intermdio, publicitado em maro de 2012. A mdia nacional, muito baixa (31,1%), criou um profundo alarme social e poder ter contribudo para um crescente e generalizado empenho dos alunos na realizao de prova final. () Em 2012, a percentagem de alunos que alcanaram nas provas finais um nvel superior ao obtido na classificao interna foi 67%, 24 pontos percentuais acima do valor registado em 2011, que no foi alm de 43%. (p. 139)

Pgina 15 de 18

Assim, em 2013, poder ter prevalecido o padro em que, na disciplina de Matemtica, cerca de 60% dos alunos com classificao de frequncia de nvel 3, 4 ou 5 obtm na prova final uma classificao de nvel inferior. A percentagem de alunos nesta situao, 57,6% em 2013, suscetvel de ser minorada caso estejam reunidas circunstncias que propiciem nveis de empenho acrescidos na realizao das provas finais, como sucedeu em 2012, ano em que este valor se situou em 37,2%. E, se assim for, as classificaes mdias podero voltar a registar valores similares aos de 2012 (na casa dos 50% a 55%), sem que seja necessrio baixar o nvel de dificuldade das provas. A anlise dos resultados de itens semelhantes entre si 12, aplicados nas trs provas consideradas, ajuda a sustentar a evidncia emprica atrs referida. Na figura 4, pode verificar-se que a evoluo da classificao mdia das provas apresenta um padro muito semelhante ao evidenciado pela variao da percentagem da classificao mdia sobre a cotao total 13 nos trs conjuntos de itens considerados. Estes resultados reforam a ideia de que a prova no ter sido a varivel determinante na variao interanual dos resultados verificada entre 2011 e 2013.

100 90 80 70 60 50 40 30 20 10 0 2011 2012 2013

Classificao mdia Probabilidades Geometria Comunicao matemtica

Figura 4 Evoluo da classificao mdia dos alunos internos, na 1. chamada, e da percentagem da classificao mdia/cotao total dos itens selecionados e considerados equivalentes

12

Os itens considerados na figura so similares no contedo que se pretende avaliar e no grau de complexidade das operaes mentais que mobilizam. Os itens cujos resultados aqui se reproduzem esto agrupados em trs conjuntos com as seguintes caratersticas: itens que envolvem um raciocnio simples e avaliam o conceito de probabilidade; itens que implicam capacidade de abstrao e avaliam conhecimentos de geometria (posio relativa de retas e planos); itens que avaliam a comunicao matemtica.

13

O indicador considerado para quantificar os resultados por item a percentagem da classificao mdia sobre a cotao total do item. Dito de outra forma, a parte da cotao do item que atribuda e que concorre para a classificao total de uma prova. Por exemplo, num item com 10 pontos, um valor de 40% significa que, em mdia, os alunos alcanam uma pontuao de 4 pontos.

Pgina 16 de 18

Concluso
Os resultados das provas finais de ciclo e dos exames finais nacionais de 2013, numa anlise preliminar, permitem concluir que o desempenho mdio dos alunos portugueses, em sede da avaliao externa, mostra sinais de estabilidade. Esta constatao, que s poder ser confirmada com a anlise dos resultados por item, a realizar durante o prximo ano letivo, est em consonncia com o que tem sido habitual nos ltimos quatro anos. Assim, se verdade que enfrentamos um quadro de estabilidade nos resultados que permite inferir a ausncia de progressos na qualidade da aprendizagem, tambm verdade que estamos muito longe de um cenrio de degradao acentuada dessa mesma qualidade. As variaes das classificaes mdias dos alunos internos, entre 2012 e 2013, foram maioritariamente de amplitude diminuta, com oscilaes que, na generalidade das disciplinas, foi da ordem de um dgito (seja no ensino secundrio, numa escala de 0 a 200 pontos, seja no ensino bsico, numa escala de 0 a 100 pontos). Embora tambm se registe que nas principais disciplinas, aquelas que recorrentemente envolvem um maior nmero de alunos na realizao dos exames, as variaes tenham sido de sinal negativo, a sua fraca amplitude e a ausncia de uma tendncia duradoura no sentido de um retrocesso fazem com que a variao global observada se inscreva numa normal variao interanual. Entende-se por um quadro normal de variao interanual de resultados aquele que comporta, de forma alternada, descidas ou subidas das classificaes mdias de reduzida amplitude. A ttulo de exemplo, apresentam-se os resultados do item que avalia a capacidade da escrita nas provas de Portugus do 9. ano e do 12. ano (tabela 4). Como a formulao do item (e dos critrios de classificao) se tem mantido inalterada, no se pode recorrer explicao fcil de que os resultados no melhoram, ou at pioram, por as provas serem mais ou menos difceis. Impe-se, assim, concluir que estes resultados ilustram a estagnao dos desempenhos dos alunos, em especial num domnio da aprendizagem com forte interao transversal nas demais reas do saber.
Tabela 4 Resultados do item de escrita (Grupo III) das provas de Portugus do 9. ano e do 12. ano, realizadas por alunos internos de 2009 a 2013 (valores em percentagem da classificao mdia/cotao total)

Anos 2009 2010 2011 2012 2013

9. ano 62,5% 62,8% 63,0% 60,3% 62,8%

12. ano 56,1% 53,5% 53,9% 56,1% 54,2%

Em termos globais, como reiteradamente afirmado nos relatrios do GAVE (Exames Nacionais e Testes Intermdios), publicados desde 2009, a anlise dos resultados por item, muito mais fivel e elucidativa do que a anlise das classificaes mdias, no indicia qualquer melhoria significativa no desempenho global dos alunos, mas tambm no sustenta qualquer cenrio de regresso na qualidade da aprendizagem. Pgina 17 de 18

Anexo
Exames Finais Nacionais do Ensino Secunrio Resultados (pontos)
Alunos autopropostos

Provas realizadas
Diferena Classificao

Totais Provas
1.F/2012 1.F/2013 Diferena 2013-2012

Alunos Internos

2013
Al-AA 2013 Autoprop. (%)
42 26 54 35 42 24 39 27 34 29 29

2012
Autoprop. (%)
44 34 64 31 38 26 37 30 31 25 32

2013

1.F/2012 1.F/2013

2013-2012

702 Biologia e Geologia 706 Desenho A 712 Economia A 714 Filosofia 715 Fsica e Qumica A 719 Geografia A 708 Geometria Descritiva A 623 Histria A 635 Matemtica A 835 Matemtica Aplicada s Cincias Sociais 639 Portugus

93 120 101 78 75 103 90 110 87 95 95

81 121 100 91 78 94 102 99 82 87 89

-12 1 -1 13 3 -9 12 -11 -5 -8 -6

98 123 117 89 81 107 107 118 104 106 104

84 124 113 102 81 98 122 106 97 99 98

-14 1 -4 13 0 -9 15 -12 -7 -7 -6

76 112 88 72 74 82 71 80 54 59 67

8 12 25 30 7 16 51 26 43 40 31

50933 5307 11010 8427 52591 19757 9113 15705 47562 9343 70807

Total

Diferena

29620 3944 5073 5445 30333 15059 5592 11462 31413 6587 50127

Disciplinas em que o nmero de provas realizadas por alunos internos igual ou superior a 2500

Classificaes negativas (< a 95 pontos) Variao interanual dentro do intervalo igual ou inferior a 1 valor (14 pontos) AI - Alunos Internos; AA - Alunos autopropostos Diferena igual ou superior a 2 valores (15 pontos)

Fonte: GAVE/JNE 2012, 2013

Internos

Pgina 18 de 18