Você está na página 1de 25

Avaliao Diagnstica

Programa Brasil Alfabetizado

Diretoria de Polticas de Educao de Jovens e Adultos


Ministrio da Educao do Brasil
Santiago de Chile
Dezembro de 2008

Programa Brasil Alfabetizado




Criao do Programa;

Finalidade;

Funcionamento;

Caractersticas do pblico atendido;

Abrangncia do Programa.

Plano de Avaliao do Programa Brasil


Alfabetizado


Sistema de avaliaes para o Programa Brasil Alfabetizado


instituido em 2004.

Este sistema objetiva:


a) Subsidiar os gestores do Programa;
b) Adequar o Programa realidade de sua execuo;
c) Melhorar a eficincia e efetividade.

Inicialmente, foram propostas avaliaes:


a) Ex-ante
b) Ex-post

Plano de Avaliao do Programa Brasil


Alfabetizado


Foram utilizadas 36 avaliaes agregadas em 18 funes.


Estas foram distribudas em quatro macrofunes, a saber:
a) Mobilizao de recursos;
b) Eficincia no uso dos recursos;
c) Eficcia das aes realizadas;
d) Seleo adequada dos beneficirios.

Foi elaborada uma amostra de alfabetizandos, de


alfabetizadores e de turmas para aplicao de questionrios
scio-econmico, de gesto e o Teste Cognitivo, alm do
prprio entrevistador responder a um roteiro para observaes.

Avaliao Diagnstica do Programa


Brasil Alfabetizado
A Avaliao Diagnstica do Programa Brasil Alfabetizado
composta de quatro eixos de aes:
a) Avaliao Cognitiva Amostral;
b) Avaliao Cognitiva Universal;
c) Aplicao do INAF;
d) Interao com a Provinha Brasil.

Avaliaes Cognitivas Amostral


e Universal


As Avaliaes Cognitivas tm por finalidade revelar quais as


competncias e habilidades que os alunos possuem em leitura,
escrita e matemtica.

Eixos de avaliao cognitiva integrados:


a) Avaliao Amostral;
b) Avaliao universal;

As avaliaes possuem a mesma matriz de referncia cognitiva e


banco de itens comum.
Elas se diferenciam nos mtodos de aplicao, de correo e
nos objetivos.

Avaliao amostral
A avaliao amostral permite:


O acompanhamento do processo de alfabetizao e aferio


de resultados;

A construo de uma escala de nveis de aprendizagem que


traz subsdios para a equipe pedaggica do programa;

Com custos relativamente baixos, fornecer um retrato da


situao da populao avaliada.

Avaliao Universal
Avaliao Universal visa:


Fornecer instrumental de avaliao diagnstica para as


Secretarias Estaduais e Municipais de Educao;

Permitir que as instituies parceiras encaminhem para a


Educao de Jovens e Adultos aqueles alunos que j dominem
determinadas competncias e habilidades;

Permitir que os alfabetizadores planejem as atividades de sala


de aula de acordo com as especificidades de cada
alfabetizando.

Histrico da Avaliao Cognitiva


Amostral
Ano 2003
 Teste de Aplicao individual;
 Pr-teste com 200 alfabetizandos;
Ano 2004
 Teste de aplicao coletiva;
 Pr-teste com 600 alfabetizandos;
Ano 2005
 Teste de aplicao coletiva no mbito do PBA;
 Aplicao de testes de entrada e sada com os mesmos
alfabetizandos;
 1400 aplicaes (entrada e sada).

Histrico da Avaliao Cognitiva


Amostral
Anos 2006 e 2007


Teste de aplicao coletiva;

Aplicao no mbito do Plano de Avaliao do Programa


Brasil Alfabetizado;

Aplicao de testes de entrada e sada com os mesmos


alfabetizandos;

4.000 aplicaes (entrada e sada).

INAF ndice de Alfabetismo


Funcional


O INAF Indicador de Alfabetismo Funcional do Instituto Paulo


Montenegro, revela os nveis de alfabetismo funcional da
populao adulta brasileira.

Principais objetivos:
a) Oferecer informaes sobre as habilidades e prticas de
leitura, escrita e matemtica de brasileiros entre 15 e 64 anos;
b) Estimular iniciativas da sociedade civil;
c) Subsidiar a formulao de polticas pblicas nas reas de
educao e cultura.

Provinha Brasil


Provinha Brasil - instrumento de avaliao cognitiva para a


alfabetizao infantil, do INEP.

Integrao entre Provinha Brasil e Teste Cognitivo do


Programa Brasil Alfabetizado:
1) Compatibilizao entre as escalas;
2) Incluso de itens comuns aos dois estes permitindo:
a) Trabalho integrado;
b) Fortalecimento da qualidade e da continuidade da
educao.

Definio dos domnios da


Aprendizagem
Matrizes de Referncia :


uma referncia de avaliao, no abrange todas as


capacidades;

Descrevem conhecimentos considerados fundamentais em


Leitura/Escrita e em Matemtica.

Apresentam um conjunto de capacidades e de conhecimentos


passveis de serem verificados.

Est fundamentada tambm nos pressupostos do letramento.

Formato dos instrumentos de


Avaliao


Na Avaliao Cognitiva Amostral:


a) 20 cadernos de prova
b) Metodologia- Blocos Incompletos Balanceados - B.I.B
c) 10 itens de Leitura/Escrita, 2 itens de Leitura individual,
itens de Matemtica.
Na Avaliao Cognitiva Universal:
a) 02 cadernos de prova;
b) Manual do Aplicador;
c) Cadernos do Aplicador;
d) Gabaritos Comentados.
Diagramaes adaptadas realidade do pblico-alvo.

12

Metodologia de anlise de
resultados
Na Avaliao Cognitiva Amostral:
 Testes aplicados e corrigidos por uma instituio de
pesquisa;
 Teoria de Resposta ao Item (TRI), de 3 parmetros;
Na Avaliao Cognitiva Universal:
 Testes aplicados e corrigidos localmente (equipes
das Secretarias de Educao).
 Teoria de Resposta ao Item (TRI) de 1 parmetro.

Divulgao dos Resultados


Avaliao Cognitiva Amostral
 Instituio de pesquisa de campo - aplicao dos testes,
correo, constituio dos bancos de dados e processamento
das informaes;
 Instituio especialista em medidas educacionais e
alfabetizao - faz a anlise psicomtrica e pedaggica.
Avaliao Cognitiva Universal
 Aplicada e corrigida pelas equipes das Secretarias Estaduais
e Municipais de Educao;
 Resultados so informados via Sistema (on line) para anlise
por intermdio da utilizao da TRI de 1 parmetro.

Principais Resultados
Anlise dos dados : Modelo Multinvel


No teste de matemtica : homens, mais jovens, com


necessidade de lentes corretivas, que declararam saber ler e
escrever ao final do curso e que j haviam freqentado a escola se
saem melhor no teste.

No mbito das turmas, o estudo demonstrou que quanto maior o


percentual de alunos com necessidades especiais, pior o
desempenho mdio da turma.

Outras variveis significativas foram: ndice de planejamento


pedaggico e percentual de alfabetizandos na turma que
receberem visitas de agentes de sade em seus domiclios.

Principais Resultados


No teste de Leitura/escrita, as variveis significativas no


nvel aluno foram: idade, se portador de necessidades
especiais, se sabe ler e escrever e se j freqentou a
escola. O maior efeito foi na varivel saber ler e escrever.

Dentre as variveis da turma, destacaram-se: percentual de


alunos portadores de necessidades especiais, nmero de
dias de aula por semana e percentual de alfabetizandos
cuja me sabia ler e escrever.

Tambm no caso agregado, quanto maior o percentual de


alunos com necessidades especiais, pior o desempenho
mdio da turma.

Principais xitos
Na Avaliao Cognitiva Amostral:







Elaborao de instrumentos de avaliao especficos;


Constituio de banco de itens de avaliao;
Construo da escala nacional de proficincia em Leitura/Escrita
e Matemtica para o processo de alfabetizao;
Avaliao formativa da equipe tcnica do Ministrio da
Educao;
Subsdios para aperfeioamento e redesenho das aes do
Programa Brasil Alfabetizado;
Subsdios para o desenho das estratgias da Avaliao
Cognitiva Universal.

Principais xitos
Na Avaliao Cognitiva Universal:






Adeso das instituies parceiras;


Construo de documentos de apoio;
Construo de estratgias para incentivar a continuidade de
estudos em Educao de Jovens e Adultos;
Atualizao dos conhecimentos do professor por meio da
anlise dos eventuais erros dos alunos;
Desenvolvimento de atividades pedaggicas especficas para
cada turma.

Principais dificuldades
Avaliao Cogntiva Amostral:


Temporalidade da consolidao e anlise dos resultados;

Os eventuais atrasos na disponibilizao dos resultados;

Atuao em resposta:
O MEC vem trabalhando junto s instituies responsveis e
aos parceiros para traar uma estratgia conjunta para fazer
frente a este desafio.

Principais dificuldades
Avaliao Cognitiva Universal:


A construo de estratgias adequadas para coleta dos


resultados por intermdio de sistema de informao on line;

Processo paulatino de adeso dos parceiros, internalizando


o carter diagnstico da avaliao.

Consideraes sobre a Avaliao de aprendizagem


na Educao de Jovens e Adultos

A experincia brasileira tem demonstrado a necessidade de um


trabalho em duas frentes:
a) Rigor na aplicao e anlise dos resultados;
b) Subsidiar o trabalho pedaggico dentro de sala de aula;

Estratgia dupla:
a) Estruturao de uma pesquisa externa;
b) Envolvimento dos professores em um trabalho que garanta
sua autonomia e incentive o respeito e valorizao das
especificidades e dos saberes dos sujeitos na Educao de
Jovens e Adultos.

Consideraes sobre a Avaliao de aprendizagem


na Educao de Jovens e Adultos

Aspectos relevantes:


A participao de instituies com especializao em


determinadas dimenses da avaliao;

A integrao da avaliao cognitiva com outras avaliaes;

O desenvolvimento de uma rede de aprendizagem e


produo de conhecimento que potencializa:
a) elaborao de instrumentos;
b) metodologia, aplicaes e interpretao dos resultados.

OBRIGADO
Ministrio da Educao do Brasil MEC
Secretaria de Educao Continuada, Alfabetizao e
Diversidade
Diretoria de Polticas de Educao de Jovens e Adultos
Endereo: Esplanada dos Ministrios, Bloco L, Sala 711
CEP 70047-900 Braslia DF. Brasil.
Telefone: 55-61-21049530
Fax: 55-61-21049423
http://www.mec.gov.br/secad
e-mail: deja@mec.gov.br