Brandao D - Monitoramento e Avaliacao para Politicas Publicas de Infancia e Adolescencia - Artigo

VI Seminrio Pr - Conselho
A cidadania das crianas e dos adolescentes eu impacto na democracia

Instituto Telemig Celular - Julho 2006
Documento orientador para apresentao sobre avaliao e monitoramento
VI Seminrio Pr-Conselho
Monitoramento e Avaliao
Ferramentas para a qualificao das polticas pblicas para a infncia e adolescncia
ANOTAES ORIENTADORAS DA APRESENTAO
1
Daniel Brando
2
Instituto Fonte para o Desenvolvimento Social
3
1. INTRODUO
Observao: pela absoluta predominncia de lideranas femininas no espao deste seminrio e dos
prprios conselhos de direitos e tutelares, utilizarei somente o gnero feminino em minha linguagem.
Agradecimento ao Instituto Telemig Celular.
A avaliao alcanou um lugar de destaque nos debates e nos discursos do setor, agora
necessrio que ela alcance lugar na prtica de projetos sociais e de conselhos de direitos e
tutelares. S a experincia no campo, na ao, pode nos fazer avanar. Convido todas a
irem para a rua fazer avaliao. Vamos pra rua!
Por isso, tentarei ser prtico. Vou me fundamentar em um pouco de teoria, mas oriento a
fala para tentar ajud-las a realizar avaliaes dentro de suas lutas cotidianas. A ver se
logro isso.
Guardo certo radicalismo ao redor de alguns temas. Isso feito conscientemente com o
intuito de fortalecer o debate, estimular a crtica e provocar as ouvintes. Acho que um
radicalismo pedaggico.

1
Estas so notas orientadoras que sero acrescidas de argumentao durante a apresentao.
2
E mail: daniel@fonte.org.br
3
www.fonte.org.br
Minha apresentao dividida em trs grandes blocos, que seguem a esta breve
introduo. No primeiro vou propor um conceito de avaliao, construdo a partir da
desconstruo de trs mitos ou mximas que me parecem hegemnicas hoje no setor.
No segundo bloco tratarei de propor uma proposta de como avaliar, de maneira muito
simples, mas real e possvel. O terceiro bloco dedicado a algumas ponderaes sobre
oportunidades e desafios para o desenvolvimento da avaliao em conselhos.
Inicialmente gostaria de trazer uma imagem: A avaliao tem uma alma feminina. Ela
uma prtica que exige escuta, acolhimento, abertura, ter dureza sem perder a ternura,
alteridade. Caractersticas que esto, em geral, mais presentes em mulheres do que em
homens.
2. O QUE AVALIAO
Gostaria de propor um conceito de avaliao a partir da derrubada de trs idias muito
presentes hoje no setor social e que me parecem insuficientes para definir a avaliao.
Estes trs pontos so:
_ Avaliao uma prtica para verificar se os objetivos do projeto/ trabalho/ conselho
foram alcanados;
_ Avaliar medir.
_ Todos os projetos sociais devem ser avaliados.
As afirmaes no so falsas, mas so parciais e esto longe de definir o que avaliao.
Vamos por partes:
Avaliao uma prtica para verificar se os objetivos do projeto/ conselho foram
alcanados.
A perspectiva de que avaliao est relacionada a objetivos diz respeito a uma abordagem
de avaliao chamada Avaliao centrada em objetivos. Esta perspectiva busca saber
(basicamente) se o que foi planejado foi atingido. Mas este tipo de avaliao tem uma
sria restrio: no campo social muitas vezes o alcance do trabalho realizado
ultrapassa os limites dos seus objetivos. Surgem outros resultados (no esperados),
ocorrem mudanas no projeto que levam a diferentes resultados, a lugares novos, no
previstos inicialmente. E a abordagem centrada em objetivos no permite olhar para estes
novos contornos, ela est presa no que foi formalizado no incio do processo. Os
objetivos se tornam uma camisa de fora para esta avaliao. E com isso se perde
uma possibilidade enorme e muito rica de explorar outros aspectos relevantes da
realidade social.
Existem outras abordagens possveis, no vale a pena cit-las todas aqui porque so
muitas e este tema no o foco de nossa discusso aqui. Entretanto pertinente
contextualizar apenas uma outra abordagem, pois com base nela que est estruturada a
proposta de avaliao que vou apresentar: a avaliao centrada nos participantes ou
avaliao participativa.
Esta abordagem orientada pelo envolvimento e participao de todas aquelas que esto
envolvidas em determinado projeto social na construo e desenvolvimento da avaliao.
A participao fundamental para determinar os valores, critrios, necessidades e dados
da avaliao. Esta uma avaliao que tem uma premissa democrtica e como
falamos aqui neste seminrio sobre impacto na democracia, absolutamente urgente e
necessrio adotar ferramentas em nosso trabalho que sejam tambm democrticas. Os
Conselhos so espaos democrticos, so espaos de participao da sociedade civil,
espaos de exercer direitos. Uma avaliao participativa, que envolva as conselheiras, as
entidades, bem como outros sujeitos do sistema de garantias de direitos das crianas e dos
adolescentes coerente com a prpria proposta dos Conselhos. Como pode ser esta
participao uma excelente questo que pretendo abordar um pouco mais adiante.
Avaliar medir.
O outro ponto bem vigente nas cabeas de lideranas do setor social a idia de que
avaliar medir. Isto de um reducionismo absurdo, quase revoltante. uma injustia
com a grandeza da avaliao. Esta concepo vigente por uma srie de razes, mas
basicamente ela se relaciona com a forma que o mundo concebeu a cincia nos ltimos
sculos. fruto da modernidade cientfica. Criou-se uma idia de que s existe o que
mensurvel, o que se traduz em nmeros, mesmo na rea social. Se falam isso sobre a
fsica, tudo bem, mas falar isso em temas como a antropologia, a sociologia, a psicologia
e outros de um absurdo descabido. Esta viso prega que s existe uma verdade nica no
mundo e que a cincia pode desvend-la. Que esta verdade nica objetiva e que ns,
seres que a estudamos, podemos atuar neutramente neste processo. Porque isso se criou e
hoje hegemnico uma longa - e bela - histria. Porque a histria da cincia, de como
o homem conhece o mundo, ou seja, do prprio conhecimento, o que nos leva para a
filosofia.
Ns, no trabalho que fazemos, temos o privilgio de explicar o mundo de outras formas,
diferentes dos nmeros, mantendo um absoluto respeito cincia mas a outras formas
de entender a cincia. Temos a possibilidade de trabalhar com outras linguagens. Por isso
ouso dizer que nos podemos pensar poetas. Acho que sim, que vocs so poetas porque
lidam com a dureza de uma maneira bela. Isto para mim poesia. E que delcia que
estar entre poetas. Poetas, como diz o maravilhoso Manoel de Barros, gostam mais dos
vazios do que dos cheios, falam que os vazios so maiores que o infinito. Poetas enchem
os vazios com peraltagens. D para mensurar isso?
Evidentemente que h algum espao para a medida. H lugar para nmeros em nossas
avaliaes, h espao para a quantificao. Mas no se pode dizer que isso, s e
estritamente, avaliao. Avaliar muito mais bonito que apenas medir.
Todos os projetos sociais devem ser avaliados.
Muito se fala sobre avaliao hoje no setor. palavra presente em congressos, debates,
fruns. A beleza disso est em trazer o tema para a pauta e desenvolv-lo na prtica.
Instiga-nos a trabalh-la de maneira mais madura, a observar os campos onde ainda
necessrio avanar. Observar os vazios que, como poetas, nos atraem mais que os cheios.
O perverso desta histria, que eu observo estar ocorrendo, que se afirma
constantemente que avaliar fundamental, importante, precisa ser incorporado a todo e
qualquer projeto. Ou seja, que todos os projetos devem ser avaliados. Entretanto, com
isso h o risco de tornar a avaliao uma norma ou um dogma. E assim perde-se a
noo do sentido que realmente pode motivar a avaliao. E quando se torna uma norma
ou dogma, a avaliao ganha um forte atributo moral. Quem avalia o bom cristo, quem
no avalia o herege. Divide-se o mundo entre o bem e o mal. Diaba aquela que no
avalia.
Isso um grande erro. Como eu disse, avaliao no se impe. Dogmas so impositivos.
Avaliao imposta controle e o controle tem outras atribuies. Controle est
relacionado hierarquia, ao mando, sano.
A avaliao s se torna dever quando por ela fazemos uma opo. S opta quem
livre. Isso significa que avaliao no se impe, avaliao se exerce. A avaliao est
relacionada liberdade, tarefa de homens e mulheres livres que pensam sua prpria
prtica e atuao no mundo. S quem livre pode empreender um processo que lhe faa
sentido. E sentido a mola motriz para uma avaliao que se quer participativa e
transformadora.
Frente a isso, cabe-nos perguntar: O que , ento, avaliao?
Proponho uma concepo que me parece alinhada com novas formas de se pensar
avaliao. Eu ousaria dizer que avaliar conhecer. Avaliar um ato em busca de
conhecimento. Simples assim, mas nem to simples quanto aparenta.
O que significa conhecer?
importante um esclarecimento mnimo para no mistificar tambm a nossa
compreenso sobre conhecer. Conhecer significa compreender melhor e em maior
profundidade a realidade que nos cerca e onde atuamos, significa nos apropriarmos
com mais consistncia desta realidade, tendo com isso maior poder para nela intervir.
Avaliar ento uma forma de melhor compreendermos a nossa realidade, o que fazemos,
como fazemos e as conseqncias (resultados) do que fazemos. Sabemos mais sobre o
nosso trabalho, nossas aes, nossos projetos, nossas poesias.
Assim, posso dizer que avaliar aprender. Ou seja, avaliar uma ao educativa.
Paulo Freire disse que homens e mulheres so seres inacabados e conscientes de seu
inacabamento. Ou, como diria Guimares Rosa, as pessoas ainda no foram terminadas.
A busca por nos fazermos terminados, para sermos mais, a busca da aprendizagem, da
educao. E a avaliao parte desta busca, sua travessia vai nesta direo.
Por isso, por ser um ato de aprendizagem, por ser uma ao educativa, a avaliao um
direito de homens e mulheres. Aprender um direito vida. Cito aqui o brilhante
filsofo argentino Enrique Dussel
4
para quem a possibilidade de criao, reproduo e
desenvolvimento de vida humana a possibilidade da tica. Creio que a aprendizagem

4
Dussel, E. (2002) tica da Libertao na idade da globalizao e da excluso. 2 Ed. Petrpolis: Ed. Vozes.
uma mediao para esta criao, reproduo e desenvolvimento. Por isso a avaliao
um ato tico que permite a vida ao ser humano.
A avaliao, quando entendida como um ato de aprendizagem, traz algumas variveis
importantes a serem consideradas em seu processo de realizao. A primeira que a
aprendizagem, entre adultos, como somos todas e todos aqui, nasce a partir dos desejos e
motivaes do sujeito. Parte de sua prpria vontade. Parte de dentro e no de fora.
vontade e no obrigao. Parte de sua curiosidade, de sua inquietao em quer saber mais
sobre algo. A avaliao precisa ser desejada e orientada pela curiosidade do conselho.
Com isso entramos no outro aspecto desta apresentao que Como avaliar.
3. COMO AVALIAR
Vou propor uma forma de avaliar que seja, antes de mais nada, simples e possvel. Quero
crer que uma outra avaliao possvel, para parafrasear o Frum Social Mundial. Corro
o risco de ser tachado de banal pelos formalistas, mas preocupo-me com a ao prtica,
com quem, como vocs, tem as mangas arregaadas no enfrentamento de adversidades
infinitas.
Proponho um processo que pode ser dividido em trs fases. Para cada fase h um
conjunto de perguntas orientadoras que apiam a discusso a ser feita.
FASE 1: Construo do Significado da Avaliao.
Nesta fase o Conselho busca:
(a) formar o grupo que participar da avaliao;
(b) definir o que este grupo entende por avaliao;
(c) definir o foco da avaliao.
As perguntas a serem respondidas neste momento so:
[1] Quem participa?
[2] O que entendemos por avaliao?
[3] O que queremos avaliar?
Busca-se, inicialmente e com certa flexibilidade, definir o grupo que ir participar da
avaliao. Aqui entra a questo da participao. Atores sociais para alm do conselho
podem ser convidados a contribuir. A liderana pode ser do conselho, que passa a contar
com o envolvimento de outras pessoas. A forma de participao tambm deve ser
equacionada. Acreditar que todas participando de tudo o caminho me parece uma idia
um tanto ingnua e que se mostra, na prtica, de difcil realizao. importante
identificar que contribuio cada um pode dar e receber e em quais momentos isso pode
ocorrer. Define-se um grupo que lidera o processo e outro que o apia. Por que buscar a
participao? Para que todas aquelas que esto envolvidas, de alguma maneira, com o
trabalho do conselho possam aportar suas perspectivas, trazer seus juzos e critrios, o
que aprofunda as possibilidades de leituras do mundo, potencializa a aprendizagem e
permite o desenvolvimento dos envolvidos como sujeitos de processo. Isto uma tarefa
difcil. Confesso que este um dos maiores desafios profissionais que tenho hoje: criar
possibilidades de ampliar a participao nas avaliaes que realizo.
Formado o grupo bsico para a avaliao, parte-se para responder a segunda pergunta que
compe esta fase:
[2] O que este grupo entende por avaliao?
Como j discutimos, h muitas concepes a respeito de avaliao e um grande risco
iniciar um processo desta natureza sem alinhar o grupo a este respeito. importante que
se converse sobre isso, sem a inteno de um embate terico, mas simplesmente com o
intuito de que o grupo construa, a partir de seus referenciais prprios, a sua compreenso
sobre o significado do processo que pretende detonar. Este debate permite que o
Conselho construa a sua prpria compreenso de avaliao. Isto, em si, j um
aprendizado.
Respondidas estas duas questes iniciais, pode-se dar o prximo passo que trata de
definir o foco da avaliao.
Isto significa: ter claro o que se quer avaliar. Muitos aspectos do trabalho do Conselho
podem ser avaliados, mas no possvel fazer tudo ao mesmo tempo, h que priorizar.
Por exemplo: o Conselho pode avaliar sua capacidade de mobilizao social, a
participao das entidades, a relao com outros atores do sistema de garantia de direitos.
Ou avaliar seu processo de trabalho, como est atuando, como realiza suas atividades. Ou
avaliar os resultados de sua ao, o impacto de sua atuao para o direito das crianas, a
contribuio para o desenvolvimento das entidades, a sua influncia na formulao de
programas e polticas pblicas focadas na criana. Isso so alguns exemplos. O que
define isso ser o que se fizer necessrio para o grupo em determinado momento, ou seja,
o que de fato contribuir para o fortalecimento do Conselho. A questo a ser respondida
neste momento :
[3] O que queremos avaliar?
Costumo sugerir que o foco da avaliao seja traduzido ou expresso na forma de uma
pergunta. Elas so capazes de dizer o que queremos ao mesmo tempo em que estimulam
nossa curiosidade, nos pem em movimento. Estas perguntas so fundamentais e a elas
chamamos de perguntas avaliatrias. Estas atuaro como guia de todo o trabalho. Toda
a investigao e a reflexo sero feitas para se responder a estas questes. Cuidem bem
desta etapa. Perguntas de avaliao so simples e poucas. No so infinitas, inumerveis.
So aquelas capazes de guardar em si um conjunto expressivo de outras questes.
Com as perguntas de avaliao definidas parte-se para um outro passo, ainda dentro da
definio do foco da avaliao, que trata de outro assunto muito discutido no setor, eu
diria at que um assunto mitificado: os indicadores. Para cada pergunta podem-se
construir indicadores, que so no fundo algo muito simples. So as variveis que nos
do pistas, que nos apontam sinais para responder s perguntas que formulamos. Os
indicadores iro nos orientar sobre informaes que devemos buscar, recolher, sobre as
quais devemos refletir. a explorao do conjunto de indicadores que nos dar a
resposta pergunta de avaliao.
Mas eu ousaria mais: diria que possvel fazer uma avaliao sem indicadores! Eles
ajudam, mas no so fundamentais. Eu tenho algumas experincias com isso, todas muito
interessantes. Trabalhei em avaliaes sem indicadores e o trabalho foi muito bom
porque apesar de no termos indicadores - que simplesmente no se fizeram importantes
ou necessrios nas discusses do grupo - tnhamos o essencial: timas perguntas.
Excelentes perguntas orientadoras para o trabalho.
FASE 2: Construo dos Espaos de Escuta
(d) Definir, estruturar e implementar os espaos de escuta da avaliao.
As perguntas a serem respondidas neste momento so:
[4] Quais as formas de levantarmos informaes sobre as nossas perguntas?
[5] Como registrar as informaes?
Com isso em mos: o que o Conselho entende por avaliao, suas perguntas e os
indicadores (que, reforo, no so obrigatrios para uma boa avaliao), entramos na
segunda fase da avaliao que chamamos da Construo dos Espaos de Escuta.
neste momento que o grupo elabora os espaos e formas de dilogo para escutar o que
se tem a dizer sobre as perguntas que formulamos. Ou, de outra maneira: a coleta de
informaes sobre as perguntas formuladas. A questo aqui :
[4] Quais as formas de levantarmos informaes sobre as nossas perguntas?
H que se definir quem participa de cada espao criado para se levantar informaes. Isso
depende de cada pergunta. Pode ser o prprio Conselho, as entidades, as famlias, a
promotoria, a polcia, o juizado, a cmara municipal, as prprias crianas e adolescentes.
Tudo depende do que queremos responder. Quando digo criar espaos de dilogo e
escuta para estes pblicos procuro ser simples. Devem-se construir espaos viveis,
possveis, realizveis pelo Conselho dentro de suas possibilidades. Conversas, reunies,
um questionrio simples. O fundamental criar a possibilidade de ouvir o outro de fato.
Prefiro o risco a alguma impreciso tcnica ao imobilismo que o rigor cientificista pode
nos trazer.
Outro aspecto a ser considerado aqui :
[5] Como registrar as informaes?
Manter uma sistemtica de registro, que sejam anotaes, gravaes ou outros, sempre
focada nos fatos, no que foi dito, visto, escutado, muito importante para democratizar a
informao com todas aquelas que participam do processo, para alimentar uma boa
anlise das informaes, que traz a prxima fase para a boca de cena.
FASE 3: Atribuio de Sentido s Informaes
(e) Compreender as informaes a aprender a partir delas.
A pergunta a ser respondida neste momento :
[6] O que significam estas informaes?
Frente s informaes levantadas, torna-se necessrio compreend-las em profundidade,
refletir sobre o seu sentido. So dados que precisam ganhar vida e isso s possvel com
a reflexo do grupo. Chamamos este o momento de atribuio de sentido s
informaes.
Este o outro momento da avaliao: quando, de posse de muita escuta, de muita
conversa, ou seja, de muita informao, o Conselho reflete sobre as informaes.
Atribui sentido ao dado. A informao per si nada significa, precisa ser transformada em
saber pelo grupo, precisa ser compreendida, o que ocorre frente a debates e reflexes.
Este momento permite sistematizar a compreenso do grupo da sua realidade, construir
alguns acordos, realizar os julgamentos, atribuir os mritos devidos, orientar a tomada de
decises.
Dados estes passos o Conselho estar mais maduro e preparado para empreender seus
projetos futuros, tomar decises conscientes e aumentar as possibilidades de impacto
de sua ao.
4. AVALIAO E CONSELHOS: OPORTUNIDADES E DESAFIOS
Falei aqui de maneira geral sobre a avaliao, so aspectos aplicados a qualquer situao
de projeto social. Gostaria agora fazer um recorte especfico e simples sobre esta questo
aplicada em Conselhos, tendo dois eixos orientadores: oportunidades e desafios para os
Conselhos realizarem avaliaes.
OPORTUNIDADES:
Contribui para acompanhar o trabalho das entidades que fazem parte do Conselho
de Direitos;
Contribui com a legitimidade do trabalho ao faz-lo transparente;
Pode fortalecer relaes de parceria, que no caso dos Conselhos de Direitos so
muito importantes para aumentar as captaes para o fundo da criana e do
adolescente;
Contribui para integrar o trabalho dos Conselhos de Direitos e Conselho Tutelar
ao criar espaos comuns de discusso;
Contribui para reunir informaes que ajudem a pressionar o governo a adotar
medidas, polticas ou programas na rea da infncia e juventude;
Pode fortalecer a coeso interna dos Conselhos, fortalecer a sua identidade (sua
misso, seus princpios, seus valores) ao criar espaos de discusso interna.
DESAFIOS:
Romper o imobilismo: Avanar na prtica da avaliao a partir das necessidades
e recursos locais, com a utilizao das tcnicas que esto ao alcance das pessoas.
Enfrentar as crenas vigentes e articular-se ao redor de suas prprias perguntas
utilizando os meios disponveis para respond-las. pr em movimento uma
avaliao possvel.
A constituio dos Conselhos como um grupo. Conselheiros tm mandatos por
tempo determinado (que variam em geral entre 2 e 4 anos). Para realizar uma
avaliao importante que o prprio Conselho, como grupo, esteja minimamente
estruturado, com coeso interna que permita a construo de alguns acordos.
Enquanto os Conselhos se formam e se preparam para sua prpria tarefa, a
avaliao encontra pouco espao para se desenvolver.
A disponibilidade dos Conselhos. O trabalho imenso e as pautas das reunies
so extensas. A avaliao precisa de espao, de tempo para ser trabalhada,
demanda disponibilidade dos conselheiros.
A sobreposio do interesse privado ou partidrio ao interesse pblico, que
leva a disputa poltica a ser focada no acmulo de poder por determinados grupos
e no no debate de propostas de transformao social. Algo muito comum e triste
no Brasil de hoje. Conselhos de Direitos so bipartites, tm em sua composio
50% de representantes da sociedade civil e 50% de representantes
governamentais. Os arranjos para a composio dos representantes do governo,
em alguns casos, configuram um cenrio onde o que predomina o interesse
partidrio/ privado sobre o pblico. Nesses casos, construir acordos mnimos para
uma avaliao e avanar em reflexes profundas e honestas de pouco interesse
para aqueles que esto no poder.
Algumas referncias bibliogrficas para quem tem interesse no tema:
Brando et al. (2005) Da Construo de Capacidade Avaliatria em Iniciativas
Sociais: algumas reflexes. In: Ensaio: Avaliao e Polticas Pblicas em Educao..
No. 48. Vol 13. Pg 361 374. Rio de Janeiro: Fundao Cesgranrio. Texto disponvel
em: http://www.fonte.org.br/documentos/artigo%2010.pdf
Chianca T; Marino E; Schiesari L. (2001) Desenvolvendo a cultura de avaliao em
organizaes da sociedade civil. Coleo Gesto e Sustentabilidade. So Paulo: I. Fonte/
Editora Global; 2001.
Demo, P. Avaliao Qualitativa, 2
a
edio, S.Paulo, Cortez Editora, 1988.
Marino, E. (2003). Manual de Avaliao de Projetos Sociais. 2 Ed. So Paulo. Ed.
Saraiva.
Silva, R. e Brando, D. (2003). Os quatro elementos da avaliao. In: Olho Mgico.
Vol. 10. No. 2. Londrina: CCS UEL. Texto disponvel em:
http://www.fonte.org.br/documentos/artigo%209.pdf
Silva et al (2006). Desafio do Nosso Tempo: a atuao em rede no sistema de
garantias de direitos de crianas e adolescentes. Resultados e reflexes do Programa
Pro-Direitos. (2006) Fundao Telefonica e Instituto Fonte. Texto disponvel em
http://www.risolidaria.org.br/docs/ficheros/200603300010_87_0.pdf
Worthen et al. (2004) Avaliao de Programas: Concepes e Prticas. 1 Ed. So
Paulo: Ed. Gente e Instituto Fonte.

Brandao D - Monitoramento e Avaliacao para Politicas Publicas de Infancia e Adolescencia - Artigo

Enviado por

Dados do documento

Título original

Direitos autorais

Formatos disponíveis

Compartilhar este documento

Compartilhar ou incorporar documento

Opções de compartilhamento

Você considera este documento útil?

Este conteúdo é inapropriado?

Direitos autorais:

Formatos disponíveis

Brandao D - Monitoramento e Avaliacao para Politicas Publicas de Infancia e Adolescencia - Artigo

Enviado por

Direitos autorais:

Formatos disponíveis

VI Seminrio Pr - Conselho

A cidadania das crianas e dos adolescentes eu impacto na democracia

Você também pode gostar