Escolar Documentos
Profissional Documentos
Cultura Documentos
das
organizaes
governamentais
(OGs)
organizaes
no-
Maria do Carmo Brant de Carvalho. Doutora em Servio Social pela Pontifcia Universidade Catlica
de So Paulo (1974) e pela cole des Hautes tudes en Sciences Sociales, Paris (1985-1086).
Professora titular no Programa de Ps-Graduao em Servio Social e membro do Conselho da
Comunidade Solidria. Esta 2a edio foi revisada em conjunto com Maria Luiza Mestriner (Doutora
em Servio Social pela PUC-SP) e Denise Neri Blanes (Doutora em Servio Social pela PUC-SP)
A avaliao
tem
importncia
estratgica
para
acompanhar
As Dimenses da Avaliao
Atualmente, a avaliao tem assumido uma nova amplitude, ganhando
relevncia na avaliao das prprias organizaes que desenvolvem projetos
sociais. A avaliao institucional lhes propicia ganhos de modernizao, enquanto
lhes permite verificar:
O Que Avaliao
Avaliar atribuir valor, medir o grau de eficincia, eficcia e efetividade de
polticas, programas e projetos sociais. A avaliao identifica processos e resultados,
compara dados de desempenho, julga, informa e prope. Tm como objetivo
maximizar a eficcia dos programas na obteno de seus fins e a eficincia na
alocao de recursos para a consecuo dos mesmos 10. Em termos mais amplos,
Os objetivos da avaliao de polticas ou programas so muitos, mltiplos e no
necessariamente excludentes...11.
A literatura produzida sobre a avaliao de programas e projetos sociais,
geralmente circunscrita a concepes tradicionais de avaliao. Porm,
recentemente tem-se refletido a maior variedade e riqueza de modelos de avaliao.
De qualquer forma, a literatura existente revela a busca de assegurar a essa rea
reconhecimento cientfico.
Se as concepes tradicionais colocaram nfase no sistema de ao movido
pelo projeto e, portanto, na quantificao de metas e resultados produzidos
(avaliao quantitativa), as concepes seguintes colocaram nfase na lgica dos
atores que movem o projeto e, portanto, na avaliao dos processos que imprimem
direo e dinmica ao (avaliao qualitativa).
Atualmente, h uma tendncia em valorizar concepes mais abrangentes e
totalizantes de avaliao no campo social, uma avaliao que busque apreender a
ao, sua formulao, implementao, execuo, processos, resultados e impactos.
Uma avaliao que busque captar a interrelao entre sistemas de ao e lgica dos
atores. No mais uma avaliao apenas de resultados, mas tambm de processos.
No mais uma avaliao que apenas mensura quantitativamente os benefcios ou
malefcios de uma poltica ou programa, mas que tambm qualifica decises,
processos, resultados e impactos.
10
11
12
10
Eficincia
A gesto de um projeto ser to mais eficiente quanto menor for o seu custo e
maior o benefcio introduzido pelo projeto.
A avaliao da eficincia de um projeto verifica e analisa a relao entre a
aplicao de recursos (financeiros, materiais, humanos) e os benefcios derivados
de seus resultados. Ou seja, a obteno de custo mnimo (menor nmero de
insumos de pessoal, de moeda) para o maior nmero e qualidade de benefcios.
Segundo Arretche13, a avaliao da eficincia bastante necessria no mbito
das polticas e programas pblicos devido escassez de recursos, que pressiona
por uma maior racionalizao do gasto; tambm porque, no Brasil, paralelamente
escassez de recursos pblicos, os universos populacionais a serem cobertos pelos
programas sociais so de enormes propores. Finalmente, a autora afirma que as
avaliaes de eficincia impem-se porque a eficincia um objetivo democrtico.
(...) A probidade, competncia e eficincia no uso de recursos publicamente
apropriados constituem, em regimes democrticos, uma das condies para a
confiana pblica (public confident) no Estado e nas instituies democrticas.
Eficcia
13
11
12
14
Arretche, M. Tendncias no estudo sobre avaliao..., In: Avaliao de Polticas Sociais uma
questo em debate, p. 32, IEE/Cortez, So Paulo, 1998.
13
Fases da avaliao
Compreendia-se a avaliao, de modo geral, como ltima etapa do ciclo de
aes desencadeadas por um projeto social. O objetivo, nesse caso, era conhecer o
grau de cumprimento das metas e explicar post-facto as causas das discrepncias
entre as metas projetadas e as obtidas.
Avaliao ex-ante
Numa nova concepo de avaliao, pressupe-se que ela deve se antecipar
ao prprio projeto, para conhecer o chamado ponto zero, ou seja, o contexto anterior
interveno do projeto. Esse contexto, em sua dinmica envolve:
Uma
organizao
gestora,
com
suas
experincias,
recursos,
14
Monitoramento/acompanhamento avaliativo
Essa fase da avaliao se faz durante a execuo do projeto, buscando
apreender seus processos de implementao e execuo. O monitoramento durante
a implementao e execuo imprescindvel, pois fornece informaes importantes
sobre dificuldades ou desvios no desempenho do projeto que podem afetar a
obteno das metas ou resultados propostos, o que permite correes no decorrer
da ao.
O monitoramento acompanha processos e atividades previstos no plano de
ao, com vistas ao ajuste e correes imediatas no desempenho do projeto.
Investiga o processo com coleta de dados especficos, para identificar fatores
programticos que devem ser aprimorados ou que so explicativos dos sucessos
obtidos pelo projeto.
H dois fatores de risco que precisam ser evitados na realizao do
acompanhamento avaliativo:
Em primeiro lugar, restringir-se a fatores tcnico-instrumentais sem examinar outras
variveis do tipo organizacional, social e cultural que afetam consideravelmente a execuo de
programas, Em segundo lugar, se prender demasiado programao formal, inicial do programa para
fazer o acompanhamento e a avaliao, e isto pode desencaminhar a compreenso do que sucede
com o programa e os resultados.15
15
adequao s demandas;
pelo projeto;
e competncias organizacionais;
de
Os produtos ofertados.
obter toda aquela informao que, ao incio, a meio caminho e uma vez
finalizado o programa, ser necessria para avaliar seu impacto, sua eficcia e
eficincia.
-
problemas.
-
distinto do desenhado.
Por fim,
16
empreender
-
projeto;
Utilizar-se
de
poucos
indicadores,
porm
que
sejam
chaves,
fundamentais.
A observao, o registro de fatos significativos, as reunies com a equipe de
gestores e operadores do projeto, as reunies com usurios ou beneficirios do
projeto, as reunies com os parceiros (organizaes complementares, agentes
16
Francisco Albuquerque, Instituto de Desarollo Regional, Sevilla (em publicao), 1999 p. 80.
17
17
18
Colocando no contexto dos projetos sociais, Leandro Lamas Valarelli 19, define
indicadores como parmetros qualificados e/ou quantificados que detalham em que
medida os objetivos foram alcanados. Como uma espcie de marca ou
sinalizador que busca expressar aspectos da realidade sob uma forma que se
possa observ-lo ou mensur-lo; identificando uma varivel que expressa o
fenmeno de interesse.
Para tanto, ilustra com um exemplo do cotidiano: a temperatura corporal
uma das variveis para se avaliar se a pessoa est doente. A partir dela, construiuse uma escala de variao da temperatura (36,5 graus Celsius considerada normal
quando medida por 3 minutos). Desta forma a doena a situao a ser avaliada, a
temperatura o indicador; a escala especificada em graus Celsius (que define o
que normal e o que febre) e o termmetro so os instrumentos de verificao.
Um dos indicadores internacionalmente reconhecidos o IDH ndice de
Desenvolvimento Humano, produzido e divulgado pela ONU Organizao das
Naes Unidas. Constitui-se num indicador sinttico, composto pela renda,
educao e sade dos vrios pases com o mesmo peso:
Sade esperana de vida ao nascer.
Educao taxa de matrculas e taxa de alfabetizao.
Renda PIB per capita.
A escala varia de 0 a 1 e denominada de Gini. Quanto mais prximo do 1
significa melhor qualidade de vida.
Para aferir padres de qualidade de vida, h, portanto, que se correlacionar
as diversas reas da vida social.
18
19
19
med-lo.
-
impresses subjetivas.
-
Fcil de interpretar
20
Aspectos medidos
Indicadores objetivamente verificados
Quantidade
Quanto?
Qualidade
O que?
Pblico-alvo
Quem?
Tempo/perodo
Quando?
Lugar
Onde?
Fontes de informao
Apropriadas, especificas, relevantes, viveis, acessveis, custo razovel 20
20
Francisco Albuquerque, Instituto de Desarollo Regional, Sevilla (em publicao), 1999 p. 89-90.
21
22
21
23
22
24
25
26
Cf. G. D. Majone, Evidence argument and persuasion, p. 40; Joan Subirats, Evaluacin de polticas
de intervencin social..., p. 254
24
Joan Subirats, Evaluacin de polticas de intervencin social..., p. 254
27
28
25
Maria do Carmo Brant de Carvalho. Servios de Proteo Social s Famlias, Srie Programas e
Servios de Assistncia Social IEE/PUC-SP; MPAS/SAS, 1998, p. 53 e 54.
29
Maria do Carmo Brant de Carvalho. Servios de Proteo Social s Famlias, Srie Programas e
Servios de Assistncia Social IEE/PUC-SP; MPAS/SAS, 1998, p. 54 e 55.
30