Indicadores de Qualidade

Brasil em 109
lugar no ranking
mundial de
A GESTO DE PROJETOS E A
CONSTRUO E O USO DE
INDICADORES
Leandro Lamas Valarelli

Rio de Janeiro julho/2005
Sumrio
1. POR QUE INDICADORES?
1.1. Um mundo em mutao
1.2. As prticas sociais relacionadas ao uso de indicadores
1.3. Algumas consideraes sobre a construo e o uso de indicadores
24
2. OS SISTEMAS DE PMA E OS INDICADORES
26
2.1. A lgica da cadeia de impacto
26
2.2. Implicaes da abordagem lgica para o desenho do M&A
27
2.3. Lidando com a complexidade da ao e das relaes sociais
30
2.4. Uma abordagem alternativa
31
2.5. Sistemas de M&A Aspectos Centrais
33
3. INDICADORES
34
3.1. Indicadores definies
34
3.2. Escolha e identificao dos indicadores
35
4. CONSTRUO E OPERACIONALIZAO DOS INDICADORES
36
5. CONSTRUO DOS INSTRUMENTOS DE COLETA E SISTEMATIZAO
40
6. EXEMPLOS DE INDICADORES
45
7. SISTEMATIZAO DE VARIVEIS, FONTES E INSTRUMENTOS DE COLETA
52
8. CARACTERSTICAS DE UM BOM SISTEMA DE INDICADORES
54
BIBLIOGRAFIA
55
Copyleft 2004 Leandro Lamas Valarelli

autorizada e incentivada a reproduo do contedo deste documento em qualquer meio de comunicao,
eletrnico ou impresso, desde que citada a fonte e autores.
Rua Cndido Mendes, 335/302 Rio de Janeiro - RJ - 20241-220

Tel: +55 (21) 2252-4470 / 9808-7200 leandrovala@uol.com.br
Construo e Uso de Indicadores de Resultados e Impactos
1. Por que indicadores? 1

1.1. Um mundo em mutao
Nos ltimos 15 anos - e mais fortemente de 6 a 7 anos para c - h um profundo deslocamento do peso
atribudo aos indicadores na interpretao e valorao das mais diferentes esferas e dimenses da vida
social. Como se configura este processo e quais os fenmenos que o determinam?
O que faz com que, atualmente, em diversos planos da atuao de organizaes e movimentos, redes e
articulaes, coalizes e organismos internacionais, debates, conflitos, etc., cada vez mais se ocupem
de discutir, formular, opor e difundir indicadores?
Alguns processos nos ajudam a compreender esta crescente atribuio de relevncia aos indicadores.
Ao mesmo tempo em que so distintos, guardando uma certa autonomia, so co-determinantes entre si.
Sem buscar estabelecer relaes de causalidade entre si, possvel circunscrev-los sob a forma de
algumas tendncias, descritas sinteticamente a seguir.
Globalizao, neoliberalismo e as mudanas na Cooperao Internacional
Tm sido j bastante descritos e analisados os efeitos da globalizao e da hegemonia da ideologia
neoliberal na cooperao internacional. Nestas anlises, que no sero retomadas aqui, so articulados
o declnio do debate sobre iderios e utopias e a ascenso de um modo de ver pragmtico,
operacional e pretensamente no ideolgico que marca o pensamento neoliberal.
Ainda, a reconfigurao da cooperao internacional combinando realinhamento e/ou reduo de
recursos e prioridades, maiores exigncias e controles sobre a performance das organizaes apoiadas
e reestruturao das prprias agncias para fazer frente reduo de suas fontes de recursos e s
novas exigncias de legitimidade junto ao pblico e aos governos de seus pases.
As exigncias de avaliao dos projetos, a implementao de PMA, a adoo de indicadores e o DI/DO
so, neste contexto, os meios que a cooperao internacional encontra para poderem demonstrar e
atestar a eficcia e eficincia de seus apoios e a magnitude dos impactos que proporcionam.
A outra faceta da globalizao, relativa liberalizao e unificao dos mercados e reduo do papel
dos estados nacionais, tambm trouxe para o assim chamado mercado a necessidade de ampliar e
estabelecer novos parmetros de comparao de situaes, produtos e processos, dentre os quais as
sries estatsticas sobre finanas nacionais, a srie ISO, os processos de certificao em vrias reas,
so alguns exemplos significativos.
Para os circuitos internacionais de mercadorias e capitais financeiros indicadores aparentemente
objetivos so chaves nos processos de deciso e para definir o comportamento de atores. Basta
lembrar o impacto que os chamados ndices de risco gerados por empresas de consultoria
internacional tm sobre o comportamento do fluxo de capitais especulativos e sobre as condies
polticas e sociais de vrios pases.
Novas tecnologias informacionais e as mudanas na comunicao
Outro fenmeno fundamental e intensamente vivido pelas ONGs e movimentos diz respeito s
mudanas de paradigma tecnolgico que revolucionou as formas e os circuitos de comunicao no
mundo. No entanto, em nosso campo no tm sido muito analisado e debatido os efeitos causados nas
mudanas das formas comunicao, interao, produo de informao em nossas sociedades,
alterando os ritmos, as linguagens e as formas de processamento de informao, de apreenso do real e
de atribuio de sentidos e significados.
Informaes sintticas, densas, rpida e facilmente assimilveis e capazes de produzir conceitos e
imagens tm sido uma das tendncias das relaes comunicativas. Cada vez mais o imaginrio coletivo
formado a partir deste tipo de informao.
Os indicadores, dados e opinies no se sustentam mais apenas (ou principalmente) pela credibilidade
de sua fonte, pelo seu contedo ou pelo modo como foram construdas: a informao rpida, de baixa
complexidade e que for capaz de interagir com os valores dos indivduos e alocar uma imagem acerca
Este texto extrado de outro texto maior do autor intitulado Um panorama sobre o estado da arte do debate sobre
indicadores.Rio de Janeiro: GT Indicadores NOVIB, 2001.
daquilo que tratam, a que fica, a que marca e prevalece. Surgem a gesto da informao e a gesto
do conhecimento como novas reas profissionais e de estudo.
Para as ONGs e movimentos sociais, as implicaes so enormes. No apenas relacionam-se ao uso e
domnio da informtica e dos circuitos de comunicao em rede, mas, sobretudo, ao desafio de
construo e domnio de novas linguagens e de novas formas de ao comunicativa que mantenha a
perspectiva tica, democrtica e cidad e, ao mesmo tempo, sejam eficazes.
Indicadores so mais do que mera imposio de inspirao neoliberal por parte dos agentes da
cooperao. Eles hoje integram e instituem novas linguagens, novas mediaes comunicativas que no
podem ser desconsideradas.
O que a psicologia, a lingstica e a neurologia nos ensinam que a linguagem formadora dos
indivduos, sua condio de existncia social, a base dos modos de sentir, perceber, compreender e
julgar o mundo que os cerca. Alterando-se a linguagem, alteram-se tambm as formas de apreenso do
mundo e seus significados. Queiramos ou no, os indicadores so parte deste lxico renovado.
A emergncia das ONGs como atores e os novos sujeitos coletivos
A visibilidade obtida pela ONGs na ltima dcada trouxe consigo a valorizao do seu papel, a maior
evidncia de suas aes e novas exigncias em termos de transparncia, divulgao e prestao de
contas (accountability) frente a um nmero maior de organizaes e setores da sociedade. Combinado
com a necessidade de ampliao de legitimidade e das bases de apoio social, poltico e financeiro, a
apresentao e divulgao pblica de objetivos e resultados tornou-se um imperativo.
A traduo destes resultados sob a forma de dados e indicadores tem sido uma das formas, embora no
a nica. Profissionais exclusivamente voltados para o trabalho de marketing, comunicao e mobilizao
de recursos tm sido constantemente acionados para desenvolverem novas formas de comunicao e
novas linguagens na relao com os demais pblicos e setores da sociedade.
No entanto, um novo aspecto competitivo e comparativo entre as ONGs se apresenta nesta busca de
legitimidade e recursos difcil de lidar porque tensiona com uma cultura tradicionalmente cooperativa e
no competitiva , o que induz produo de informaes de novo tipo que possam influenciar a
escolha por parte de quem se pede o apoio.
Por sua vez, a ao cada vez mais articulada sob a forma de redes e fruns, de carter propositivo em
torno de polticas setoriais e de desenvolvimento em escalas local, nacional e internacional, demanda a
instaurao de mecanismos e parmetros eficazes de monitoramento e avaliao dessas polticas. A
utilizao de indicadores, a partir de objetivos e metas enunciados ou a partir de referncias alternativas,
um dos pilares da atuao de vrias destas articulaes.
Por fim, o tambm crescente papel de ONGs, movimentos e redes na fiscalizao, controle,
implementao e avaliao de polticas, tem demandado co-responsabilidade pela definio de
estratgias e polticas e dos parmetros em torno dos quais sero avaliados. Indicadores, nesses casos,
referem-se no apenas a um ator externo s organizaes e redes governos ou instituies
internacionais, por exemplo mas tambm a si mesmas, expressando pactos, compromissos e metas a
serem alcanados por todos.
Novos espaos de poder e a gesto de polticas e territrios
Durante muitos anos, as ONGs e movimentos estiveram do lado de c em relao aos governos. A
avaliao crtica das polticas implementadas e seu monitoramento se faziam a partir da tica da
sociedade civil. Com a ascenso das experincias de governos democrticos e populares e a
conseqente adoo de polticas de inspirao democrtica e cidad tais como a priorizao do social,
o combate desigualdade e excluso e novas formas de participao popular na gesto pblica
torna-se necessrio acompanhar e aferir em que medida tem sido possvel reverter eficaz e efetivamente
as prioridades de governo e avanar na direo desejada.
Portanto, sem abrir mo da perspectiva a partir da sociedade, a questo agora passa a ser a de
identificar os melhores parmetros que permitam tanto aferir a intensidade e o sentido das mudanas
promovidas por polticas pblicas como tambm servirem de base para a sua orientao. Novos
indicadores, adequados a este novo lugar e tipo de desafio, se fazem necessrios.
Embora estejamos todos sendo de alguma forma envolvidos por todas estas dinmicas, algumas delas
podem se fazer mais presentes e significativas em determinados mbitos ou momentos de nossas
existncias.
Situar nossas necessidades e demandas por indicadores frente a estas dinmicas pode nos ajudar a
compreender quais delas estariam sendo, num determinado contexto, mais determinante ou importante.
Ganharamos um maior grau de liberdade de realizar opes polticas conscientes diante das
contingncias e das condicionalidades derivadas deste contexto.
1.2. As prticas sociais relacionadas ao uso de indicadores

A utilizao de indicadores como instrumentos de mensurao de aspectos da realidade e das prticas,
bem como o debate que a circunda, se d em mltiplos planos das diversas prticas sociais, polticas,
culturais e econmicas da tambm ampla gama de atores.
Os indicadores no interior das disputas polticas em torno dos sentidos do desenvolvimento os
indicadores de situao ou contexto
A consagrao dos indicadores econmicos como expresso da riqueza e do desenvolvimento deu-se
em escala mundial a partir dos anos 50, quando surgiram as ento novas instituies reguladoras da
ordem econmica internacional. A medida mais comum de desenvolvimento dos diversos pases
passaram a ser o PIB (Produto Interno Bruto) e PIB per capita, principalmente utilizadas pelas
instituies multilaterais.
Ao longo de mais de quatro dcadas, o reinado do PIB no foi abalado. Mesmo que vrios processos
mundiais de contestao da ordem econmica internacional tenham ocorrido neste perodo, levando a
novas concepes abrangentes de desenvolvimento, mesmo que vrias outras medidas em escala
nacional tenham sido utilizadas relativamente a outras dimenses da vida, como as relativas sade,
educao, trabalho, habitao, violncia, etc., mesmo assim as polticas macroeconmicas nacionais e
internacionais utilizavam-se do PIB como critrio e como norte.
Os Relatrios de Desenvolvimento Humano promovido pelo PNUD j carregavam novas concepes de
desenvolvimento e anlises das situaes dos pases sob ngulos que ultrapassavam a questo da
renda e abarcavam questes relacionadas a direitos sociais, polticos, culturais e ambientais, embora
nem sempre isentas de contradio.
O IDH surge em 1990, alterando a partir de ento profundamente a produo e a utilizao de ndices e
indicadores que buscassem captar aspectos ligados ao desenvolvimento humano das populaes nos
diferentes pases, regies, municpios e bairros.
Que razes explicam o impacto e a novidade do IDH? Indicadores relativos concentrao fundiria e
de renda, ao desemprego, habitao e sade j existiam e eram utilizados como instrumentos de
denncia dos efeitos perversos de polticas e da ordem internacional. Mas o IDH se apresenta e altera
debates e as prticas de investigao de atores no mundo todo. O texto seguinte, de Amartya Sen,
bastante esclarecedor.
Palavras de Amartya Sen, prmio Nobel de economia de 1998 (PNUD, 1998)

O IDH, que o Relatrio de Desenvolvimento Humano transformou em qualquer coisa como
uma nau capitnia, tem sido bastante bem-sucedido na utilizao como medida alternativa do
desenvolvimento, completando o PNB. Baseado, como est, em trs componentes distintos
indicadores de longevidade, educao e rendimento per capita , no se centra exclusivamente na
riqueza econmica (como o PNB). Dentro dos limites destes componentes, o IDH serviu para alargar
substancialmente a ateno emprica que a avaliao dos processos de desenvolvimento recebe.
Contudo, o IDH, que invariavelmente um ndice imperfeito, no deve ser visto como outra
coisa que no seja um movimento introdutrio para se conseguir o interesse das pessoas pelo rico
conjunto de informao que est presente no Relatrio de Desenvolvimento Humano. De fato, devo
admitir que inicialmente no vi muito mrito no IDH em si mesmo, o qual, por acaso, tive o privilgio de
ajudar a projetar. Primeiramente, exprimi a Mahbub ul Haq, o criador do Relatrio de Desenvolvimento
Humano, grande ceticismo sobre a tentativa de se concentrar num ndice imperfeito deste tipo,
tentando captar num simples nmero uma realidade complexa sobre o desenvolvimento humano e a
privao.
Em contraste com a idia grosseira do IDH, o resto do Relatrio de Desenvolvimento Humano
contm uma extensa coleo de quadros, uma riqueza de informao sobre uma variedade de
aspectos sociais, econmicos e polticos que influenciam a natureza e a qualidade da vida humana.
Por que dar proeminncia, era natural perguntar, a um ndice sumrio imperfeito que estava longe de
captar muito da rica informao que torna o Relatrio de Desenvolvimento Humano to atrativo e
importante?
Esta imperfeio no escapou de todo a Mahbub. Ele no resistiu ao argumento de que o IDH
no poderia ser seno um indicador muito limitado do desenvolvimento. Mas, aps alguma hesitao
inicial, Mahbub persuadiu-se a si mesmo que o domnio do PIB (um ndice utilizado em excesso e
vendido acima do seu valor, que ele queria suplantar) no seria quebrado por um conjunto qualquer de
quadros. As pessoas olhariam esses quadros respeitosamente, argumentou ele, mas quando tivessem
de usar uma medida sumria de desenvolvimento voltariam ainda ao singelo PIB, porque era
imperfeito, mas acessvel. Enquanto ouvia Mahbub, escutei um eco do poema de T. S. Eliot Burnt
Norton: a espcie humana no suporta muito bem a realidade.
Precisamos de uma medida, reclamou Mahbub, do mesmo nvel de vulgaridade do PIB
apenas um nmero , mas uma medida que no seja cega aos aspectos sociais da vida humana como
o PIB. Mahbub esperou que o IDH no fosse somente algo como uma melhoria ou pelo menos um
suplemento til ao PIB, mas que servisse tambm para alargar o interesse pblico s outras
variveis que so profusamente analisadas no Relatrio de Desenvolvimento Humano.
Mahbub conseguiu-o rigorosamente, tenho de admitir, e fico satisfeito que no tivssemos
conseguido desvi-lo da procura de uma medida imperfeita. Pelo uso hbil do poder de atrao do
IDH, Mahbub conseguiu que os leitores se envolvessem de forma interessada no amplo conjunto de
quadros sistemticos e anlises crticas pormenorizadas apresentadas no Relatrio de
Desenvolvimento Humano. O ndice imperfeito falou alto e claro e recebeu uma ateno inteligente e,
atravs desse veculo, a realidade complexa contida no Relatrio encontrou tambm uma audincia
interessada.
Imperfeito, grosseiro, restrito, so alguns dos adjetivos acima mencionados e, no entanto, o IDH tem sido
hoje a base e a inspirao para uma srie de outras iniciativas de investigao e produo de
indicadores no mundo todo. Do IDH original, ocorreram aperfeioamentos que deram origem aos
chamados IDH ajustados: s questes de gnero e raa. Aos ndices de privao humana (IPH) e
replicao do IDH em escala nacional, regional, municipal.
No Brasil, so j bastante conhecidas as iniciativas de produo do IDH da populao afro-descendente,
o IDH dos municpios brasileiros. Inspirou iniciativas outras tais como o ndice Municipal e o ndice Social
dos Municpios, realizado pelo Plis, o ndice Paulista de Responsabilidade Social, no estado de So
Paulo e o Mapa da Excluso/Incluso Social de So Paulo e Santo Andr. Tais iniciativas combinaram
as bases conceituais e metodolgicas do IDH com outros indicadores (tais como os Indicadores de
Condies de Vida) e apresentam diferentes enfoques.
Por exemplo, ao longo de 2000 e 2001 produziu-se e divulgou-se o levantamento do ndice de
Desenvolvimento Humano Municipal (IDHM), promovido pelo PNUD, IPEA, Fundao Joo Pinheiro e
IBGE. Semelhante ao IDH, mas no idntico, inclui as trs dimenses bsicas do IDH (renda,
longevidade e educao, com pesos iguais), mas adequando-as anlise de municpios.
O trabalho produziu ainda outro ndice - o ICV, ndice de Condies de Vida nos municpios, que inclui
20 indicadores bsicos, agrupados em cinco dimenses: renda (com cinco indicadores), educao (com
cinco indicadores), infncia (quatro indicadores), habitao (quatro indicadores) e longevidade (dois
indicadores). No Rio de Janeiro, em especial, alm da produo destes dois ndices (IDH e ICV)
realizou-se uma pesquisa qualitativa, junto a mulheres e homens de diferentes faixas etrias e
segmentos sociais em quase todos os bairros, visando incluir as percepes dos habitantes sobre a sua
vizinhana e a cidade.
A partir de outra vertente, mas tambm orientado pela produo de parmetros alternativos de
desenvolvimento, o Projeto Brasil Sustentvel e Democrtico um exemplo de esforo de vrias ONGs
e pesquisadores de ampliar as foras e os argumentos em prol de uma nova concepo de
sustentabilidade, atravs da produo de diagnsticos de situaes que serviro de base para o
desenvolvimento de um novo corpo de indicadores de sustentabilidade coerentes com esta viso.
Uma srie de outras iniciativas, em escala internacional e nacional poderiam ser citadas, tais como os
relatrios e indicadores de violao de direitos Humanos, produzidos pela Anistia Internacional ou o
ndice de Percepo de Corrupo, produzido pela organizao Transparncia Internacional ou os
indicadores sobre a situao da infncia e da adolescncia, sobre as DST/Aids, etc.
O que interessa resgatar aqui que no apenas os governos ou instituies tradicionais de pesquisa
estatstica, mas as ONGs e movimentos e organizaes da sociedade tem cada vez mais se utilizado
desses indicadores e se envolvido na sua produo. Vale a pena considerar alguns aspectos relativos ao
uso de indicadores neste mbito.
Apesar de serem simples, o IDH e os demais ndices apresentam desafios e dificuldades bastante
significativas relativos existncia de dados, sua confiabilidade, regularidade, semelhana quanto
ao grau de desagregao, etc. Nas notas estatsticas que acompanham a apresentao dos
relatrios pode-se ter uma idia das dificuldades encontradas e dos limites contidos nos ndices e
aplicados sua interpretao em funo da qualidade das fontes disponveis.
Apesar de a estatstica considerar indicadores muito sintticos e agregados como o IDH imperfeitos
e sujeitos a muitas interpretaes subjetivas, reside justamente a nesta sntese a capacidade de
eles produzirem imagens ou mensagens poderosas, ampliando ou modificando a percepo que as
pessoas tm do mundo. A possibilidade de comparao entre pases, regies, estados, municpios,
bairros, raas, gneros, etc. rpida, imediata e significativa aproxima as pessoas do indicador, gera
reaes e permite que se reflita a partir dele.
Estes indicadores, em funo de suas caractersticas internas, podem ser considerados como
indicadores de situao ou contexto. Em torno deles, podem ser gestadas e orientadas aes,
projetos, programas, estratgias e polticas, seja de governos, empresas ou organizaes da
sociedade civil. Embora tenham como proposio servirem de referncia para a avaliao de
polticas pblicas, muitos deles trabalham com variveis bastante diferenciadas quanto aos fatores
que as determinam e ao ritmo em que podem ser modificadas.Se as taxas de escolarizao e
urbanizao podem ser mais rapidamente alteradas em funo de polticas e investimentos
municipais, o mesmo no se pode dizer da renda. Ao combinarem deste modo estas variveis, os
ndices nos permitem apreender as desigualdades, as urgncias, mas no direta e claramente as
responsabilidades num nico nvel de ao. A governabilidade dos processos e a capacidade dos
atores no so aspectos prioritrios considerados neste tipo de uso de indicadores.
H sempre o problema do controle sobre a interpretao dos ndices e indicadores, bem como da
compreenso dos seus limites. As oscilaes nos ndices so muitas vezes decorrentes apenas das
mudanas nas fontes e sua qualidade, no necessariamente resultantes da ao positiva ou
negativa de atores. A expectativa de Amartya Sen de que no haja apenas a apropriao do IDH,
mas que as pessoas se motivem a adentrar os relatrios e quadros mais detalhados, nem sempre se
cumpre. A apreenso tende a ser imediata e utilizada pelos atores segundo seus interesses. Neste
sentido, a disputa pela interpretao do significado dos indicadores e ndices gerados na sociedade
brasileira parte constitutiva das estratgias de interveno das ONGs. As diferentes interpretaes
em torno dos resultados do ltimo Censo divulgados pelo IBGE so apenas um pequeno exemplo
disso.
Por fim, cabe ressaltar que estes ndices tm suas razes em processos de acmulo de debates,
conflitos, movimentos e articulaes de foras polticas em torno de determinados temas ou
questes. O prprio IDH surge na confluncia de um processo j bastante longo de contestao da
primazia do econmico no desenvolvimento com a necessidade de se opor, em bases semelhantes,
ao reinado do PIB. O IDH no contm toda a viso alternativa de desenvolvimento de um bloco de
foras, mas a sua expresso possvel e bem sucedida num determinado contexto e momento
histrico.
Os indicadores como ferramentas de gesto (sistemas de PMA)

Nas abordagens que focam os processos de planejamento e gesto de organizaes, os indicadores
passaram a ser parmetros centrais, a materializao detalhada dos objetivos e metas e a comprovao
emprica de resultados e impactos obtidos por uma organizao, constituindo a base de monitoramento
e avaliao.
Os mtodos de PMA tm como marca comum a proposio de um conjunto lgico e sistemtico de
reflexes, passos e decises cuja consistncia e comprovao seria dada pelos indicadores.
Uma das conseqncias que passa a existir uma nfase bem maior na tecnicalidade, na consistncia
lgica e na preciso dos indicadores. Outra diz respeito elevao da quantidade de indicadores
necessrios para cobrir os vrios nveis e tipos de ao de um projeto ou organizao, demandando
sistemas mais complexos e estruturados de produo e sistematizao de informaes. No geral, a
adoo destes mtodos se deu, fundamentalmente, em funo das exigncias de agncias
financiadoras.
A seguir, sero apresentadas sinteticamente algumas das abordagens de PMA apoiadas em indicadores
mais comumente utilizadas pelas ONGs, movimentos e organizaes populares.
Os processos de avaliao de prticas e projetos sociais

No que diz respeito avaliao de ONGs e movimentos e organizaes populares, entre o perodo do
final dos anos 80 e incio dos 90 foram constantes os debates que envolviam, sobretudo, as agncias de
cooperao internacional. as ento grandes demandantes de avaliaes das iniciativas que apoiavam.
Neste perodo, indicadores eram uma questo bastante secundria, quando no ausente.
Por razes j bastante analisadas por outros, gradativamente as questes relacionadas s concepes
de avaliao e respectivas propostas metodolgicas foram dando lugar centralidade da questo do
PMA (Planejamento, Monitoramento e Avaliao). Algumas das abordagens que derivaram destas
propostas so tratadas adiante.
Entretanto, a avaliao do impacto de projetos programas e organizaes tiveram sua importncia
retomada a partir de meados da dcada passada, assumindo outras formas. Por um lado, as j
mencionadas mudanas na cooperao internacional e na visibilidade das ONGs deflagraram um
intensivo processo de avaliaes mais sistemticas e estruturadas.
Com a proliferao de projetos e iniciativas sociais e a conformao do chamado Terceiro Setor, foram
sendo incorporados os conceitos e procedimentos da escola americana de avaliao de programas e
projetos sociais.
Em linhas gerais, as avaliaes so concebidas como processos nos quais se desenham momentos
especficos e estruturados de reflexo acerca do desenvolvimento e dos resultados de um
projeto/organizao, com a finalidade de identificar problemas, erros e sucessos, gerar aprendizado e
permitir reorientaes.
O corao da avaliao reside na identificao de seus objetivos e focos, que por sua vez orientam a
formulao de perguntas que a avaliao tem de responder. Para cada pergunta so ento definidos os
indicadores que devero trazer as informaes que permitam respond-la.
Os indicadores, portanto, so meios para obteno de informaes objetivas, qualitativas ou
quantitativas, e no so necessariamente
definidos a priori ou permanentes no tempo. Os
procedimentos de coleta so dimensionados para aquele momento da avaliao e para alcanar seus
objetivos.
Embora estas abordagens e experincias enfatizem a noo de processo e de atividade articulada ao
monitoramento, o fato que na maioria das vezes os indicadores utilizados na avaliao no se
constituem em referncias que se mantm no tempo, s quais se recorreria de modo mais permanente
ou sistemtico orientando o monitoramento.
Como instrumentos auxiliares, apesar de importantes, no h orientaes nem parmetros rgidos
quanto s suas caractersticas. Indicadores so parte de um processo de busca de respostas a questes
formuladas sobre o desempenho ou resultados esperados de um projeto ou de uma organizao.
Portanto, os indicadores so especficos para responder a um momento particular, o da avaliao, e no
so pensados em si de forma isolada. H uma extensa e crescente bibliografia sobre avaliao de
projetos sociais disponveis no Brasil que possibilita o aprofundamento no tema.
O Marco Lgico e suas derivaes - ZOPP, PCM
O marco lgico um dos mtodos de planejamento de projetos de desenvolvimento mais disseminados
na atualidade junto a organizaes da sociedade civil, instituies pblicas, agncias de cooperao
no-governamental e instituies bi e multilaterais. Grande parte das exigncias de produo e
monitoramento de indicadores decorre da crescente adoo, por parte das agncias financiadoras, do
marco lgico como referncia para a elaborao, apresentao, aprovao, monitoramento e avaliao
dos projetos.
O Marco Lgico, ou Logical Framework , foi desenvolvido no final dos anos 60 por uma empresa de
consultoria privada nos EUA, a pedido da USAID. Desde ento vem sendo adotado por diversos
organismos da cooperao. Uma verso da sua origem afirma que foi uma ferramenta desenvolvida ao
longo das dcadas de 50 e 60 para elaborao e acompanhamento de projetos ligados a projetos no
campo aeroespacial.
No campo da cooperao para projetos de desenvolvimento, a GTZ alem foi uma das primeiras
instituies da cooperao a adot-lo. Em 1983 tornou-se obrigatrio seu uso em todas as fases de
planejamento e execuo de projetos e, na progressivamente, para todos os projetos no mbito do
Ministrio Alemo da Cooperao Econmica. Ao longo dos anos 80 e incio dos 90, a maior parte das
instituies da cooperao europia foi adotando o Marco Lgico como base metodolgica. A partir de
1993 a ento Comisso Europia adota a abordagem do Marco lgico como a base para a
apresentao, acompanhamento e avaliao de projetos.
Em si mesmo, o Marco Lgico um mtodo de anlise sob a forma de passos e estruturao dos seus
resultados que resulta numa matriz. Nela, de forma sistemtica e lgica, so apresentados os objetivos
de um projeto/programa e as relaes de causalidade que o sustentam, as referncias para se verificar o
alcance de objetivos e as hipteses exteriores ao projeto/programa que podem influenciar seu xito.
O Marco Lgico geralmente tomado pelo mtodo ZOPP, desenvolvido pela GTZ, mas no so a
mesma coisa. Na verdade, o Marco lgico o ncleo central e bsico de metodologias de gesto de
projetos mais abrangentes, que concebem a gesto de projetos como um ciclo constitudo por vrios
momentos ou fases, nos quais o Marco Lgico desempenha um papel importante como estruturador das
anlises e das decises ou como orientao e referncia para a execuo, monitoramento e avaliao.
Estas metodologias adquirem vrias denominaes: Abordagem Integrada, Gerenciamento do Ciclo de
Projetos (PCM - Project Cicle Management), ZOPP (Planejamento de Projetos Orientados para
Objetivos). Tem em comum tanto o Marco Lgico quanto viso de projetos como ciclos.
Diferenciam-se quanto aos instrumentos adicionais que utilizam nestas diversas fases, nas nfases
distintas que conferem a tcnicas de participao ou visualizao, etc. Por exemplo, o ZOPP prev a
realizao de diversas fases preparatrias, incluindo anlises de viabilidade econmica, financeira, de
impactos scio-ambientais, alm de trabalhar com matrizes de fluxo de informao e de monitoramento e
avaliao no prevista ou no derivada diretamente do Marco Lgico.
Foge ao escopo deste trabalho o aprofundamento destas abordagens e suas variaes, bem como a
anlise aprofundada do Marco Lgico. Iremos aqui to somente apresentar algumas de suas
caractersticas gerais que permitam identificar os conceitos e importncia que possuem os indicadores
no mtodo.
PREMISSAS DO MARCO LGICO

A adoo do Marco Lgico como instrumento base da elaborao, acompanhamento e
avaliao de projetos baseia-se na percepo de que grande parte dos problemas dos projetos de
desenvolvimento se localiza na etapa de sua preparao e na ausncia de disciplina necessria para
tomar as decises que se impem no momento oportuno.
Na preparao, destacam-se: a pouca validade e viabilidade de idias de projeto, que se
mantm graas inexistncia de anlises que as depurem ou que se relacionem com estudos de
viabilidade anteriormente realizados; a pouca participao dos atores envolvidos, principalmente os
beneficirios, no desenho do projeto, o que d margem a estratgias equivocadas ou no
compreendidas e/ou aceitas claramente e do mesmo modo por todos; a negligncia quanto ao modo
como o projeto pode efetivamente alcanar seus objetivos; a no considerao dos fatores que
condicionam o xito do projeto.
No tocante s decises tomadas durante sua execuo, destaca-se tanto a ausncia de
referncias compartilhadas para tomada de decises em tempo hbil quanto necessria
reformulao/reviso de atividades e objetivos em funo das mudanas ocorridas ao longo de sua
execuo.
O Mtodo sustenta-se na anlise de relaes de causa e efeito e no desenho de uma
interveno que altere eficazmente estas relaes, condizente com a abordagem da cooperao para o
desenvolvimento que se prope a atacar as causas dos problemas. Por outro lado, estes problemas no
existem independentemente dos indivduos, grupos e organizao, cujos interesses, aes e
capacidades devem ser levados em conta para que seja possvel antever os obstculos - muitas vezes
negligenciados - e as possibilidades de interao que possam interferir positiva ou negativamente no
enfrentamento dos problemas.
O Marco lgico um instrumento e, como tal, por mais adequado e eficaz que seja no constitui
por si s uma garantia de xito. H vrios outros fatores que determinam o sucesso ou no de projetos,
como as capacidades das organizaes e dos indivduos nele envolvidos, por exemplo.
Ele permite s pessoas responsveis pela preparao de um projeto estruturar e formular de

forma mais adequada a sua reflexo, comunicar e explicar a concepo do projeto e exprimir-se de uma
forma clara e coerente. Porm, se a poltica inadequada e os critrios mal selecionados, o marco lgico
revelar estas contradies e lacunas, mas no substituir a poltica nem os critrios.
CONCEITOS E DEFINIES DO MARCO LGICO
Em termos bastante simplificados, o Marco Lgico estrutura-se a partir de duas grandes fases: a de
Anlise da Situao e a de Planificao.
Anlise de situao
Consiste na realizao e sistematizao de anlises extensivas e na troca de opinies sobre a situao na qual estudos tcnicos e realizados por especialistas podem contribuir - para formar uma imagem da
realidade que permitir a escolha de um conjunto de objetivos aceitveis e apoiados por todos,
detalhados no momento da Planificao. Nesta fase, realiza-se a anlise de problemas, anlise de
objetivos e anlise de estratgias.
1. Anlise de problemas
Consistem na identificao de problemas, definidos como estados negativos de situaes existentes, isto
como situaes reais e no como falta de solues. A partir de um problema considerado central,
identificam-se as relaes de causa-efeito imediatas e diretas entre eles, construindo uma representao
grfica destas relaes sob a forma de uma rvore.
2. Anlise de Objetivos
Formulam-se objetivos a alcanar a partir da converso dos problemas identificados na etapa anterior
em estados positivos j alcanados, de forma realista. Por exemplo, para os problemas reduzida
produo agrcola e rede de irrigao no funciona, formulam-se os objetivos aumento da produo
agrcola e Rede de irrigao reparada. A converso de problemas em objetivos constri uma outra
rvore que indica as relaes de Meio e Fim entre eles.
3. Anlise de estratgias
Dada a rvore de objetivos, analisa-se os conjuntos de objetivos e de relaes de meio e fim da rvore
de objetivos, os seus galhos. De princpio estes galhos constituem estratgias que devem ser
analisadas quanto sua viabilidade e oportunidade, considerando vrios critrios: a capacidade que o
grupo que planeja tem de influenciar aqueles objetivos, o volume de recursos materiais, financeiros,
humanos e polticos necessrios para implement-la, complementaridade com as aes de outras
organizaes, o tempo necessrio para que sejam produzidos resultados, prioridades das partes
interessadas, etc. Selecionadas uma ou mais estratgias, tem-se a estratgia geral do projeto com a
indicao de objetivos, resultados e atividades.
Planificao
Nesta fase d-se a montagem da Matriz do Marco Lgico, ou Matriz do Projeto. A estratgia de
interveno apresentada de forma estruturada, indicando de modo sistemtico e lgico:
as relaes causais entre atividades, resultados e objetivos (lgica vertical).
a relao e influencia de fatores externos (hipteses) sobre as atividades, resultados e objetivos

(lgica diagonal).
detalhamento dos objetivos e resultados, atravs da descrio de indicadores e os seus meios de

verificao (Lgica horizontal).
EXEMPLO:
Baixo
rendimento
escolar
Crianas em
estado aptico
e
sem
motivao
RVORE DE
PROBLEMAS
Desenvolvimento
fsico das crianas
comprometido
Grande ndice de
crianas
doentes
na comunidade
gua do rio est

contaminada e
poluda
As industrias
do municpio
despejam
resduos
txicos
sem
tratamento no
rio
Lixo
domstico
jogado
no Rio
Lixo
se
acumula
nas casas
do bairro
Coleta de lixo
feita com
irregularidade
gua do rio
utilizada
para beber
e
higiene
pessoal
Lixo
jogado
a
cu aberto
perto
do
Rio
Lixo no
acondicionado
Acesso
precrio
do
caminho
comunidade
Beira do
Rio
nico
local no
ocupado
por
moradias
O rio a
nica fonte
de gua a
baixo custo
Renda das
famlias
muito
baixa
Populao
avalia que
no
h
sada a no
ser correr o
risco
Crianas
entram
em
contato
com
esgoto
Casas
utilizam
sumidouro
Esgoto
corre a cu
aberto
Comunidade
no conta com
saneamento
bsico
A
poltica
de
sade adotada na
regio curativa e
no preventiva
Brincar na
rua
a
nica opo
de lazer das
crianas
RVORE
DE
OBJETIVOS
Melhoria do
rendimento
escolar
Reduo do ndice de
doentes na comunidade
Reduo
da
poluio
e
contaminao
do rio
Lixo
recolhido
com
frequencia
das casas
Coleta de lixo
feita com
regularidade
Crianas se desenvolvem
fisicamente em base a
parmetros normais para
sua idade
crianas
Populao
utiliza gua
potvel
e
limpa para
consumo e
higiene
Lixo
recebe
tratamento
e destino
adequado
As industrias
adotam
tratamento
adequado dos
seus resduos
Populao
armazena
o lixo em
local
apropriado
Caminhes de
coleta
tm
acesso
facilitado
comunidade
Populao
dispe de
opes de
de
gua
limpa
a
baixo custo
Renda das
famlias
aumenta
Populao
avalia que
sade um
bem e um
direito
Servio
municipal de
gua chega
s casas da
comunidade
10
Crianas com
energia
e
disposio
Crianas
circulam sem
contato
com
esgoto
Esgoto
domstico
canalizado
Esgoto
recebe
destino e
tratamento
adequado
Existe
um
sistema
de
saneamento
bsico
na
comunidade
A
poltica
de
sade na regio
adota
aes
preventivas
Crianas
tem vrias
opes de
lazer
Crianas com
energia
e
disposio
Reduo do ndice de
doentes na comunidade
Despoluio
Reduo
da
poluio
e
contaminao
do rio
Lixo
recolhido
com
frequencia
das casas
Crianas se desenvolvem
fisicamente em base a
parmetros normais para
sua idade
crianas
Preveno
em Sade
Populao
utiliza gua
potvel
e
limpa para
consumo e
higiene
Lixo
recebe
tratamento
e destino
adequado
As industrias
adotam
tratamento
adequado dos
seus resduos
Melhoria do
rendimento
escolar
Populao
armazena
o lixo em
local
apropriado
Populao
dispe de
opes de
de
gua
limpa
a
baixo custo
Renda das
famlias
aumenta
Populao
avalia que
sade um
bem e um
direito
Servio
municipal de
gua chega
s casas da
comunidade
11
Estratgias
possveis e
campos de a o
dos envolvidos
Crianas
circulam sem
contato
com
esgoto
Esgoto
domstico
canalizado
Esgoto
recebe
destino e
tratamento
adequado
A poltica de
sade
na
regio
tem
aes
preventivas
Crianas
tem vrias
opes de
lazer
Existe
um
sistema
de
saneamento
bsico
na
comunidade
Educao
Ambiental
Coleta de lixo
feita com
regularidade
Caminhes de
coleta
tm
acesso
facilitado
comunidade
Acesso
gua
Esgotamento
sanitrio
LGICA DA INTERVENO
OBJETIVO GERAL
OBJETIVO ESPECFICO
RESULTADOS
ATIVIDADES
Melhoria das condies de sade e vida das crianas da comunidade X

Reduo em 70% do ndice de crianas doentes na comunidade
1. Lixo da comunidade recebe tratamento e destino adequado
2. Populao com acesso regular e barato gua potvel e limpa para consumo e higiene
3. Comunidade conta com sistema de esgotamento sanitrio
4. Populao adota novas posturas e comportamentos em relao s suas condies ambientais e sade
5. Gesto eficiente e eficaz do projeto
Atividades relacionadas ao resultado 1..........
RECURSOS
LGICA DO PROJETO - EXEMPLO 2 ESTRATGIA EDUCAO AMBIENTAL

Objetivo Geral
Objetivo Especfico
Resultados
Atividades
Recursos
Melhoria das condies de sade e vida das crianas da comunidade X

Populao adota novas posturas e comportamentos em relao s suas condies ambientais e sade
1. Alternativas de tratamento e destino do lixo so desenvolvidas
2. Famlias tm acesso a maiores informaes sobre as condies ambientais em que vivem e suas relaes com
outros fatores sociais e econmicos.
3. Novas alternativas de garantia da qualidade da gua e de condies de higiene so discutidas e experimentadas
4. Crianas e adultos esto motivados e envolvidos em aes de melhoria e preservao de condies ambientais da
comunidade.
5. Gesto eficiente e eficaz do projeto
12
LGICA DO PROJETO - EXEMPLO 1 ESTRATGIA GLOBAL
Lgica da interveno
OBJETIVO GLOBAL
OG
OBJETIVO ESPECFICO
OE
Indicadores
objetivamente
verificveis
Fontes de verificao
Meios
custos
Hipteses /
pressupostos
R.1.
R.2.
RESULTADOS
R.3.
R.4
A1.1
A.1.2
A 1.3
ATIVIDADES
A 2.1
A 2.2
A 2.3
A 3.1.
A 3.2
Condies prvias
13
Matriz do Marco Lgico

Lgicas vertical, horizontal e diagonal
14
Indicadores Objetivamente Verificveis

Os indicadores no marco lgico so definidos como um descries operacionais em termos
de produto (sua quantidade e qualidade), grupo alvo, perodo (incio e durao) e lugar, para
avaliar em que medida os objetivos, os resultados e as atividades foram concretizados.
A descrio operacional dos objetivos e resultados sob a forma de indicadores permitem rever a
pertinncia e a viabilidade do objetivo/resultado e acompanhar a sua realizao.
Para evitar a designao apenas de variveis (por exemplo, aumento da renda per capita), os
indicadores devem ser:
especficos em termos de quantidade (quanto?) e qualidade (qual?);
claros quanto ao grupo alvo e ao local a que se referem;
pertinentes (abranger o essencial do que contm o objetivo ou resultado - o qu);
Independentes e diferentes entre si, cada indicador relacionando-se apenas com um s objetivo,
resultado ou atividade;
Verificveis, baseados em dados acessveis;
Definir o perodo que ser avaliado, durante quanto tempo e com que freqncia.
Pode ser necessrio formular mais que um indicador para especificar um objetivo ou resultado,
quando este for complexo. Por outro lado, se um indicador resultar muito complexo ou invivel
operacionalmente, podem ser utilizados indicadores indiretos, que captem alguns fenmenos que
razoavelmente podem ser a traduo do objetivo. Por exemplo, ao invs de um indicador sobre renda
familiar numa comunidade, poder-se-ia utilizar outro relativo ao nmero ou aumento de bicicletas em
circulao.
Alm dos objetivos e resultados, as hipteses tambm devem gerar indicadores a fim de tornar
possvel seu monitoramento. Do mesmo modo, as atividades so detalhadas em diversas metas
intermedirias que constituiro indicadores de progresso e realizao das mesmas.
Meios de verificao
So as fontes de informao contidas em relatrios, documentos e outros meios que permitem reunir
as informaes necessrias para os Indicadores. As fontes que so externas interveno devem ser
avaliadas quanto a:
Adequao de sua forma
Se so suficientemente especficas
Confiabilidade das informaes
Acessibilidade
Custos para obteno da informao
O Marco Lgico se prope a ordenar e a apresentar de forma sinttica, lgica e sistemtica o conjunto
de anlises, opes e negociaes que precedem e presidem um projeto. Nesta perspectiva, as
exigncias e critrios para a formulao de indicadores nos diversos nveis do projeto (objetivos globais,
especficos, resultados, hipteses e atividades) contribuem para que se reforce a explicitao,
detalhamento e a reviso do que se pretende em termos de mudanas.
Neste sentido, provoca que sejam afinadas as expectativas e imagens que os vrios atores tm
relativas ao projeto, das suas possibilidades de ao, da governabilidade dos processos nas mos deste
conjunto de atores.
A partir da diretriz se no consegue localizar um indicador, faa uma reviso no objetivo, clareando-o,
o Marco Lgico proporciona permanentemente idas e vindas que contribuem para conferir ao projeto
maior consistncia, coerncia e viabilidade.
H, no entanto, algumas premissas e caractersticas do mtodo, alm de outras relacionadas sua
adoo na prtica, que apresentam vrios problemas com o conjunto de indicadores que se gera ao seu
final.
15
As referncias terico-polticas que embasam a seleo de indicadores estariam na verdade orientando

a concepo e formulao do projeto no seu todo. Os indicadores, tais como definidos, so meras
descries operacionais de objetivos e resultados, estes sim capazes de traduzir concepes e
princpios.
Os indicadores so, portanto, resultantes de um processo lgico dedutivo na sua formulao e indutivo
na sua anlise, num exerccio complexo de mediaes onde a utopia, o desejo, os interesses
transformam-se em situaes detalhadas e objetivamente verificveis. So comprobatrios, permitem
verificar se o planejado est sendo feito ou alcanado e, portanto, expressam certezas e apostas, e no
reas em torno das quais haja dvidas ou incertezas.
Tais caractersticas do mtodo implicam numa gradual e crescente perda de identificao e envolvimento
dos vrios atores com as definies mais tcnico-operacionais que regem a produo dos indicadores. O
risco de os indicadores se transformarem em trabalho de poucos, de especialistas e no
apropriado/compartilhado pelos demais grande e na verdade ocorre com bastante freqncia.
Considerando que muitas vezes os consensos existentes na fase de desenho de projeto so frgeis,
abstratos e instveis, a produo de um conjunto detalhado de indicadores pode tornar-se um exaustivo
trabalho de fico.
Em particular, as exigncias de detalhamento nas fases de apresentao de projetos por parte das
agncias de cooperao internacional que adotaram o marco lgico obrigam que os indicadores sejam
formulados em situaes onde h muitas incertezas e dvidas, o que por um lado torna invivel ou
incuo a definio de indicadores e, por outro, cristaliza indicadores pouco consistentes como as bases
para o acompanhamento e avaliao do projeto.
Seguindo-se todos os procedimentos e etapas do mtodo, tem-se ao final um conjunto enorme de
indicadores e de instrumentos para acompanh-los: matrizes de monitoramento de atividades, de
monitoramento de resultados, de hipteses e de objetivos especficos e globais. Alguns problemas
derivam da.
Primeiro, a complexidade dos instrumentos e regras para a montagem de matrizes e seu uso no
necessariamente condiz com o grau de estruturao, familiaridade ou capacidade dos indivduos e das
organizaes a ponto de domin-las.
Segundo, o volume de informaes que dever ser produzida, processada, sistematizada e analisada
exige condies organizativas (humanas, materiais, financeiras, operacionais) que na maioria das vezes
no so encontrveis nas ONGs e organizaes populares.
Terceiro, por ser uma abordagem voltada para projeto, embora aplicada muitas vezes a projetos
institucionais, constri um sistema de monitoramento a partir de indicadores que deriva unicamente da
aplicao do mtodo, sem considerar as experincias, a cultura e sistemas preexistentes nas
organizaes envolvidas. No raro, o monitoramento de projetos baseados no Marco Lgico tensiona
fortemente uma organizao, gerando sobretrabalho e sobreposio de iniciativas e informaes.
Nestes contextos, o potencial do mtodo como ferramenta de gerenciamento se perde, tornando-o mero
instrumento burocrtico de prestao de contas.
Por fim, o fato de no prever passos analticos que permitam simplificar ou redimensionar o conjunto dos
indicadores ajustando-o s caractersticas, necessidades e possibilidades das organizaes, costuma
gerar cemitrios de dados ou o abandono do mtodo como referncia para o projeto.
Exceo deve ser feita a algumas abordagens de gerenciamento de projetos baseados no ZOPP
disseminadas por indivduos e setores com larga experincia na cooperao internacional, que resgatam
o processo de elaborao e implementao de projetos como um exerccio de poltica permanente, no
de engenharia.
Os Marcos do Desenvolvimento de Base da IAF - Fundao Interamericana

No incio da dcada de 90, a Inter American Foundation IAF - desenvolveu um sistema de registro de
resultados dos projetos que eram por ela apoiados no mundo, conhecido como MDB: Marcos de
Referncia do Desenvolvimento de Base.
Tal sistema baseou-se na experincia de anos da IAF e buscou de forma sinttica resgatar as principais
referncias polticas da instituio e os principais tipos de resultados que pretendia medir. um sistema
que articula uma concepo de desenvolvimento e seu processo em termos de categorias e mbitos
principais. Define tambm variveis chaves deste processo em funo das prioridades polticas da IAF.
16
Indica as caractersticas bsicas que devem possuir os indicadores de modo a serem aptos a mensurar
os processos focados pelas variveis.
No Brasil, as reaes e crticas proposta no foram poucas e tomaram como alvos tanto a forma pela
qual o MDB estava sendo apresentado - configurando uma exigncia unilateral e imposio - como o
seu contedo: para muitos, o MDB no dava conta das caractersticas das intervenes das ONGs
brasileiras, das concepes que as animam e dos processos nos quais visam e logram ter incidncia.
Porm, as crticas no redundaram em desenvolvimento de alternativas ao MDB. No lugar dele no
havia uma outra proposta, principalmente considerando-se que um dos argumentos crticos era o da
singularidade de cada organizao e cada contexto, o que por si s j decretaria a impossibilidade de um
sistema de mensurao de resultados unificado. Vrios argumentos chamavam a ateno para o quo
inexpressivo e incuo seria um esforo desta natureza, alm de indesejvel em funo do sentido
homogeneizador que encerraria.
Apesar das objees, os projetos apoiados pela IAF passaram a utilizar o MDB e adapt-lo s
circunstncias e temas especficos, desenvolvendo e detalhando indicadores a partir das categorias,
variveis e indicadores estandares propostos. H vrias modificaes nas categorias de indicadores e
mesmo na forma de descrev-los e registr-los, hoje padronizada em arquivos de planilha eletrnica.
Para efeito da discusso aqui proposta analisaremos a verso do MDB quando foi difundida amplamente
no Brasil. At o momento, h pouca reflexo documentada sobre os ganhos obtidos, dificuldades
enfrentadas e aprendizados por parte tanto da IAF quanto das organizaes e projetos que os utilizaram.
Atualmente, a IAF continua utilizando as mesmas premissas mas passou a definir de antemo e a
formatar ela mesma e no mais como uma indicao ou deciso de cada projeto ou organizao os
indicadores, consolidados num conjunto de planilhas em um arquivo Excel. Entretanto, para a finalidade
desta discusso e por parecer mais interessante como exemplo de um sistema que retrata claramente
concepes e nfases, nos referiremos ao modo como o MDB era formulado e proposto h alguns anos
atrs.
BOX 1 - PREMISSAS DO MDB
Valores da IAF
Respeito dignidade e ao mrito da pessoa humana;
Fortalecimento das instituies democrticas;
Trabalho em prol de sociedades mais justas e eqitativas.
Sentido e objetivos do MDB

O desenvolvimento de base percebido como um processo polifactico construdo a partir de
esforos ad hoc, isolados e desconexos. Neste quadro, o MDB:
localiza estes esforos dentro de um panorama mais global que ajuda a entender seu significado,
organizando conceitualmente os resultados alcanados pelos projetos apoiados;
fornece o denominador comum que d coerncia aos resultados de uma ampla gama de projetos de
distintas reas temticas, dirigidos a diferentes beneficirios e desenvolvido em contextos dispares;
possibilita linguagem comum que facilita a comunicao entre a Fundao, as organizaes

donatrias, os servios de apoio local e outras agncias financiadoras;
indiretamente, serve de fio condutor para a integrao do planejamento, monitoramento e avaliao

dos projetos com a aprendizagem, a partir dos resultados observados;
proporciona o princpio organizador para a constituio de um banco de dados com informaes

agregadas para mais de 1000 projetos executados em toda a Amrica Latina e Caribe.
CONCEITOS E DEFINIES DO MDB
O foco de ateno do MDB produtos ou resultados, e no atividades, cuja distino dada

pela lgica de cada projeto: atividades so realizadas para se obter produtos que, por sua vez,
contribuem para alcanar objetivos previamente estabelecidos. Produtos e resultados configurariam
um continuum que vai desde resultados materiais tangveis at efeitos menos palpveis, porm reais.
Os Resultados so enfocados a partir de dois tipos e 3 nveis:
Tipos
17
Tangveis: podem ser medidos e documentados de forma direta.
Intangveis: podem ser observados, inferidos e verificados de maneira confivel, mas no medidos
diretamente.
Nveis
1 - Benefcios diretos na qualidade de vida dos beneficirios;
2 - Fortalecimento das organizaes comunitrias e das ONGs que proporcionam apoio e servios;
3 - Efeitos que transcendem os limites do projeto e que contribuem para promover mudanas nas
atitudes, polticas, leis e relaes que perpetuam as desigualdades sociais.
tangvel
intangvel
Espao cvico
social
Normas
sociais
Cultura
organizativa
Capacidade
de gesto
Nvel de vida
Capacidades
pessoais
O cone acima ilustra a ampliao dos efeitos das iniciativas de desenvolvimento de base, ao ascender
desde o plano individual at o plano societrio. O primeiro nvel demonstra os benefcios diretos e
incidentes sobre as pessoas e famlias, mas cujo alcance limitado no tempo e no espao.
J os nveis superiores indicam a existncia de efeitos mais duradouros e abrangentes. A hiptese
central do MDB de que existe forte interdependncia entre os dois tipos e trs nveis de resultados,
alm de expressar a necessria busca pelo equilbrio entre os trs nveis numa dada interveno ou
projeto, de modo a combinar mudanas concretas na situao de indivduos e comunidades com a
criao de novas condies poltico-institucionais que possibilitem mudanas mais permanentes.
Definies
Categorias: os seis mbitos sobre os quais incidem os resultados.
Variveis: em nmero de 22, expressam a essncia dos elementos que, a longo prazo, conduzem ao
processo de desenvolvimento, ou seja, o fortalecimento de pessoas e organizao, a
sustentabilidade, o crescimento humano e material.
Variveis-chave: seis variveis selecionadas previamente pela fundao, com base nos critrios (i)
importncia dentro das prioridades da fundao; (ii) aplicabilidade a uma ampla gama de projetos;
(iii) relativa facilidade de agregao.
Indicadores - so a medida concreta da mudana na varivel, e devem conter:
Descrio: especifica que tipo de alterao quantitativa ou qualitativa da varivel se pretende captar
com o indicador.
Tipo de medida: define se o indicador ser baseado em dados, estimativas ou opinio, alm de dizer
qual a fonte.
Unidade de anlise: define qual a unidade sobre a qual sero construdas e comparadas as medidas,
se indivduos, organizaes, comunidades, cidades, etc.
Unidade de medida: especifica as categorias, escalas e parmetros que sero utilizados na coleta e
sistematizao dos dados, conferindo concretude e operacionalidade descrio feita anteriormente.
18
Exemplos:
Categoria: capacidades pessoais.
Varivel: Auto Estima, cuja definio : reconhecimento pessoal do valor prprio e da dignidade humana
e valorizao do seu potencial para viver uma vida melhor e contribuir com a sociedade.
Indicador 1 - Valorizao (auto-imagem)
Descrio: nmero e porcentagem de beneficirios que mudaram a percepo sobre si mesmos e de

suas relaes com terceiros;
Tipo de medida: opinio (dos prprios beneficirios);
Unidade de anlise: indivduo;
Unidade de medida: mero e porcentagem de pessoas que, em relao percepo que tinham
sobre si mesmos e sobre suas relaes com terceiros consideram que (i) mudaram negativamente;
(ii) no mudaram ou mudaram positivamente.
Categoria : Normas societais.

Varivel : Relaes, cuja definio substituio de relaes de dominao e dependncia entre
indivduos, grupos, organizaes ou setores, por relaes baseadas na equidade e na interdependncia.
Indicador 1 - Capacidade de negociao com a sociedade civil
Descrio: capacidade da populao alvo e/ou de suas organizaes representativas de negociar

com outros setores da sociedade civil;
Tipo de medida: opinio (dos tcnicos da Ong ou dos dirigentes das organizaes de base);
Unidade de anlise: sociedade ou comunidade;
Unidade de medida: escala de 1 a 5 sendo 1=muito baixa, 2=baixa, 3=mdia, 4=alta, 5=muito alta.
O MDB apresentado como um sistema, no como um mtodo. Entretanto, nele esto presentes
caractersticas que permitem desvelar seus pressupostos polticos e metodolgicos de modo a sugerir
caminhos para o desenvolvimento de outros sistemas. Dentre suas novidades e mritos, podem ser
apontados os seguintes:
O MDB explicita as bases polticas e institucionais nas quais se funda: misso institucional,
concepo e princpios relacionados ao desenvolvimento de base, objetivos do sistema e suas
caractersticas. Para alm do mero discurso, h clara e perceptivelmente uma conexo entre estas
bases e as caractersticas metodolgicas e operacionais dos sistemas, definindo e articulando
conceitos, definies, nveis, etapas e procedimentos.
Parte de uma noo de desenvolvimento de base que distingue e articula nveis distintos de
impactos da interveno das ONGs e movimentos sociais, o que representa um avano em relao
s oposies bastante comuns entre o micro e o macro, entre mudanas junto a um pblico
determinado e mudanas na subjetividade ou institucionalidade dos processos mais abrangentes.
O MDB reconhece as dimenses tangveis e intangveis dos processos, abrigando-as e valorizandoas, superando concretamente a mera retrica da afirmao do intangvel: o identifica, define e
apresenta meios (variveis e indicadores) que tornariam possveis apreend-lo.
Opera com indicadores quantitativos e qualitativos, na maioria das vezes quantificando o qualitativo.
Esta quantificao, que poderia ser objetada, muitas vezes apoiada no apenas em nmeros, mas
em ordens de grandeza, tais como muito, "pouco, maioria, grande parte, etc. A preocupao em
dar a dimenso dos processos observados atravs da quantificao no encobre nem
necessariamente contradiz o carter qualitativo dos indicadores utilizados.
Opta claramente pela primazia da identificao de resultados ao invs de atividades.
Articula os elementos da concepo que o presidem atravs de uma representao grfica, o

diagrama em forma de cone. Facilita a apreenso de sua lgica tornando-o, de princpio, um sistema
bastante inteligvel.
Apresenta as definies que esclarecem o significado das variveis que adota, superando a mera
formulao genrica.
19
Contm um manual que orienta o seu uso e que estabelece normas e procedimentos operacionais
para o seu uso e adaptao, guardadas as devidas prioridades anunciadas pela IAF.
Prev, em certa medida, seu uso flexvel e adaptado aos contextos particulares, mas a partir de um
conjunto mnimo de categorias e variveis definidos pela IAF. Quanto a este aspecto em particular
cabe ressaltar que o sistema apenas registra e d visibilidade a critrios de seleo de projetos que
antecedem a utilizao do sistema. Como qualquer fundao ou agncia, as prioridades polticas se
manifestam no processo de dilogo e negociao do apoio. O que o MDB faz tornar visvel e
conter, nele mesmo, as prioridades e requisitos bsicos que levaram um projeto a ser escolhido para
apoio por parte do IAF.
Alguns aspectos intrnsecos ao MDB e outros relacionados ao modo como foi implementado junto aos
projetos indicam algumas lacunas, problemas ou limites para que pudesse servir a uma ampla gama de
organizaes, dentre os quais podem ser destacados:
Sua transformao em exigncia contratual acabou por impor o MDB aos projetos. Com pouca
margem para revises e adaptaes mais profundas, houve significativas resistncias e apropriao
burocratizada, como exigncia contratual. Nesta situao, a internalizao do sistema na vida e na
cultura da organizao tornam-se muito pouco provveis.
O sistema est claramente voltado para o controle e aprendizado por parte da IAF, a partir da
identificao de resultados e impactos dos projetos que apia. Mas no enfatiza nem est orientado
para promover o aprendizado por parte das organizaes que implementam os projetos. um
sistema desenvolvido para responder as necessidades de informao da IAF e como tal parece
modelar. Mas no necessariamente as necessidades de seus parceiros. No so previstos
instrumentos, mecanismos e processos atravs dos quais cada projeto apoiado - ou o conjunto
deles - poderia utilizar, acessar ou refletir a partir do banco de dados gerado pelo sistema na IAF.
Nas orientaes de ordem metodolgica e operacional para os projetos, no h diretrizes nem

cuidados relativos ao modo como o MDB pode ser inserido numa organizao. A possibilidade de j
existirem sistemas de monitoramento nas organizaes, bem como os custos materiais, financeiros,
humanos de sua incorporao, operao e/ou adaptao frente a possveis outras exigncias e
necessidade no so considerados ou mencionados. O que refora o sentimento de impositividade e
unilateralidade do uso do MDB.
O MDB apresenta-se como um instrumento eficaz de informao e comunicao entre a IAF, os

projetos e outras agncias. O circuito da esta comunicao mantm-se restrito a este universo, num
pacto do qual s participariam os que estabelecem relaes contratuais no mbito da cooperao. O
sistema no prev nem prope que deste pacto faam parte outros atores relevantes, tais como os
beneficirios e outras organizaes da sociedade em geral. A participao dos beneficirios na
definio, coleta e anlise de indicadores no focada.
Como sistema desenvolvido para atender s necessidades da IAF, o MDB emerge como um dos mais
interessantes e acabados sistemas de indicadores para o monitoramento e avaliao de resultados.
Suas principais debilidades encontram-se justamente no fato de ter sido concebido como resultante de
um processo de definio institucional autnomo, e no de um dilogo junto aqueles que so ao mesmo
tempo objeto de anlise e operadores do sistema.
Por analogia, tal questo tambm est colocada para qualquer organizao que pretenda desenvolver
um sistema de indicadores que lhe seja adequado: em que medida se processar o dilogo e a
negociao junto aos vrios atores envolvidos e interessados no monitoramento e na avaliao dos
projetos, tais como beneficirios, parceiros, agncias e demais organizaes da sociedade?
De todo modo, o MDB serviu de referncia e inspirao para vrias organizaes estabelecerem
indicadores e/ou sistemas prprios, principalmente no que concerne combinao de dimenses
quantitativas e qualitativas, tangveis e intangveis.
A abordagem dos indicadores como instrumentos de aprendizagem e desenvolvimento

institucional.
Dentre as ferramentas e mtodos, todas elas situam a importncia do monitorament o e avaliao para o
processo de aprendizagem institucional. Mas suas caractersticas em termos de conceitos, passos,
procedimentos e instrumentos nem sempre se coadunam com esta perspectiva. Uma das poucas
abordagens que tem o aprendizado como premissa e como orientao metodolgica o PIM, descrito
adiante.
20
A aprendizagem organizacional e o seu desenvolvimento dependem de fatores como o estabelecimento

de dilogos, envolvendo amplos setores dentro e fora da organizao, para localizar perguntas chaves,
relevantes para cada um e todos.
Implica em produzir informaes consideradas teis e relevantes para apoiar a construo de respostas
a elas e difundir essas informaes o mais amplamente possvel. Ainda, demanda a criao de espaos
onde as reflexes em torno das informaes, combinada com as experincias de cada um, possam ser
apresentadas de forma livre, criativa, ousada, produzindo compreenses compartilhadas sobre os
processos, suas causas e articulaes e possibilitando a identificao de propostas e respostas de novo
tipo.
Por fim, implica no comprometimento e na aposta de todos em introduzir mudanas e inovaes, que
so tambm acompanhadas e avaliadas nos seus resultados por todos.
Um dos maiores problemas dos sistemas de monitoramento e avaliao vem do fato de apesar de suas
intenes, envolverem poucos membros de uma organizao, alm de estarem orientados para produzir
informaes que atendam as exigncias de atores externos, tais como os financiadores.
Se no existe internalizao, ou se as informaes geradas circulam de modo restrito e sem gerar
reflexes, o aprendizado coletivo na organizao no ocorre e os processos de mudanas ou so
determinadas por circunstncias aparentemente fora do controle da organizao, ou caticos ou pouco
compartilhados e/ou no motivadores. Na pior das hipteses, todas estas, e mais algumas, condies
simultaneamente.
O PIM - Monitoramento Participativo do Impacto (Project Impact Monitoring)
Como o prprio nome sugere, o PIM se prope a ser um mtodo voltado para a gesto de projetos, com
foco no monitoramento de seus resultados e impactos de forma participativa. Foi desenvolvido pela GTZ
em meados dos anos 90 e divulgado no Brasil atravs da agncia alem Po para o Mundo.
O PIM foi concebido, prioritariamente como um instrumento para projetos de auto ajuda levado a cabo
por grupos ou organizaes de base. Tem por objetivo possibilitar-lhes:
O ajuste das atividades do projeto s necessidades dos membros do grupo de auto-ajuda;
O envolvimento dos membros na observao, na reflexo e na tomada de deciso;
O fortalecimento das estruturas da organizao.
Alm dos grupos e organizaes de base, o PIM tambm orienta as assim chamadas ONGs de base
ou de desenvolvimento a criarem tambm seus instrumentos de monitoramento, diferenciando-os
daqueles utilizados pelos grupos de base. Concebe que cada um destes dois grupos deva ter seus
prprios instrumentos e prioridades para o monitoramento, mas em permanente dilogo e articulao um
com o outro.
Em termos metodolgicos, isto se traduz na proposio de um conjunto de passos relacionados
definio de prioridades, seleo de indicadores, coleta de informaes e sua anlise que deveriam ora
ocorrer conjuntamente, ora separadamente por parte destes dois grupos.
Em termos bastante gerais, a PIM pretende ser um mtodo antes de tudo que contribua para o
empoderamento das organizaes de base, possibilitando que desenvolvam sistemas autnomos de
monitoramento de acordo com seus interesses, formas de gesto de projetos, cultura, seus meios e
subjetividade. A participao dos membros dos grupos de base em todas as fases do processo torna-se,
ento, o corao do mtodo.
Outra caracterstica fundamental deriva de sua clara orientao para a gesto, ou seja, que o
monitoramento tem como sentido ltimo aprimorar a ao. Portanto, as condies para o
desenvolvimento desta ao e do prprio trabalho de monitoramento so questes incorporadas como
passos metodolgicos. Alm desses passos, a nfase dada ao processo de reflexo e tomada de
deciso por parte do grupo e a prpria reviso do sistema de monitoramento.
21
PREMISSAS DO PIM
As diferentes organizaes e seus interesses
O PIM distingue as organizaes em trs tipos principais: grupos de auto ajuda ou organizaes
de pessoas; ONGs ou organizaes para o desenvolvimento; agncias de financiamento ou doadores.
Cada um destes grupos tem interesses prprios, especficos. Quando envolvidos numa problemtica
comum, cada grupo esboa seu projeto, cuja interseco resulta num pacto que configura de fato um
projeto. Ainda assim, cada organizao mantm interesse de monitorar e gerir seu projeto, o que torna
necessrio reconhecer, explicitar e negociar autonomamente estes distintos olhares, que podem
sobrepor-se, mas que no so coincidentes.
As diferenas de poder e recursos colocam desafios ao processo de comunicao e entre os
vrios grupos e de sua participao no processo. A participao deve se dar visando garantir a
autonomia de cada um e encarada como algo a ser aprendido.
Monitoramento das mudanas subjetivamente importantes
H vrias possibilidades de foco do monitoramento: oramento, atividades e dos objetivos do
projeto estabelecidos nos documentos e planos (objetivos gerais, objetivos do projeto, resultados,
hipteses e riscos). O PIM baseia-se no monitoramento de impactos em sentido amplo, no qual as
mudanas subjetivamente importantes associadas a um projeto so importantes e prioritrias.
Os indivduos, grupos ou organizaes tem intenes e motivaes particulares, que constituem
objetivos informais orientadores das aes de cada ator. Quanto mais informais os contextos, mais
relevantes so estas intenes, o que torna as mudanas subjetivamente importantes mais relevantes
que os objetivos formalmente fixados. Porm, mesmo nas organizaes formalizadas e estruturadas, a
dimenso informal e subjetiva tambm relevante e invisvel, tal como a parte submersa de um iceberg.
O monitoramento deve estar relacionado a estes objetivos subjetivamente importantes para os
indivduos e organizaes, garantindo a motivao necessria para fazer frente ao tempo e ao esforo
que demanda.
O monitoramento baseado nos planejamentos e documentos formais pode no corresponder a
estes interesses reais de cada grupo relativos aos projetos, em funo dos cdigos culturais especficos
que regem a elaborao destes processos, das dificuldades de expresso e participao dos grupos
populares neles, e do carter muitas vezes incipiente e instvel dos acordos gerados nestes momentos.
As matrizes de planejamento, neste sentido, no equacionam linearmente as necessidades e
expectativas das pessoas e organizaes envolvidas.
Impactos tcnicos e econmicos X Impacto Sociocultural
A maioria dos sistemas de monitoramento convencionais concentra-se nos impactos definidos
formalmente nos planos e de carter tcnico e econmico, quando na verdade os projetos de auto-ajuda
e outros almejam mudanas na capacidade de os grupos atuarem autonomamente, nos
comportamentos, atitudes, valores, conhecimentos, processos de aprendizagem e relaes. No
planejveis e, sobretudo difceis de serem medidos, os impactos socioculturais so na verdade os mais
relevantes a longo prazo, principalmente na perspectiva da aprendizagem.
Participao e monitoramento
A participao no resultado de instrumentos participativos. Requer atitudes que podem ser
aprendidas e exercitadas. A participao um processo contnuo na construo de capacidades que
requer mudanas contnuas. Significa que deve haver uma concesso permanente de poder aos grupos
de pessoas que passam a aprender a agir de forma crescentemente autnoma (empoderamento) e que
outros grupos aprendem a abrir mo de responsabilidades e de poder.
O monitoramento orientado para a tomada de decises com base em lies aprendidas
reconhece, portanto, que cada grupo tem consciente ou inconscientemente suas prioridades prprias,
sistemas de monitoramento e avaliao autnomos, mesmo que no sistemticos ou formalizados. O
dilogo entre estes diferentes interesses e sistemas como iguais e de modo autnomo deve orientar o
monitoramento do projeto conjunto, atravs de momentos coletivos onde observaes, anlises e
aprendizados podem ser compartilhados.
22
CONCEITOS E DEFINIES DO PIM

Monitoramento e Avaliao
Monitoramento significa reflexo peridica, freqente e sistemtica de modo a gerir uma
combinao de atividades de uma organizao ou de um grupo. auto-dirigida e promove o
desenvolvimento contnuo da capacidade pessoal, o desenvolvimento da equipe e o desenvolvimento
organizacional.
A avaliao, que se distingue apenas do ponto de vista analtico, envolve uma anlise
compreensiva sobre as atividades com o objetivo de adaptar a estratgia e o planejamento s
circunstncias. Difere do monitoramento, portanto, na freqncia e na escala das decises.
Indicadores
So exemplos concretos que permitem verificar se as mudanas ocorrem de maneira desejada ou
no. Como placas de sinalizao na estrada, que indicam se a direo est certa e o quanto j se andou.
O PIM no requer solues cientficas, mas solues prticas para as organizaes de base e
pequenas ONGs de desenvolvimento. Portanto os indicadores so recolhidos dos exemplos c e da
experincia das pessoas, sem demandar coleta meticulosa de dados. Os indicadores podem ser
construdos:
Medindo ou contanto - (nmeros exatos);
Graduando ou diferenciando - (muito bom, regular, muito m);
Classificando - (sim ou no, homem ou mulher, etc.);
Descrevendo qualitativamente.
Passos metodolgicos
Existncia de condies prvias

Analisa-se e reflete-se sobre se existem ou no as condies para a implantao do PIM, tais
como: desejo de experimentar novo conceito de monitoramento; disposio para gastar tempo no
monitoramento e na tomada de decises coletivas; aceitao de possveis perdas de influncia por parte
de indivduos; desejo real por maior transparncia; disposio para enfrentar e superar conflitos surgidos
de divergncias entre atitudes, expectativas e objetivos.
Passo preliminar - conhecimento sobre o contexto
Disponibilizao ou obteno de informaes essenciais sobre o contexto e seu compartilhamento, antes
da introduo do PIM. Atravs de mtodos participativos, formais ou informais de identificao de
problemas, outros atores envolvidos e troca de informaes sobre caractersticas das organizaes
parceiras.
Passo 1 - O que deveria ser observado?
Levantamento das expectativas e receios relativamente s mudanas geradas pelo projeto e seleo
daquelas prioritrias considerando sua relevncia para o grupo.
Passo 1 - Como observar?
Para cada expectativa ou receio so definidos indicadores, as fontes de informao e o mtodo de
observao. Prioriza-se as informaes obtidas a partir dos prprios membros do grupo, consideradas
mais autnticas, geradoras de discusso e menos dispendiosas.
Passo 3 - quem deve observar?
Escolha dos indivduos ou grupo que iro a campo coletar as informaes.
Passo 4 - Como registrar as informaes?
Definio das regras para anotao documentao e construo de instrumentos de registro das
informaes, bem como a definio do circuito de informao: quais informaes, para quem, quando e
como?
Passo 5 - O que foi observado?
Apresentao e socializao das informaes obtidas atravs dos indicadores para os membros do
grupo.
23
Passo 6 - Porque foram obtidos esses resultados?

Discusso e anlise dos resultados obtidos, para identificar as necessidades de tomada de deciso em
em face de resultados que no correspondam com as expectativas. Analisa-se tambm as relaes de
causa e conseqncias das mudanas, para extrair aprendizados sobre os processos e identificar as
influncias exercidas (ou potenciais) por parte do grupo e de outros atores no processo.
Passo 7 - Que ao deve ser realizada?
Tomada de deciso e planejamento das aes visando reorientar as atividades. Tambm so realizados
ajustes no sistema de monitoramento, via excluso, incluso ou aperfeioamento dos indicadores,
melhoria dos processos de observao, anlise, comunicao e tomada de deciso.
O PIM, coerente com suas premissas, no d destaque aos indicadores neles mesmos, tanto que no
chega a definir suas caractersticas, formatos ou qualidade tcnica. A qualidade est no quo inteligveis
e significativos so os indicadores para o grupo que define.
Embora seja simples nos passos que prope e articula, o PIM parte de bases terico-polticas bastante
densas, atuais e inovadoras quando comparadas s de outras abordagens sobre monitoramento,
avaliao e uso de indicadores. A contemporaneidade terica e poltica do PIM, bem como suas
novidades, so percebidas nos seguintes aspectos:
A nfase, no apenas retrica, no processo de aprendizagem individual e organizacional que sugere

que a introduo da PIM ocorra devagar, orientada pela simplicidade e pela relevncia para os
indivduos envolvidos.
O reconhecimento, e conseqente incorporao no mtodo, da subjetividade invisvel que move

indivduos e organizaes, que se transforma num critrio para a identificao do que precisa ser
acompanhado em termos de mudanas. Diferencia-se dos sistemas baseados em processo formais
de planejamento, mesmo que participativos, em funo dos limites que eles apresentam ao
trabalham com os aspectos lgicos, lineares e claramente verbalizados.
A afirmao categrica do direito autonomia dos distintos sistemas de monitoramento, formais ou

informais, dos grupos de base, ONGs e agncias, na contramo das tentativas de sistemas ou
mtodos padro para todos e de subordinar uns a outros.
A participao como processo que d viabilidade e sentido ao monitoramento, na perspectiva do

empoderamento e da aprendizagem.
A caracterizao dos projetos e de seu monitoramento como processo de dilogo e pactuao entre
indivduos no interior de um grupo e/ou organizao e destes com os demais atores envolvidos:
ONGs, agncias, beneficirios, etc.
O alerta em torno do tempo necessrio para o processo de monitoramento (estimado em 10% do

total) e para as condies materiais, humanas e subjetivas (motivaes) que devam existir para a
implantao e operao de um sistema de monitoramento.
A orientao de reviso peridica do prprio sistema de monitoramento.
Tais caractersticas tornam o PIM uma abordagem de monitoramento que pode ser extremamente til e
eficaz quando discutida no mbito de grupos de base e pequenas organizaes ou projetos.
Seus limites tendem a surgir quando se trata de iniciativas ou organizaes cujos temas, estratgias de
interveno ou panorama de relaes institucionais impem ao monitoramento e avaliao significados
polticos mais complexos, em vrios nveis e focos e/ou que exigem outra qualidade tcnica e rigor
metodolgico dos indicadores para que sejam referncias aceitas por um leque maior de atores.
Alm destas abordagens metodolgicas, vrias organizaes experimentaram e desenvolveram a seu
modo sistemas de monitoramento e avaliao apoiados por indicadores. Falar delas exigiria descrev-las
nas suas singularidades, o que extrapola a finalidade deste texto. No entanto, deve ser ressaltado que
em algumas dessas experincias certamente ser possvel encontrar respostas polticas e
metodolgicas que superam as lacunas e limites presentes nos mtodos analisados.
24
1.3. Algumas consideraes sobre a construo e o uso de indicadores

1.
As consideraes e prticas mencionadas nos mostram um leque de possibilidades bastante

diversificadas de possibilidades de as ONGs, movimentos e organizaes populares utilizarem
indicadores.
O que de imediato nos indica que no h uma questo ou apenas um debate acerca de indicadores,
mas vrias questes e debates possveis a depender as preocupaes, interesses e necessidades
que mobilizam as organizaes.
A utilizao de indicadores para o acompanhamento de cenrios e polticas levanta questes de
ordem poltica, operacional e metodolgica bastante diferenciadas daquelas que surgem quando se
trata de pensar indicadores que possibilitem a grupos populares co-gerirem processos de
interveno e mudana nas suas realidades. As abordagens no so excludentes mutuamente, mas
preciso reconhecer suas diferentes exigncias para que sua articulao se torne vivel.
2.
Indicadores so instrumentos que, ao par de poderem ser bastante simples, resultam de um

conjunto de mediaes complexas ao mesmo tempo em que so tambm mediadores de vrias
prticas e relaes poltico-comunicativas. apenas no interior destas relaes, no contexto da
prxis na qual esto imersos, que adquirem sentido.
3.
Um conjunto de indicadores, por si s, no nos diz muitas coisas. A possibilidade de expressar algo
est indissociavelmente ligada s prticas ligadas sua definio e uso: os objetivos e interesses
que motivaram o uso de indicadores, o envolvimento de atores, os procedimentos de coleta de
informao, anlise, sistematizao, interpretao, a sua divulgao e o processo de dilogo
estabelecido a partir da, etc. As caractersticas inscritas no processo de produo de indicadores,
no seu uso e nos dilogos que se estabelece a partir deles nos dizem muitas vezes mais sobre eles
do que propriamente as informaes que portam.
4.
Indicadores, assim, como qualquer dado ou palavra escrita ou falada, tanto revelam como ocultam, e
se prestam a diferentes significados e interpretaes. No possvel exigir dos indicadores aquilo
que nenhum outro meio de comunicao ou informao pode oferecer: a capacidade de expressar
todas as relaes acerca de um determinado fenmeno e todas as relaes tambm subjacentes a
ele mesmo.
5.
Como instrumentos resultantes de mediaes, so sempre expresso de um pacto ou de um

processo de dilogo entre sujeitos, seja entre indivduos no interior de uma organizao seja desta
organizao com outros grupos, instituies presentes na sociedade. Sendo parte de uma relao
dialogal, integram uma linguagem cujos termos tm que ser aceitos e compartilhados. O que define
um indicador a sua possibilidade de integrar um processo de comunicao, gerar imagens e
produzir significados sobre o real ainda que no sejam coincidentes.
6.
O impacto dos indicadores est na razo direta da possibilidade de trazer uma percepo nova e
significativa sobre algo que, antes mesmo do indicador, j esteja presente como pr-ocupao das
pessoas. A possibilidade de os indicadores servirem para comparar situaes um aspecto chave,
pois literalmente reordena nas mentes as situaes e valores. O IDH e outros so ndices cujo
impacto tambm se explica por isso, ao obrigar a recompor, sob uma nova lgica e escala, a
percepo que tnhamos do mundo.
7.
Indicadores obviamente revelam e carregam concepes, mas no de modo direto. So construes

mediadas pelas concepes, mas tambm pelas perguntas, questes, interesses e situaes.
Portanto, no derivam direta e univocamente de uma concepo ou iderio terico ou poltico. As
prticas mencionadas no texto nos mostram que para cada conjunto de indicadores, ndices ou
mtodos existe um ator ou um campo de atores que, antes de defini-los, estabeleceu pactos e
compromissos em torno do que se deve almejar, do que se deve observar.
8.
A legitimao de um conjunto ou sistema de indicadores dada pelos processos polticos que lhes
do sustentao. As determinaes mais diretas de um conjunto de indicadores derivam menos da
concepo terica e poltica e mais desta teoria em ao, ou seja, da prxis poltica e das escolhas
polticas que dela derivam. Conceitos e perspectivas abrangentes tambm determinam indicadores,
mas dos indicadores no se chega s concepes. Neste sentido, seria um exerccio meramente
analtico a construo de uma espcie de taxonomia de indicadores, derivada de uma possvel
taxonomia das prticas, dos conceitos e utopias. Apenas se conseguiria resgatar o que se faz ou o
que existe num determinado momento, mas no um horizonte a ser compartilhado. Num momento
25
posterior, em funo da dinmica scio-poltica, a importncia dos temas, das

pretensos indicadores poderia estar profundamente alterada.
9.
questes e de
Alm das exigncias e necessidades impostas pelas mudanas nas relaes de cooperao
internacional, foroso reconhecer que a relevncia dos indicadores tambm tem razes nas
mudanas dos processos de produo e difuso do conhecimento na sociedade informatizada em
rede. Num contexto de produo e consumo voraz da informao, ganha destaque e presena a
informao contundente que mais se aproxime de um ncleo capaz de traduzir conceitos e relaes
complexas. Paradoxalmente, numa poca de declnio das utopias e ideologias, a informao que
mais apropriada aquela que consegue produzir imagens que integrem e povoem o imaginrio
pblico. Ou seja, no um conjunto de informaes e dados objetivos que pesa, mas o modo como
so capazes de adquirir rapidamente um significado para as pessoas. Alguns indicadores, tais como
o sobre a corrupo nos pases, funda-se exatamente neste pressuposto, ainda que de maneira
invertida: o de que a percepo ou sentimento que as pessoas tem sobre o grau de corrupo nas
suas sociedades uma referncia plausvel sobre o que de fato ocorre.
10. A legitimidade social e poltica dos indicadores deriva dos atores que o apresentam e formulam e o
modo como de certo modo respondem adequadamente a regras do jogo institudas e aceitas
socialmente e aos interesses dos vrios sujeitos. A credibilidade dos atores, a consistncia tcnica e
metodolgica, etc., so fatores que pesam de modo distinto nas vrias situaes. Do que resulta que
no h padres nicos que possam ou devam nortear um conjunto de indicadores.
11. Os assim chamados Macro indicadores, ou seja, aqueles referidos a contextos de pases e a
questes abrangentes e aspectos relacionados ao desenvolvimento e cidadania, s conseguem
ser produzidos e ganhar expresso e significado se amparados em processos cumulativos, em
movimentos e blocos de fora num determinado momento histrico e territrio, produtos de redes,
coalizes, governos, tais como o IDH, o ndice de Excluso, ndices de qualidade de vida, etc. E
como tal, dificilmente teriam capacidade de orientao de organizaes tomadas individualmente,
cuja abrangncia e capacidade de interveno estejam muito aqum do que os indicadores se
referem.
Em sntese, converter estes processos em dilogo e pactuao na perspectiva da democratizao
da informao e do empoderamento da populao e, principalmente, daqueles que vivem a
excluso, a desigualdade e a negao de direitos.
12. Uma mesma organizao ou um conjunto delas pode
demandar diferentes sistemas de
monitoramento e avaliao, com tambm distintos enfoques e nfases, em funo dos vrios
objetivos, relaes e pactos que estabelece. Portanto, diferentes tipos, qualidades e processos de
uso de indicadores podem ser necessrios para atender aos interesses e necessidades
institucionais. Aprendizado, controle, disputa de opinio pblica, prestao de contas, busca de
legitimidade social e poltica, podem ser alguns dos objetivos projetados nos sistemas de
monitoramento e indicadores. Estes enfoques, embora contraditrios, demandam definies,
procedimentos, recursos e capacidades tcnicas e operacionais distintas, difceis de serem todas
encontradas numa nica organizao.
13. Os diferentes mtodos de planejamento, monitoramento, avaliao e aqueles que especificamente
abordam a construo de sistemas de indicadores no necessariamente orientam de forma
satisfatria os processos de discusso e anlise que ajudem a uma organizao a realizar as
escolhas diante deste conjunto de possibilidades citadas anteriormente. Em grande parte das vezes,
vrios sistemas de monitoramento e avaliao convivem de forma estanquizada numa mesma
organizao. Sobretrabalho, apropriao burocrtica, no internalizao ou delegao da tarefa a
especialistas so algumas das conseqncias.
26
2. Os Sistemas de PMA e os Indicadores

2.1. A lgica da cadeia de impacto
A LGICA DA AO
Pblico: crianas e adolescentes em

situao de risco social
Dinheiro
Tempo
Conhecimentos
Bens
Atividades ou
produtos
Oficinas
de
msica
Atendimento
psicolgico
Reforo escolar
Aquisio
de
habilidades
e
motivao musicais
Acompanha-mento e
apoio
psicolgico
permanente
Identificao
e
superao
dos
obstulos e deficits
de aprendizado
Melhoria
estima
da
auto-
Maior
disposio
para tarefas coletivas
Impactos
Efeitos /
Resultados
produtos
atividades
recursos
Pblico: mulheres jovens

adultas vtimas de violncia
Mulheres
mais
conscientes dos seus
direitos
Impedimento
de
violao de direitos
Atividades ou
produtos
Capacitao,
sensibilizao
Intercambio
Dinheiro
Tempo
Conhecimentos
Bens
Melhoria
do
desempenho escolar
Assistncia
,
psicolgica,
social e jurdica
Garantia de proteo
fsica e psicolgica a
x mulheres
Diminuio dos casos de

jovens envolvidos em
conflito com a lei
Surgimento de novos
projetos e iniciativas na
comunidade
Mudanas nos valores e
perspectivas de pais e
demais
jovens
da
comunidade
Maior
ndice
de
aprovao escolar
Formao de grupos
culturais
Ampliao
da
participao dos jovens
em eventos sociais,
culturais e polticos
Melhoria da auto-estima
de mulheres
Diminuio dos casos de
violncia
entre
as
famlias atingidas
Reduo dos casos de
impunidade nos casos
de violncia contra a
mulher
Aumento do interesse de
mulheres
das
comunidades prximas
em buscar informaes e
servios
Diminuio
nos
ndices de violncia
contra a mulher nas
comunidades
Novos
servios
pblicos
voltados
para as mulheres
vitimas de violncia
foram criados
Melhoria
no
desempenho escolar
das
crianas
e
adolescentes
Impactos
Criao de rede e
articulao
entre
grupos de mulheres
Efeitos /
Resultados
produtos
atividades
recursos
A LINGUAGEM DE PROJETO
Recursos
Atividades
Resultados
(Produtos,
situaes
ou servios produzidos
diretamente
pelas
atividades)
Objetivo Especifico
(Mudanas duradouras
esperadas no pblico
alvo em funo do
aproveitamento ou uso
dos resultados)
Objetivo Geral
(Mudanas para
as quais se quer
contribuir
para..)
adaptado de ALPS, ActionAid

27
H vrios modos e pontos de partida para se conceber, desenhar e implementar um sistema de

monitoramento e avaliao e/ou de indicadores. A maioria das abordagens e metodologias relacionadas
ao planejamento e gesto de projetos j traz, explcita ou implicitamente, uma orientao ou uma srie
de caractersticas que induz um determinado modo de se estruturar o M&A.
Em comum, todas as abordagens tm a inteno de fazer com que um projeto se explicite, ou seja,
concebido de maneira a encadear logicamente recursos e aes com a finalidade de gerar determinados
processos e resultados. o que chamamos de Cadeia de Impacto. Ao procurarmos relacionar aes e
resultados estamos exatamente buscando afirmar que existe um encadeamento e uma lgica de causa e
efeito: se eu realizar determinadas aes alguns produtos e resultados sero gerados em conseqncia
delas. As abordagens de planejamento estratgico situacional, o Marco Lgico e suas variantes, todas
elas baseiam-se na construo da cadeia de impacto dos projetos como sendo o seu corao, a
essncia de sua estratgia. Cada abordagem pode utilizar conceitos um tanto diferenciados, mas no
geral partem da mesma base: a construo de uma articulao lgica e consistente entre meios e fins.
2.2. Implicaes da abordagem lgica para o desenho do M&A

Quando nos centramos na articulao lgica entre meios e fins de um projeto como sendo a base para o
monitoramento e avaliao, quais so as implicaes?
A primeira delas que praticamente todo o sistema estar baseado nas definies contidas ou
formuladas no projeto: os recursos previstos, as atividades planejadas, os resultados e objetivos nos
vrios nveis.
A segunda, que decorre da primeira, que o trabalho de monitoramento e avaliao passa a estar
fundamentalmente apoiado em indicadores que sejam capazes de revelar ou demonstrar que a lgica
est operando conforme o planejado inicialmente, isto , indicadores para cada resultado e objetivo
previsto no projeto. Quando se tratar de um projeto pequeno, talvez isso no seja um problema. Mas e
se estivermos falando de uma instituio? O esquema e o exemplo a seguir nos indicam as dificuldades
provveis.
28
Exemplo de um esquema lgico de um plano trienal de uma organizao feminista
LGICA DE INTERVENO
INDICADORES
Objetivo Geral
Contribuir para a democratizao da
sociedade brasileira atravs da promoo
da igualdade de gnero com justia social
Indicadores nacionais e regionais sobre participao poltica e social

das mulheres.
Indicadores nacionais e regionais relativos sade da mulher (morbimortalidade materna, DST/AIDS,morbi mortalidade por violncia,
contracepo, cncer crvico-uterino etc)
Indicadores nacionais e regionais sobre o impacto dos projetos de
desenvolvimento na qualidade de vida e mudanas das relaes de
gnero
Objetivos do Projeto:
1. Ampliar e qualificar a ao de
lideranas e de organizaes de
mulheres na defesa dos DHESCA
e contra a excluso social
2.
3.
4.
Promover a incorporao da
perspectiva da equidade de gnero
como dimenso conceitual e
prtica das polticas, projetos e
programas de desenvolvimento
Promoo da sade e ampliao
do conhecimento, acesso, usufruto
e exerccio de direitos reprodutivos
e sexuais por parte de jovens e
mulheres de baixa renda
Fortalecimento institucional do
XGNERO
I.Ob 1.1. Ampliao de contatos e articulaes por parte das mulheres,

grupos e organizaes capacitadas
I.Ob1.2. Aumento da participao das mulheres em discusses sobre
polticas pblicas
I.Ob1.3. Aumento da presena de organizaes de mulheres em
instncias de controle social de polticas pblicas
I.Ob1.4. Aumento da presena feminina em cargos de direo
I.Ob2.1. Aumento de aes de capacitao em Gnero nas
organizaes
I.Ob2.2.Ampliao de programas e projetos governamentais com
perspectiva de gnero
I.Ob3.1. Aumento da populao atingida por servios pblicos em
Sade preventiva
I.Ob3.2. Aumento do interesse em realizao de aes de sade
preventiva
I.Ob4.1. Opinio de parceiros e atores da sociedade civil sobre
importncia e protagonismo do XGNERO
I.Ob4.2. Aumento da capacidade de captao de recursos e de fontes
nacionais
I.Ob4.3. Nmero de anos do oramento futuro com recursos
assegurados
Resultados:
R 1.1 Ter ampliado o contingente de
mulheres do estado do Estado e do
Brasil no exerccio da liderana e da
representao poltica em movimentos
populares,
sociais,
sindicatos
e
partidos progressistas capacitadas
para a defesa dos DHESCA nos seus
espaos de interveno
R
1.2
Ter
ampliado
os
conhecimentos, habilidades, a autoestima e as possibilidades de escolha
de insero social e poltica de
mulheres jovens de comunidades
pobres do Estado
R 1.3 Ter ampliado a capacidade de
implementao de atividades, de
gesto e de articulao de grupos de
mulheres e mulheres em organizaes
comunitrias do Estado
I.Res 1.1.1. Aumento da segurana das lideranas na atuao e

representao social e poltica
I.Res. 1.2.1. Aumento das

mulheres
capacidades e recursos pessoais das
I.Res.1.3.1. Nmero de iniciativas viabilizadas

I.Res.1.3.2. Nmero de organizaes
capacidades organizativas
que
aumentaram
suas
29
LGICA DE INTERVENO
INDICADORES
R 2.1. Ter incrementado a capacidade

de
ongs
e
organizaes
governamentais
para
definir
e
implementar polticas, projetos e aes
orientados
pela
perspectiva
da
equidade de gnero.
R 2.2 Ter implantado Plos de
monitoramento
de
polticas
de
desenvolvimento local na rea X do
Estado
R 2.3. Ter produzido novas
abordagens sobre o trabalho de
mulheres do meio rural e de agentes
sociais no
contexto
das polticas
pblicas de desenvolvimento
R 3.1. Ter melhorado a qualidade
atendimento sade da mulher na
rede pblica do Estado
I.Res.2.1.1 Nmero de organizaes capacitadas

I.Res.2.1.1. Opinio das organizaes sobre grau de alcance dos
objetivos de capacitao
R 3.2 Ter criado uma referncia

poltico-metodolgica de educao em
direitos reprodutivos e sexuais voltada
para adolescentes de baixa renda
R 3.3 Ter promovido a expanso de

prticas preventivas em comunidades
de baixa renda do Estado
R 3.4 Ter implantado um servio de
orientao e estgio para interveno
social
e
poltica
em
direitos
reprodutivos
e
sexuais
para
profissionais de diferentes reas (BR)
R 3.5 Ter produzido e divulgado
diagnsticos sobre vivncia de direitos
no cotidiano
R 4.1 Ter
aprimorado
os
mecanismos de gesto do XGNERO
R
4.2.
Ter
ampliado
a
sustentabilidade e legitimidade social e
poltica do XGNERO na sociedade
brasileira
R. 4.3. Ter possibilitado a diversos

setores da sociedade brasileira o
acesso a informaes atualizadas e
materiais
educativos
nos
temas
Gnero, direitos Reprodutivos e
Sexuais, Feminismo e Movimento de
Mulheres
I.Res.2.2.1. Nmero de municpios com redes estruturadas de

monitoramento
I.Res.2.3.1. Nmero de oficinas e publicaes realizadas segundo

categorias de trabalhadoras
I.Res.2.3.2. Quantidade de iniciativas inditas geradas a partir das
pesquisas
I.Res.3.1.1. Nmero de pessoas capacitadas
I.Res.3.1.2. Nmero de propostas de polticas pblicas lideradas pelo
XGnero que foram aprovadas e nmero de beneficirios potenciais
I.Res.3.1.3. Percentual de cumprimento de normas, procedimentos e
legislao por parte da rede pblica de sado estado do Estado
I.Res.3.1.4. Percentual das resolues de conferncias municipais e
estaduais de Sade implementadas pelo poder pblico
I.Res.3.2.1. Nmero de adolescentes que participaram de pelo menos
80% das atividades
I.Res.3.2.2. Proporo de alcance dos objetivos estabelecidos
originalmente no projeto
I.Res.3.2.3. Nmero de visitas e demandas de informao, por parte de
outros indivduos e/ou organizaes
I.Res. 3.2.4. Sistematizaes concludas e publicadas
I.Res.3.3.1. Nmero de pessoas mobilizadas para aes em sade
preventiva
I.Res.3.3.2. Quantidade de grupos comunitrios com iniciativas em
sade preventiva
I.Res.3.4.1. Opinio sobre a qualidade servio de orientao
I.Res.3.5.1.
papers
Diagnsticos produzidos e publicados sob a forma de
I.Res.4.1.1. Proporo das atividades planejadas e dos objetivos

especficos que foram realizados.
I.Res.4.2.1. Nmero de tcnicos capacitados e tempo despendido
I.Res.4.2.2. Quantidade de recursos investidos em comunicao e
mobilizao de recursos
I.Res.4.2.3. Nmero de fruns e redes e instncias de controle social
que o XGnero participa
I.Res.4.2.4. Nmero de pessoas que recebem informaes sobre o
XGNERO
I.Res.4.3.1. Nmero de indivduos e organizaes que consultaram o
acervo do CAPD. Por tipo de solicitante, natureza da solicitao, rea
de atuao e tema de interesse.
I.Res.4.3.2. Quantidade de pessoas atingidas direta e indiretamente
pela orientao e uso dos materiais do CAPD
30
No exemplo acima, foram definidos 39 indicadores, muitos deles com baixa qualidade de formulao ou
complexos, sem contar os que se referem s estatsticas nacionais da situao das mulheres. Na
prtica, muito provavelmente, apenas alguns poucos indicadores sairo do estado de manchete e
viraro de fato notcia, isto , sero de fato detalhados e tornados operacionais. Um nmero menor
ainda deles ser posto em campo e, com muito esforo, talvez algum deles venha a produzir algum tipo
de informao em torno da qual algum se debruce e faa alguma reflexo ou anlise.
Em sntese, uma tendncia comum a da construo de sistemas de monitoramento e avaliao
baseados na definio de indicadores para todos os nveis (ou quase todos) da cadeia de impacto do
projeto ou da organizao. E eles tendem a ficar no papel ou a produzirem verdadeiros cemitrios de
dados ou bando de dados (ao invs dos famosos bancos de dados) raramente utilizados pela
organizao.
A terceira decorrncia a de se torna difcil a partir de certo ponto estabelecer de forma plausvel e clara
as relaes entre as aes do projeto e da organizao e os efeitos e impactos mais gerais na
sociedade. Como demonstrar atravs de indicadores a relao entre as minhas atividades de formao e
empoderamento de mulheres e os impactos na sociedade local e/ou nas polticas pblicas? Como
explicar ou demonstrar a relevncia de se atuar junto a um universo pequeno de 40 a 60 jovens em
termos dos efeitos que isso pode trazer para a mudana das prticas, valores, leis, polticas mais gerais
da sociedade? Como devemos identificar os impactos de nossas aes? Aqueles que ocorrem nos
indivduos com quem trabalhamos, que so mais prximos e palpveis? No plano societrio, que so
mais relevantes socialmente porm mais distantes, difceis de mensurar e de demonstrar a relao que
tm com nossas aes?
2.3. Lidando com a complexidade da ao e das relaes sociais

A realidade fruto da ao de muitos atores. A cadeia de impacto acima no traduz a realidade, pois
carrega um enfoque de concepo reducionista, linear, determinista, automtico da evoluo das
sociedades, da ao social e do desenvolvimento dos povos. O desenvolvimento no uma relao de
causa e efeito, mas uma dinmica, um campo de foras diversas, mltiplas e muitas vezes antagnicas.
Com freqncia, as mudanas so dificilmente previsveis e inesperadas, pois fruto de mltiplas
interaes que no controlamos. (3)
A incerteza, a complexidade, a diversidade do real e a mudana permanente fazem do nosso projeto
uma aposta, no uma certeza. No h caminhos nem resultados certos ou garantidos, nem pela
anlise nem pela teoria, o que nos coloca a tarefa de sempre acompanhar e aprender da nossa ao,
fazendo-a prxis. Aprender, entretanto, no fruto do acaso, mas resultado de uma inteno e de um
investimento.
Em relao s tarefas simples, pode-se de certo modo observar o que mudou, o que causou a mudana,
compar-la com o que se pretendia e imaginar os desdobramentos frente. Mas no possvel sermos
simplistas assim quando nos referimos a intervenes em sistemas abertos e complexos aliados a
mudanas no-materiais, tais como empoderamento de gnero, capacitao em defesa de direitos,
conscincia, etc. Como estes impactos podem ser avaliados?
Alan Fowler, um ativista e estudioso das prticas sociais e polticas das ongs e da cooperao para o
desenvolvimento, sugere que devemos pensar de maneira mais complexa a cadeia de impacto de
nossas aes. Ele prope que planejemos, monitoremos e avaliemos conscientemente os efeitos de
nossas aes distinguindo e articulando trs dimenses ou planos do social: os indivduos, as
organizaes e instituies e a organizao social e cidad como um todo. Muitas outras abordagens
tambm encaram a questo desta maneira, porm Alan Fowler vai propor uma outra forma de
entendermos a relao entre estas trs dimenses, traduzida no esquema a seguir:
La Gestion por Resultados GPR. Developpement et Paix. Montreal: s/d, mimeo

31
Cadeia de Impacto Complexa

Organizao
social cidad
Linha da cadeia
de impacto
simples
Instituies
Impacto nos
cidados
Cidado
Indivduos
Impacto
Efeito
Impacto
Efeito
Produto
Efeito
Produto
Processo
Produto
Processo
Processo
Este esquema prope que pensemos que os resultados de nossas aes se manifestam de forma
diferenciada nos trs planos. Se, por um lado, somos capazes de gerar impactos profundos na vida das
pessoas com quem trabalhamos, por outro temos profundas limitaes para impactar sociedade como
um todo, o que s possvel a partir de acmulos gerados pelos processos, pelas aes e conflitos
envolvendo um leque amplo de atores. O que nos seria ao mesmo tempo possvel e desejvel (como
objetivo de nossa interveno) seria conseguir produzir mudanas nos processos no plano social que
contribuiro (mas no garantiro) para a mudana dos produtos, tais como leis, polticas, servios, etc.
Entretanto, a gerao destes produtos est alm da capacidade de qualquer organizao, rede ou
projeto isoladamente.
Sendo assim, no faria sentido estabelecer como parmetro para o monitoramento e avaliao possveis
mudanas nas condies sociais mais amplas de uma localidade ou segmento social (efeitos ou
impactos no plano social). Esta abordagem reduziria em muito o nvel de cobrana quanto aos tipos de
resultados e impactos de um projeto ou uma organizao. Porm, imporia como exigncia que os
objetivos da interveno tambm fossem, do mesmo modo, mais realistas e consistentes, mais
plausveis, menos pretensiosos, mais honestos e expressivos da conscincia acerca de quais mudanas
se pretende e se capaz de promover.
2.4. Uma abordagem alternativa

Considerando os limites da cadeia de impacto simples e as dificuldades resultantes da construo de um
sistema de M&A apoiado exclusivamente nas referncias formais e escritas de uma interveno, qual o
caminho mais indicado para a construo de um sistema que efetivamente funcione, seja relevante e til
e contribua com o processo de aprendizado sobre a prtica social?
Um caminho alternativo poderia ser construdo levando-se em considerao algumas premissas:
Uma interveno social e poltica (seja um programa, projeto ou a ao de toda uma

organizao) sempre resultante e expresso de um pacto entre pessoas, grupos e/ou
instituies. Portanto, suas definies traduzem este pacto em termos de compromissos com
recursos, aes e efeitos desejados, mas incapaz de expressar os outros interesses,
motivaes e objetivos que no encontraram lugar ou forma de se expressar, e que inclusive
mudam com o tempo.
32
Os interesses de cada grupo ou ator em relao interveno se manifestam na conduo das

aes mas tambm no modo como cada um olha e julga o seu desenvolvimento e seus
resultados. Isto , alm do interesse em torno do alcance daquilo que est formalmente
definido como objetivo, existem olhares, perguntas, nfases e demandas de informao que se
diferenciam entre os diferentes envolvidos. As prioridades em torno do que monitorar e avaliar
numa interveno social no so determinadas pela letra fria das definies formais e
documentos, mas do interesse vivo que mantm o envolvimento de cada grupo.
Nossa experincia individual e coletiva consolidou uma cultura em que a avaliao uma
prtica marcada fortemente pela idia de fiscalizao, controle e punio. Desde a nossa
experincia no sistema educacional, passando pelo ambiente familiar e profissional, ainda
muito recente e frgil a viso da avaliao como momento de reflexo, troca e aprendizado.
Uma interveno num ambiente complexo impe a quem est envolvido questes relativas
compreenso dos fatores que esto intervindo na realidade, sobre os atores e suas aes e
sobre as aes mesmas do projeto. Existem demandas de aprendizado que se no se tornam
explcitas cedem lugar s questes mais relacionadas ao controle.
A adoo, implementao e ou modificao de uma sistemtica de PMA sempre um

processo de mudana institucional e, portanto, geradora de instabilidade, dificuldades,
resistncias. Sendo assim, no se pode pensar a montagem de um sistema sob um ngulo
tcnico-formal, sob o risco de produo de tenso excessiva, sobrecarga, fracasso,
desestmulo, resistncia ativa e passiva, insatisfao e, por fim, abandono. H que se pensar
em uma estratgia de implementao que parta do que j existe e encare as possibilidades e
os limites de introduo das mudanas e as acompanhe ao longo de todo o perodo. As
organizaes tambm precisam aprender e se familiarizar com novas sistemticas, novos
procedimentos e instrumentos de PMA.
Se a principal tarefa do M&A o aprendizado, ento o mais importante identificar e escolher

as perguntas que orientaro o olhar e a reflexo em torno da ao desenvolvida. Apenas em
torno de perguntas realmente importantes para os envolvidos, sinceras,e viscerais que as
pessoas estaro dispostas a despender esforo, energia, ateno, dinheiro e tempo.
Considerando estes pressupostos, a construo de um sistema de M&A deveria prever um processo de

resgate das referncias formais da organizao/interveno combinadamente identificao dos
principais atores envolvidos e interessados neste M&A (coordenao, scios, grupos beneficirios,
financiadores, parceiros, conselheiros, opinio pblica, mdia, organizaes similares, etc.) e s
preocupaes relativas ao aprendizado sobre a interveno. Destas anlises surgiriam as vrias
perguntas relevantes existentes, e que deveriam ser priorizadas com base numa negociao (real ou
imaginria) de interesses e necessidades, definindo assim os objetivos e a nfase do sistema (controle,
visibilidade, prestao de contas, aprendizado, aprimoramento metodolgico, etc.).
As perguntas prioritrias conformariam a pauta do monitoramento e da avaliao. Posteriormente,.
Seriam definidos os momentos nos quais as pessoas se debruariam sobre essas questes e com que
freqncia, bem como que procedimentos instrumentos seriam utilizados para auxiliar na sua discusso.
Dentre eles esto os indicadores, ferramentas que podem ou no serem necessrias para apoiar a
construo das respostas s perguntas-chave.
O esquema a seguir ilustra este processo.
Referncias e
Objetivos
Interesses e necessidades
vrios grupos e atores
Motivao de
Aprendizado
Negociao real, virtual ou imaginria
Perguntas-chave para o
monitoramento e avaliao
Momentos e procedimentos
para responder s perguntas
Indicadores
Leandro
Lamas Valarelli
33
2.5. Sistemas de M&A Aspectos Centrais
O que influencia e condiciona um sistema de M&A

1. Envolvidos - Quem?
Quem est envolvido ou interessado no sistema de M&A?

2. Interesses Por qu? Para qu?
Quais os interesses e preocupaes centrais que os vrios grupos ou atores

tm em relao ao sistema de M&A?
3. Perguntas O qu?
Quais so as perguntas principais que se quer ver respondidas pelo M&A?

4. Funcionamento/Gesto onde?
Quais so as caractersticas do funcionamento e da gesto da organizao?

Que experincias e acmulos ela tem?
5. Estrutura e Recursos como?
Com que meios a organizao dispe e qual est disposta a mobilizar?
O que contm e caracteriza um sistema de M&A

Ou
O que toda organizao deveria decidir
conscientemente acerca da implantao de um
sistema de M&A
1. Objetivos (por que, para qu)
Transparncia
Accountability Prestao de contas
Controle e tomada de deciso
Aprendizado
Melhoria dos resultados
2. Dimenses e aspectos (o que)
Custos, Atividades
Resultados, Impactos
Contexto
Aprendizagem, flexibilidade e adaptao
Relaes internas, etc...
3. Estratgia por onde?
Por onde comear?
Quem envolver?
O que precisa ser mais sistemtico e organizado?
O que mais crtico? O que mais fcil?
4. Procedimentos e Instrumentos (como)
Quais sero os momentos de anlise e deliberao
Que participantes e quais suas responsabilidades
Definio e construo dos Indicadores
Definio e elaborao dos Instrumentos de coleta
Definio das formas de registro, organizao e divulgao de informaes
Planejar as aes de monitoramento
5. Uso o para que em ao...
Realizao de coletas, sistematizaes, anlises, debates, concluses, decises,
comunicao e difuso
34
3. Indicadores
3.1. Indicadores definies
Um recurso metodolgico, empiricamente referido, que informa algo sobre um aspecto

da realidade social ou sobre mudanas que esto se processando na mesma.
Marca ou sinalizador, que busca expressar algum aspecto da realidade sob uma
forma que possamos observ-lo ou mensur-lo.
So Parmetros qualificados e/ou quantificados que servem para detalhar em que

medida os objetivos de um projeto foram ou sero alcanados, dentro de um prazo
limitado de tempo e numa localidade especfica.
Indicam mais no so a prpria realidade baseiam-se em uma varivel, ou seja,

algum aspecto que varia de estado ou situao, fenmeno que interessa. A realidade e
sua totalidade so impossveis conhecer.
So resultantes de mltiplas relaes - a escolha do que observar, dos instrumentos

que tornam isto possvel, a interpretao e o uso das informaes esto determinados
pela viso da organizao e pelas suas relaes.
No tm significado em si mesmos, apenas situados nas relaes e prticas sociais.
So parte e expresso de um processo comunicativo, pressupem a existncia ou a

inteno de um pacto, de um dilogo entre sujeitos, entre indivduos no interior de uma
organizao ou entre esta organizao e outros grupos presentes na sociedade.
S fazem sentido nas prticas de dilogo e avaliao da prtica => processos de

acompanhamento, monitoramento e avaliao de prticas e iniciativas.
So relativos a aspectos da realidade

Tangveis
Observveis e aferveis quantitativa ou qualitativamente, como renda, escolaridade, sade,
organizao, gesto, conhecimentos, habilidades, formas de participao, legislao,
direitos legais, divulgao, oferta.
Intangveis
Aqueles sobre os quais s podemos captar parcial e indiretamente algumas manifestaes:
conscincia social, auto-estima, valores, atitudes, estilos de comportamento, capacidade
empreendedora, liderana, poder, cidadania.
So dimenses complexas da realidade possvel observar apenas algumas de suas
manifestaes indiretas, "cercando" a complexidade do que pretendemos observar.
FOCO
Benefcios
diretos
e
indiretos
Uso
Disponibilizao
Recursos
PERGUNTAS
Como mudou a situao dos
beneficirios a partir dos
servios e produtos do
projeto?
At
que
beneficirios
servios e
projeto?
ponto
utilizam
produtos
os
os
do
Quais produtos e servios

colocados disposio dos
beneficirios e como o
foram?
Quo adequado est sendo
o
uso
dos
recursos
mobilizados pelo projeto?
TIPOS DE INDICADORES
Mudanas nas capacidades, atitudes, conhecimentos,
percepes, intenes ou comportamentos
Mudanas nas condies sociais, nos processos, nas
prticas sociais, relacionamentos, polticas, leis, etc.
Nmero de participantes nas atividades
Satisfao com qualidade do produto/servio
Nmero de materiais distribuidos
Nmero de pessoas com acesso a determinados
servios do projeto
Quantidade e qualidade de atividades e produtos
planejados e realizados
Quantidade e perfis de participantes
Recursos previstos e efetivamente utilizados
Condio financeira e dotao de pessoal.
35
3.2. Escolha e identificao dos indicadores
Exemplos de critrios para seleo de indicadores

Gua de alternativas e de utilizao de
indicadores (*)
SMART EMART
1.
Especifico
Mensurvel
Alcanvel
Relevante
Temporal
n Atribuvel mudanas so
relativas
aos
processos
deflagrados pelos atores em
evidncia.
n Sensvel reflete as mudanas
que ocorrem no fenmeno em
questo .
n Vivel disponibilidade
fontes, custo, esforo .
de
n Confiabilidade qualidade do
levantamento dos dados
n Inteligibilidade transparncia
da metodologia de construo do
indicador.
n Comunicabilidade
compreensvel
por
indivduos e grupos.
vrios
Identifique com preciso o resultado que

deve ser medido.
2. Para cada indicador, responda as seis (6)
perguntas seguintes :
2.1
Este
indicador
pode
medir
adequadamente tal resultado?
2.2
Este indicador pode indicar mais ou
menos quando se produziu a mudana?
2.3
Este indicador oferece uma informao
a partir da qual seja possvel tomar
decises?
2.4
Existem
fontes
de
informao
confiveis e acessveis sobre este
indicador?
2.5
Conta-se com os meios necessrios
para pagar os custos deste indicador e
das fontes de informao pertinentes?
2.6
Este indicador permite comunicar
facilmente
e
sem
maiores
questionamentos o estado do
resultado?
3. Se voc responder sim a seis (6) perguntas,
utilize este indicador. Assegure-se da
fidelidade das fontes de informao. Na
medida do possvel, recolha informao
regularmente. Ocupe um momento a cada
trs meses para redigir uma parte do
informe.
4. Se voc respondeu no a uma das
perguntas, descarte este indicador.
(*) Fonte: La Gestion por Resultados GPR. Developpement
et Paix. Montreal: s/d, mimeo.
Na prtica, nem sempre o indicador de maior validade o mais confivel;

nem sempre o mais confivel o mais inteligvel; nem sempre o mais claro o
mais sensvel; enfim, nem sempre o indicador que rene todas estas qualidades
passvel de ser obtido na escala espacial e periodicidade requerida .
(Jannuzzi, Mello, Tibau e Arruda - Curso Indicadores Sociais e polticas
pblicas. ENCE/IBGE, IBASE, FORD, 2003)
36
4. Construo e operacionalizao dos

indicadores
Caractersticas dos indicadores
Categoria assunto ou tema que estamos querendo analisar.
Indicador o aspecto que queremos avaliar ou acompanhar as mudanas.
Um indicador deve ter especificado os seguintes aspectos:
Varivel(is) o corao do indicador, o(s) aspecto(s) que varia(m) e que
formar(o) o indicador.
Tipo de medida: define se o indicador ser baseado em dados, estimativas ou
opinio.
Fonte onde vai se buscar, obter ou encontrar a informao.
Unidade de medida: especifica que medida ser utilizada pelo indicador para
expressar o fenmeno, as categorias, escalas e parmetros que sero utilizados na
coleta e sistematizao dos dados, conferindo concretude e operacionalidade ao
indicador.
Medindo ou contanto - (nmeros exatos);
Graduando ou diferenciando - (muito bom, regular, muito m);
Classificando - (sim ou no, homem ou mulher, etc.);
Descrevendo qualitativamente.
Unidade de anlise: define qual a unidade sobre a qual sero construdas e

comparadas as medidas, se indivduos, organizaes, comunidades, cidades, etc.
Instrumento(s) de coleta e registro tipos de instrumentos que sero utilizados.
Exemplos:
Coleta = Formulrio, Calendrio, Questionrio, caderno de campo, Observao,
Imagens.
Registro = Banco de dados, Planilha, quadro negro, fichas, Vdeo, etc.
Freqncia de observao, coleta intervalo de tempo que ser necessrio
levantar as informaes de modo a registrar possveis mudanas na situao.
Freqncia de sistematizao intervalo de tempo em que sero sistematizadas
e analisadas as informaes coletadas.
37
Alguns Exemplos
Categoria
1. Organizao - Gesto democrtica e

participativa
Indicador
Grau de renovao de lideranas
representativas das organizaes
comunitrias nas reas apoiadas
Variveis Surgimento de novas lideranas;
Papeis
assumidos
pelas
novas
lideranas.
Tipo de medida
Fonte
Unidade de medida
Unidade de anlise
Instrumento(s) de
coleta e registro
Freqncia de
observao, coleta
Freqncia de
sistematizao
Opinio (dos Tcnicos).
2. Empoderamento das mulheres

Aumento de capacidades e recursos
pessoais das mulheres
Conhecimentos sobre o mundo que a

cerca e seu funcionamento;
Sentimento de capacidade de mudana
da vida pessoal e das condies
econmicas sociais e polticas nas quais
vive;
Posse de meios e habilidades;
Capacidade de planejar e realizar coisas,
aes e produtos.
Opinies das mulheres ao longo do tempo
que participaram do ciclo de formao bienal
sobre o que consideram ser sua situao
atual em relao s variveis.
Tcnicos.
Mulheres Participantes.
Unidade de medida: escala de situaes

onde:
0 = No houve surgimento e/ou atuao
de novas lideranas.
1 = poucos indivduos surgiram e
passaram a assumir algumas tarefas
coletivas.
2 = poucas lideranas surgiram e
algumas delas assumiram papis de
coordenao
e
representao
coletiva.
3 = vrias lideranas surgiram e algumas
delas
assumiram
papis
de
coordenao
e
representao
coletiva.
4 = vrias lideranas surgiram e
assumiram a maior parte dos papis
de coordenao e representao
coletiva.
Comunidades
Estgio da sua situao pessoal em relao

aos aspectos, em termos de Muito alto,
bastante, mediano, pouco, muito pouco
Conhecimentos que possui sobre o
mundo que a cerca e seu funcionamento;
Sua capacidade de mudar a sua vida
pessoal;
Sua capacidade de mudar as condies
econmicas sociais e polticas nas quais
vive;
Os meios e habilidades que possui;
Sua capacidade de planejar e realizar
coisas, aes e produtos.
Relatrios de atividades dos tcnicos.
Questionrios aplicados pelas monitoras s

participantes.
Semestral.
Anual, aplicados s participantes no incio do

ciclo, ao final dele e 1 ano aps seu trmino.
Anual.
Anual, no incio do ciclo, ao final dele e 1 ano

aps seu trmino.
Indivduos - amostra
Observaes
No exemplo 2 esto identificadas a unidade de medida e as variveis, mas no como as respostas a
estas ltimas se combinaro para produzir a medida do indicador. Para concluir a definio do indicador
preciso combinar as informaes que viro das variveis para formar o indicador. Por exemplo, se nas
variveis tivssemos trs respostas muito pouco e duas bastante, o que teramos como aumento da
capacidade e dos recursos das mulheres? Poderamos ento combinar as respostas e definir como elas
produziro a informao que na verdade queremos: qual o grau de aumento da capacidade e dos
recursos das mulheres, criando-se algumas das categorias a partir da combinao de respostas ou soma
de pontos se quisermos assim s variveis.
38
H uma tendncia a se considerar finalizado o trabalho de definio do indicador assim que

identificamos as variveis e estabelecemos suas unidades de medida. Entretanto, devemos ainda definir
como as informaes das variveis so combinadas e sintetizadas para gerar a informao que
se espera do indicador, a sua medida. Caso contrrio, teremos na verdade construdo vrios outros
indicadores numa espcie de efeito cascata, onde para definir mais precisamente o que compe um
indicador criamos vrios outros e assim por diante. H que se ter claro exatamente o que desejamos
buscar de informao que nos sirva e seja suficiente, de modo a podermos fechar o ciclo e
combinarmos as variveis na produo da informao do indicador.
O IDH, por exemplo, um ndice composto por trs indicadores, cada qual composto por muitas
variveis que no so simples. Entretanto, o IDH no a descrio das inmeras variveis que o
compem, mas a sua combinao e sntese em uma nica informao numrica um valor entre 0 e 1
a partir da qual cada territrio (pas, regio, municpio, bairro, etc.) colocado frente a outros numa
ordem que vai do maior IDH ao menor, e ainda agrupado em blocos definidos como de alto, mdio ou
baixo desenvolvimento humano.
Exemplo 1
Indicador = Nvel de adoo de novas prticas agroecolgicas pelos agricultores capacitados
Varivel(eis):
a) Nmero de propriedades com prticas agroecolgicas;
b) prticas agroecolgicas adotadas nas propriedades
c) nmero de prticas agroecolgicas adotadas nas propriedades.
Tipo de medida: depoimentos
Fontes: Tcnicos e agricultores.
Unidade de Medida: Baixo, iniciando, parcial / transio, pr-agroecolgico, agroecolgico.
(
(
(
(
(
(
(
(
(
(
(
(
(
(
(
S/N
)
)
)
)
)
)
)
)
)
)
)
)
)
)
)
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
Prticas
Faz manejo e conservao do solo
Faz manejo ecolgico de pragas
Tem rea de conservao
Usa adubos orgnicos
Tem rea de SAFs / silvipastoril
Realiza prticas de conservao e recuperao de nascentes de gua
Realiza manejos florestais de no madeireiros e PFNM
Faz rotao de culturas
Faz consrcio de culturas
Tem prticas de conservao da gua
Faz integrao animal-lavoura
Utiliza Quebraventos
Faz manejo de paisagens
Faz preservao do patrimnio gentico
Faz outras prticas agroecolgicas
Total de prticas agroecolgicas = (
)
Nmero de prticas
Categoria
0 2 = baixo
3 a 5 = iniciando
6 a 8 = parcial / transio
9 a 11 = pr-agroecolgico
Maior que 12 = agroecolgico
Unidade de anlise : propriedade.
Freqncia de coleta: no incio do projeto e ao final de 2 anos do projeto (ou na avaliao final).
Freqncia de sistematizao: no incio do projeto e ao final de 2 anos do projeto (ou na avaliao
final).
Instrumento de coleta: questionrio para proprietrios da comunidade.
39
Exemplo 2
Indicador: Intensidade do exerccio do papel difusor e multiplicador dos agricultores
Variveis:
Distribuio de panfletos, cartilhas e materiais
Realizao de visitas
Recepo de visitas recebidas
Indicao de novos agricultores
realizao de outras aes de difuso
Tipo de medida: opinio dos tcnicos
Fonte: Relatrios dos tcnicos
Unidade de medida:
Escala de intensidade a partir da ocorrncia das variveis: nenhum papel,
fraco, mdio, forte, muito forte
a) Sim e No para a ocorrncia das variveis
VARIVEIS
S/N
a) Distribuio de panfletos, cartilhas e materiais

b) Realizao de visitas
c) Recepo de visitas
d) Indicao de novos agricultores
e) Realizao de outras aes de difuso
Total de prticas existentes
b) Classificao quanto intensidade do papel segundo a quantidade de prticas
QUANTIDADE DE PRTICAS =>
INTENSIDADE DO PAPEL
Nenhuma
= Nenhum papel
Uma prtica
2 prticas
3 prticas
= fraco
= mdio
= forte
4 ou mais
= muito forte
Unidade de anlise: agricultor

Freqncia de coleta: trimestral
Freqncia de sistematizao: semestral
Instrumento de coleta: Ficha de propriedade
Dificuldades e equvocos comuns

1. Indicador como expresso de causa ou consequncia do fenmeno que se pretende
observar. Ex:
Indicador de auto-estima = melhoria no rendimento escolar
2. Indicador como o prprio fenmeno quantificado ou medido. Ex:
Indicador de auto-estima = nvel de auto-estima
3. Indicador como a descrio detalhada de um conjunto de variveis do fenmeno, sem
indicar a medida do fenmeno de foram sinttica Ex:
Indicador de auto-estima = freqncia dos hbitos de asseio pessoal; auto-cuidado;
percepo sobre sua capacidade de realizar coisas e concretizar desejos, etc. Se
uma coisa acontece e outra no, o que isso significa quanto a auto-estima da
pessoa?
40
5. Construo dos instrumentos de coleta e

sistematizao
muito comum que o processo de construo de indicadores termine na fase de sua definio
conceitual. Entretanto, o indicador s ter sentido se ele for utilizado e bem utilizado. Um instrumento
de coleta que no seja fiel s definies e caractersticas do indicador, ou que organize e registre
precariamente as informaes pode ser responsvel por tornar intil muito esforo e investimento.
Aps a coleta, necessrio ter definido de que modo sero registradas e armazenadas as informaes,
de modo a permitir e a facilitar a sua sistematizao e apresentao final. A depender do tipo e do
volume das informaes, apenas guardar os instrumentos de coleta (formulrios, planilhas,
questionrios) pode tornar to trabalhosa a sistematizao das informaes no futuro que acabe gerando
o abandono da tarefa. O registro previamente planejado das informaes obtidas atravs dos
instrumentos de coleta tornam que possvel o seu aproveitamento futuro
Por fim, a informao bruta, ainda que organizada, ainda no a informao que se necessita. O que se
busca a informao simples e que aponte rpida e claramente a mudana que o indicador pretende
captar. Portanto, alm do registro, faz-se necessrio um tratamento da informao, a sua sistematizao
e apresentao, de modo a cumprir adequadamente a misso do indicador: a de trazer uma informao
sinttica e capaz de nos aproximar rpida e confiavelmente de processos que esto em curso na
realidade. Tabelas e planilhas enormes, assim como grficos complexos demais tendem a limitar a
capacidade de percepo e interpretao daquilo que se pretendia trazer tona. Prever ou exercitar
antecipadamente a forma como se pretende que a informao do indicador seja apresentada inclusive
uma boa maneira de checar eventuais inconsistncias do indicador ou dos instrumentos utilizados.
Como exemplo, vamos verificar as possibilidades existentes em relao a um instrumento comumente
utilizado em avaliao de oficinas o Humormetro.
Exemplo 1 Indicador de monitoramento utilizado pelo instrutor durante o curso:

Indicador Nvel de satisfao dos participantes com o andamento do trabalho.
Varivel sentimento em relao ao trabalho.
Tipo de medida e Fonte Opinio dos participantes, individualmente, sobre seus prprios
sentimentos.
Unidade de medida Escala subjetiva, atravs de imagens.
Insatisfao
Unidade de anlise participante.
Freqncia de coleta dirio.
Freqncia de sistematizao dirio.
regular
satisfao
41
Instrumentos de coleta, registro e sistematizao
Instrumento de:
coleta
Registro e
sistematizao
Utilizado
Outra possibilidade
d
d
d
Questionrio individual
d
d
d
d
d
d
apresentao
d
d
d
As formas de apresentao podem enfatizar diferentes aspectos revelados pelo indicador bem como
facilitar a sua compreenso por parte de diferentes grupos.
Abaixo, est um exemplo de resultado do monitoramento ao longo de uma oficina de 4 dias cujas
informaes foram coletadas, registradas, sistematizadas e apresentadas a partir de um nico e mesmo
instrumento: a matriz.
Dia
Dia
Dia
Dia
01
02
03
04
4
2
4
3
7
8
9
4
5
3
2
Entretanto, poderamos apresent-los de outras formas:
GRFICO DE PIZZA
insatisfao
DIA 01
DIA 02
mdio
Ajudam a construir a
idia de
PROPORO
regular
satisfao
satisfao
%
100
42
GRFICO DE LINHA
satisfeitos
Ajuda a construir a
idia de EVOLUO
50
regular
insatisfeitos
1 Dia
Dia 02
Dia 03
Dia 04
GRFICO DE BARRAS
%
100
Ajuda a construir a idia

de
PROPORO e
EVOLUO
satisfeitos
regular
insatisfeitos
50
Dia 01
Dia 02
Dia 03
Dia 04
Imagens conhecidas
facilitam a percepo da
PROPORO
DIA 01
insatisfeitos
regular
satisfeitos
43
Exemplo 2
Indicador de impacto de uma organizao que atua com crianas e adolescentes em
situao de risco social nas ruas do centro do Rio de Janeiro
Impacto desejado: Mudana do olhar da sociedade em relao a crianas e adolescentes em situao
de risco social nas ruas do centro do Rio de Janeiro.
Indicador: Atitudes dos comerciantes com relao a crianas e adolescentes em situao de rua
Variveis: tipos de Atitude
Negativas
Positivas
1. Impedir o acesso das crianas e/ou adolescentes aos clientes.

2. Retirar fisicamente a criana e/ou o adolescente do estabelecimento
3. Chamar a polcia (DPCA) para retirada das crianas e/ou adolescentes
4. Alimentar regularmente crianas e/ou adolescentes em situao de rua.
5. Contribuir financeiramente, de forma regular, para uma Instituio que trabalhe
com este pblico.
6. Financiar estudos/bolsa famlia de crianas e/ou adolescentes
Tipo de Medida: Depoimento (do responsvel pelo estabelecimento)

Fonte: Responsvel pelo estabelecimento
Unidade de Medida: classificao de 5 atitudes atitude agressiva, atitude defensiva, Indiferente,
sensibilizado fortemente, envolvimento ativo
Escala de 06 a + 06, representando diferentes atitudes

Atitude
Valor
1. Impedir o acesso das crianas e/ou adolescentes aos clientes.
-1
2. Retirar fisicamente a criana e/ou o adolescente do estabelecimento
-2
3. Chamar a polcia (DPCA) para retirada das crianas e/ou adolescentes
-3
4. Alimentar regularmente crianas e/ou adolescentes em situao de rua.
+1
5. Contribuir financeiramente, de forma regular, para uma Instituio que trabalhe

com este pblico.
+2
6. Financiar estudos/bolsa famlia de crianas e/ou adolescentes
+3
De cada estabelecimento faz-se soma

Somar todos e produzir uma mdia, que ser apresentada em grfico segundo a seguinte escala:
De 06 a 04 atitude agressiva
De 03 a 01 atitude defensiva
Zero Indiferente
De + 01 a + 03 sensibilizado fortemente
De + 04 a + 06 envolvimento ativo
Unidade de anlise: Estabelecimentos da Lapa

Instrumento de coleta/registro: Questionrio
Freqncia de coleta: Mensal
Freqncia de sistematizao: Bimestral
Instrumento coleta Questionrio para o responsvel pelo estabelecimento
1- O responsvel por este estabelecimento financia os estudos de uma criana e/ou um
adolescente em situao de rua?
Sim(
)
No(
)
Outra:___________________________
44
2- O responsvel por este estabelecimento contribui, regularmente, para alguma instituio que
trabalhe com crianas e/ou adolescentes em situao de rua?
Sim(
)
No(
)
Outra:___________________________
3- O responsvel por este estabelecimento oferece, regularmente, alimentao a crianas e/ou

adolescentes em situao de rua?
Sim(
)
No(
)
Outra:___________________________
4- O responsvel por este estabelecimento impede o acesso aos clientes de crianas e/ou
Sim(
)
No(
)
Outra:___________________________
5- O responsvel por este estabelecimento costuma retirar, fisicamente, crianas e/ou adolescentes
em situao de rua do contato com clientes?
Sim(
)
No(
)
Outra:___________________________
6- O responsvel por este estabelecimento chama a polcia (DPCA) para retirada de crianas e/ou
Sim(
)
No(
)
Outra:___________________________
Observar a escala:
6
5
4
3
2
1
Pergunta
Chamar a polcia (DPCA)
Retirar fisicamente
Impedir o acesso
Alimentar regularmente
Contribuir com uma instituio
Financiar estudos
Valor
- 03
- 02
- 01
+ 01
+ 02
+ 03
Sistematizao:
12
Atitude
agressiva
Atitude
defensiva
Indiferente
10
8
6
4
Sensibilizado
fortemente
Envolvimento
ativo
2
0
1 Bim 2 Bim 3 Bim 4 Bim
* Comparando os grficos anualmente, poderamos perceber variaes que talvez se explicariam pela
poca do ano (como o Natal) quando a relao dos comerciantes com as crianas e/ou adolescentes em
situao de rua poderia se alterar em funo da existncia de um sentimento de solidariedade coletivo.
45
6. Exemplos de indicadores
Projeto Niteri sem Fronteiras - SESC
OBJETIVO
GERAL
OBJETIVOS
ESPECFICOS
Contribuir para a formao de crianas e jovens como sujeitos de sua

cidadania
Promover a participao ativa e crtica da criana nas diversas esferas de
sua vida
Oficinas de sensibilizao envolvendo as 3 ecologias (pessoal, social e
ambiental
Iniciao esportiva, arte-educao, artes cnicas, percusso e grafite
Crianas e adolescentes de 07 a 13 anos
ATIVIDADES
PBLICO ALVO
Indicador
Varivel(eis)
Tipo de medida
e Fonte
Unidade
de
medida
Unidade
de
anlise
Coleta
e
Registro
Freq
de
observ./ coleta
Freq.
de
sistematizao
Adoo de atitudes proativas na vida

Esferas da vida (famlia, comunidade prxima, SESC, escola)
Tomar iniciativas
Emitir opinies a respeito de fatos e situaes
Formular perguntas e questionamentos
Depoimento das crianas e adolescentes que participam do projeto
Graduao e classificao (vide adiante)
Crianas e adolescentes que participam do projeto
Questionrio
bimensal
Bimensal tcnicos
Semestral gerente de unidade
Anual sede
Unidade de medida
Esferas
vida
da
Escola
Famlia
Comunidade
SESC
TOTAL entre
= proatividade
0= nunca ou quase nunca 1= s vezes

2 = sempre ou quase sempre
Peso Toma iniciativas
Emite opinies
Formula
perguntas
e
questionamentos
x2
1
1
0
x2
0
0
2
x3
0
1
0
x1
0
0
1
TOTAL
0a5
nenhuma
6 a 10
baixa
11 a 20
mdia
21 a 30
alta
Total
4
4
3
1
12
31 a 40
muito alta
46
Banco Rio de Alimentos - SESC

OBJETIVO
GERAL
OBJETIVOS
ESPECFICOS
ATIVIDADES
PBLICO ALVO
Possibilitar o acesso ao alimento, combatendo o desperdcio

Melhorar a qualidade alimentar das refeies oferecidas por instituies
assistenciais que atendem crianas, adultos e idosos
Fortalecer as instituies assistenciais que integram o Projeto
Aes educativas (social e nutricional)
Sensibilizao e capacitao de voluntrios
Capacitao para fortalecimento das instituies
Parcerias com empresas e organizaes da sociedade civil
Atividades recreativas
Campanhas de arrecadao
Promoo do encontro de doadores, produtores, instituies e voluntrios
Turismo receptivo
300 instituies assistidas, complementando cerca de 12.000 refeies/dia
Indicadores Desenvolvidos
Indicador
Varivel(eis)
e
Unidade
de
medida
Tipo de medida
e Fonte
Coleta
e
Registro
Freq
de
observ./ coleta
Freq.
de
sistematizao
Unidade
de
anlise
Possibilidade A (2 indicadores)
a) Adoo de novos hbitos
alimentares pelas instituies
b) Adoo de prticas de difuso
e
multiplicao
de
conhecimento em Segurana
alimentar
Indicador 1 - Adoo de novos
hbitos
alimentares
pelas
instituies
Variveis (sim ou no
ou
gradao) para:
diversificao de alimentos;
instalaes
adequadas;
manuseio;
armazenamento;
etc.
Indicador 2 Adoo de prticas
de difuso e multiplicao de
conhecimento
em
Segurana
alimentar
Variveis (sim ou no)
ou
gradao para:
Realizao de palestras e
reunies com comunidade;
Publicaes,
panfletos;
Realizao de treinamentos e
oficinas; Campanhas; Etc.
Opinio dos tcnicos
Possibilidade B (um indicador sinttico)

Adoo de novas prticas institucionais
promotoras de segurana alimentar
Variveis
Adoo de novos hbitos alimentares pelas
instituies
Adoo de prticas de difuso e
multiplicao
de
conhecimento
em
Segurana
Medida
Sim/No ou Gradao (pouco, mdio, alto)
Exemplo
Hbitos
alimentares
alto
mdio
pouco
Prticas
pouco
bom
regular
baixo
difuso
mdio
timo
regular
baixo
alto
timo
bom
regular
Pesquisa (j efetuada pelo Banco)

No incio do ciclo, ao final dele e 01 ano aps o seu trmino
Anual No incio do ciclo, ao final dele e 01 ano aps o seu trmino
Instituies
47
Projeto de Segurana Alimentar e Nutricional no Semi-rido Nordestino

ASPECTO
Participao popular
Polticas Pblicas
nas
INDICADOR
1. Intensidade da Participao social em torno de propostas de
polticas pblicas de Segurana Alimentar e Nutricional (SAN)
Varivel(is)
Presena de representantes de organizaes da sociedade civil em instncias de controle social de
polticas relacionadas a SAN (GTs, CONSEAs) no municpio
Organizao autnoma, por parte de organizaes da sociedade civil, de seminrios e/ou eventos de
debate pblico no municpio em torno de polticas e leis relativas a SAN
Participao das principais organizaes da sociedade civil local em conferncia municipal ou evento
pblico de definio de polticas ou diretrizes de SAN no municpio
Ocorrncia de iniciativas de formulao e difuso de propostas por parte de organizaes da sociedade
civil: propostas de leis, campanhas de divulgao e/ou mobilizao, artigos e/ou documentos pblicos
Tipo de medida e fonte
Depoimento de lideranas do municpio
Unidade de anlise
municpio
Unidade de medida
Escala de intensidade: nenhuma, baixa, mdia, alta, muito alta
a) Sim ou No para cada varivel
b) Gradao de intensidade de participao segundo a quantidade de SIM
00 Sim = nenhuma
01 Sim = baixa
02 Sim = mdia
03 Sim = alta
04 Sim = muito alta
Instrumento(s) de coleta e registro
Freqncia de coleta e sistematizao
Exemplos de possvel sistematizao dos resultados do indicador
Percentual de municpios por intensidade de Participao nas

Poltiicas Pblicas de SAN, segundo os anos do Projeto
50%
nenhuma
baixa
mdia
alta
altssima
40%
30%
20%
10%
0%
ano 1
ano 2
ano 3
Anos do projeto
ASPECTO
Participao popular
Polticas Pblicas
nas
48
INDICADOR
2. Qualidade da Participao Social nos espaos de formulao de
Polticas de Segurana Alimentar e Nutricional
Varivel(is)
Existncia de espaos de formulao e controle social de polticas
Presena de representantes eleitos da sociedade civil nestes espaos
Representantes da sociedade civil realizam ou participam de eventos de discusso envolvendo outras
organizaes alm da sua para analisar pautas, formular propostas e planos de ao antes das reunies
oficiais dos espaos
Agenda e documentos das reunies oficiais so divulgados e conhecidos antecipadamente pelas
organizaes da sociedade civil na maior parte das vezes
Representantes da sociedade civil apresentam propostas consolidadas em documentos ou propostas de
lei
Existncia de propostas e formulao de perspectivas e planos de ao
Depoimento de lideranas dos municpios
Unidade de anlise
municpio
Unidade de medida
Escala de qualidade de participao: inexistncia de espaos, sem participao, formal, baixa, mdia,
alta, muito alta
a) Sim ou No para a varivel 1
No = inexistncia de espaos
b) Se SIM para a varivel 1, ento SIM ou NO para a varivel 2
No = sem participao
c) Se SIM para a varivel 2, ento SIM ou NO para as variveis 3 a 6
d) Gradao de qualidade de participao segundo a quantidade de SIM
00 Sim = formal
01 Sim = baixa
02 Sim = mdia
03 Sim = alta
04 Sim = muito alta
Exemplos de possvel sistematizao dos resultados do indicador
Frequencia municpios segundo a Qualidade

da Participao Social nas Instancias de
Controle Social de Poltiicas Pblicas de SAN
Qualidade da participao em Inst Controle

Social de Polticas Pblicas Municipais de
SAN - 2006
sem espaos
5%
5%
32%
muito alta
sem participao
20%
13%
10%
100%
15%
apenas formal
alta
80%
mdia
baixa
60%
mdia
40%
formal
alta
20%
sem particip
muito alta
baixa
sem espaos
0%
2005
2006
2007
49
Programa de Incluso Social de Famlias

INDICADOR
1. Mudana de auto-estima
Varivel(is)
Determinao manter esforos na realizao e/ou concluso de atividades

Auto-valorizao (cuidados pessoais) hbitos de cuidado com higiene e apresentao pessoal
Auto-confiana confiana na sua capacidade de realizar coisas que superem obstaculos/problemas
Capacidade de expresso/comunicao tomar iniciativa para falar e expor opinies

Observao das assistentes sociais em conjunto com lideres comunitrias
Unidade de anlise
Indivduos amostra aleatria
Unidade de medida alternativa 1
Unidade de medida alternativa 2
Gradao quanto ao nvel de mudana da auto- Gradao de auto-estima dos indivduos:
estima dos indivduos: baixaram muito, baixaram
Baixssima; baixa; mdia; alta; altssima
pouco,no mudaram, mudaram pouco, mudaram
bastante,
mudaram
muito,
mudaram a) Sim ou no para cada varivel
completamente sua auto-estima no perodo
b) Gradao de nveis de auto-estima
00 Sim = baixssima
a) Sim ou no para cada varivel
01 Sim = baixa
b) Gradao de nveis de auto-estima
02 Sim = mdia
00 Sim = baixssima
03 Sim = alta
01 Sim = baixa
04 Sim = altssima
02 Sim = mdia
03 Sim = alta
OBS: Nesta hiptese, o indicador seria outro: Nvel
04 Sim = altssima
de auto-estima dos indivduos
c) Gradao do nvel de mudana da auto-estima de
cada indivduo
Recuo de duas posies (soma negativa de 2 ou
mais = baixou muito
Recuo de uma posio = baixou pouco
Igual = no mudou
Aumento de uma posio = mudou pouco
Aumento de duas posies = mudou bastante
Aumento de trs posies = mudou muito
Aumento de quatro posies = mudou
completamente
100%
80%
altssima
60%
alta
40%
mdia
20%
baixa
baixssima
0%
trim
01
trim trim trim

02
03
04
Instrumento(s) de coleta e registro:

Formulrio/cadastro famlias
5%
10%
5%
5%
Hiptese 1-Nveis de mudana auto-estima trimestre I

baixou muito
baixou pouco
no mudou
aumentou um pouco
aumentou bastante
aumentou muito
20%
15%
aumentou totalmente
40%
50
2. Nvel de participao comunitria dos indivduos

Varivel(is)
Fazer parte de algum grupo na comunidade
Assumir alguma funo na comunidade ligada ao programa
Participao/ envolvimento em aes voltadas para a melhoria de bens e servios na comunidade
Posicionamento/ao de apoio/defesa em relao a indivduos e/ou famlias em dificuldades
Famlias Depoimento de chefes de famlia
Adolescentes depoimento dos adolescentes
Unidade de anlise
Indivduos (chefes de famlia / adolescentes) amostra aleatria
Unidade de medida
Gradao quanto ao nvel de participao: nenhuma; baixa; mdia, alta, muito alta
a) Sim ou no para cada varivel
b) Gradao de nveis de participao
00 Sim = nenhuma
01 Sim = baixa
02 Sim = mdia
03 Sim = alta
04 Sim = muito alta
Questionrio aplicado pelas assistentes sociais
Famlia Entrada no programa, 03 meses, 06 meses, 09 meses, 12 meses, sada e 06 meses depois
Adolescentes entrada / recebimento bolsa / desligamento / 01 ano aps
Evoluo da auto estima segundo o tempo de participao no projeto
100%
90%
80%
70%
muito alta
60%
alta
50%
40%
mdia
baixa
30%
nenhuma
20%
10%
0%
entrada
bolsa
sada
01 ano aps
51

3. Rendimento escolar dos adolescentes atendidos
Varivel(is)
a) Situao de aprovao escolar do adolescente
b) Freqncia do adolescente no ano letivo
c) Senso crtico
Registros dos alunos na escola
Observao das Assistentes sociais
Unidade de anlise
Adolescentes amostra
Unidade de medida Gradao: muito baixo, baixo, regular, alto e muito alto
a) Situao de aprovao escolar do adolescente
Aprovado ou com at 01 matria abaixo da mdia
Aprovado com Pendncia ou de 2 a 3 matrias abaixo da mdia
Reprovado ou com acima de 3 matrias abaixo da mdia
b) Freqncia mdia do adolescente no ano letivo
Mais que 75%
De 50 a 75%
Menos de 50%
c) Senso crtico
Nenhum muito pouco
algum
bastante
SITUAO DE
APROVAO
FREQUNCIA
Mais que 75%
De 50 a 75%
Aprovado ou 1 matria
abaixo
Aprovado c/ Pendncia ou
2 a 3 matrias abaixo
Reprovado ou mais de 3
matrias abaixo
Aprovado ou 1 matria
abaixo
Aprovado c/ Pendncia ou
2 a 3 matrias abaixo
matrias abaixo
matrias abaixo
SENSO CRTICO
Nenhum
muito pouco
algum
bastante
Alto
Muito alto
Muito alto
Alto
Alto
Muito alto
regular
Alto
Alto
regular
Alto
Alto
regular
regular
Alto
Muito baixo
baixo
baixo
Menos
de
Muito baixo
Muito baixo
50%
Planilha com os dados dos registros de aprovao e freqncia escolar
Questionrio respondido pelas assistentes sociais
Semestral
Muito baixo
Desempenho escolar ao longo do ano letivo

50%
40%
Muito baixo
30%
Baixo
20%
Regular
10%
Alto
0%
Muito alto
bim 01
bim 02
bim 03
bim 04
EXEMPLO - PROGRAMA DE INCLUSO SOCIAL -- FAMLIAS

Indicador
Variveis
bsicas
Cdigo
Varivel
Universo
Fonte
Instrumento
coleta
Arquivo
exportado da
Base de Dados
Arquivo
exportado da
Base de Dados
Quem
Nmero de chefes de famlia
nmero
Universo
cadastro
Sistema
Vfm 98
Nmero total de pessoas de

agncia de famlia capacitadas
nmero
Universo
cadastro
Ag Capac
Vfm 1
Determinao manter
esforos na realizao e/ou
concluso de atividades
Sim ou No
Amostra
Pessoas
referncia
Assist +
Lderes
Questionrio
respondido
Lderes
AsSoc
Sim ou No
Amostra
Pessoas
referncia
Assist +
Lderes
Questionrio
respondido
Lderes
AsSoc
Sim ou No
Amostra
Pessoas
referncia
Assist +
Lderes
Questionrio
respondido
Lderes
AsSoc
Sim ou No
Amostra
Pessoas
referncia
Assist +
Lderes
Questionrio
respondido
Lderes
AsSoc
Amostra
Famlias
Pessoas de
referncia
Questionrio
aplicado
AsSoc
Amostra
Famlias
Pessoas de
referncia
Questionrio
aplicado
AsSoc
Amostra
Famlias
Pessoas de
referncia
Questionrio
aplicado
AsSoc
Mudana de
auto-estima
Vfm 3
Medida da
varivel
Vfm 99
Vfm 2
Vfm 4
Qualidade do
ambiente de
relacionamento
familiar
Varive l
Auto-valorizao (cuidados
pessoais) hbitos de cuidado
com higiene e apresentao
pessoal
Auto-confiana confiana na
sua capacidade de realizar
coisas que superem
obstculos/problemas
Capacidade de
expresso/comunicao
tomar iniciativa para falar e
expor opinies
Vfm 5
Utilizao de dilogo em
situaes de conflito familiar
Vfm 6
Uso de violncia fsica na famlia
Vfm 7
Passar a dividir os problemas e

os encaminhamentos das
solues familiares
Nunca (0),
s vezes
(1), sempre
(2)
Nunca (0),
s vezes
(1), sempre
(2)
Nunca (0),
s vezes
(1), sempre
(2)
Frequencia
Momentos
ADM
semestral
ADM
semestral
Entrada,
sada, 3,
6, 9, 12 e
ps 6m
Entrada,
sada, 3,
6, 9, 12 e
ps 6m
Entrada,
sada, 3,
6, 9, 12 e
ps 6m
Entrada,
sada, 3,
6, 9, 12 e
ps 6m
Entrada,
sada, 3,
6, 9, 12 e
ps 6m
Entrada,
sada, 3,
6, 9, 12 e
ps 6m
Entrada,
sada, 3,
6, 9, 12 e
ps 6m
52
7. Sistematizao de variveis, fontes e instrumentos de coleta
Nvel de
participao
comunitria dos
indivduos
Cdigo
Varivel
Universo
Fonte
Fazer parte de algum grupo na

comunidade
Sim ou No
Amostra
Pessoas
referncia
Pessoas
referncia
Vfm 9
Assumir alguma funo na

comunidade ligada ao programa
Sim ou No
Amostra
Pessoas
referncia
Pessoas
referncia
Sim ou No
Amostra
Pessoas
referncia
Pessoas
referncia
Sim ou No
Amostra
Pessoas
referncia
Pessoas
referncia
Sim ou No
Amostra
Pessoas
referncia
Pessoas
referncia
Sim ou No
Amostra
Pessoas
referncia
Pessoas
referncia
Sim ou No
Amostra
Pessoas
referncia
Pessoas
referncia
Vfm 10
Vfm 12
Vfm 13
Vfm 14
Vfm 15
Ganho de renda
em funo de
capcitao
Medida da
varivel
Vfm 8
Vfm 11
Taxa de
insero no
mercado de
trabalho
Varive l
Participao/ envolvimento em
aes voltadas para a melhoria
de bens e servios na
comunidade
Posicionamento/ao de
apoio/defesa em relao a
indivduos e/ou famlias em
dificuldades
Existncia de membro da famlia
com vinculo formal (trabalho com
carteira assinada contrato) h
mais de 4 meses
que mantenha vnculo com
associao ou cooperativa h
mais de 4 meses
que exera algum trabalho
informal que gere renda h por
mais de 4 meses seguidos
Existncia de renda adicional
aps capacitao
Vfm 16
rea em que obtm renda
Vfm 17
rea em que foi capacitada
Sim ou no
descrio
descrio
Amostra
Pessoas de
Ag Familia
capacitadas
Amostra
Pessoas de
Ag Familia
capacitadas
Amostra
Pessoas de
Ag Familia
capacitadas
Instrumento
coleta
Quem
Frequencia
Momentos
Entrada,
sada, 3,
6, 9, 12 e
ps 6m
Entrada,
sada, 3,
6, 9, 12 e
ps 6m
Entrada,
sada, 3,
6, 9, 12 e
ps 6m
Entrada,
sada, 3,
6, 9, 12 e
ps 6m
Entrada,
sada, 3,
6, 9, 12 e
ps 6m
Entrada,
sada, 3,
6, 9, 12 e
ps 6m
Entrada,
sada, 3,
6, 9, 12 e
ps 6m
Questionrio
aplicado
AsSoc
Questionrio
aplicado
AsSoc
Questionrio
aplicado
AsSoc
Questionrio
aplicado
AsSoc
Questionrio
aplicado
AsSoc
Questionrio
aplicado
AsSoc
Questionrio
aplicado
AsSoc
Pessoas
capacitadas
Questionrio
aplicado
AsSoc
ps 6m
Pessoas
capacitadas
Questionrio
aplicado
AsSoc
ps 6m
Pessoas
capacitadas
Questionrio
aplicado
AsSoc
ps 6m
53
Indicador
54
8. Caractersticas de um bom sistema de

indicadores
coerente com a viso e com a concepo que as organizaes

envolvidas tm sobre os objetivos centrais e as dimenses que um
projeto deve considerar e resulta da negociao transparente e no
impositiva dos diferentes interesses e expectativas;
Considera as particularidades do contexto;
Define indicadores que captam os efeitos atribuveis s aes, servios e

produtos gerados pelo prprio projeto;
Tem indicadores bem definidos, sem ter pretenso de dar conta da

totalidade;
Est orientado para o aprendizado, estimulando novas reflexes;
Prev e especifica os meios de verificao que sero utilizados, bem como

os responsveis pela coleta de informao, pela anlise e tomada de
decises;
simples, capaz de ser compreendido por todos, e no apenas por

especialistas, sem ser simplista;
vivel do ponto de vista operacional e financeiro;
Fornece informaes relevantes e em quantidade que permite a anlise e

a tomada de deciso;
Aproveita as fontes confiveis de informao existentes, poupando

recursos, tempo e energia do projeto;
progressivamente internalizado na organizao e apropriado por todos,

no cotidiano das aes que desenvolvem;
compartilhado com os grupos e setores da populao junto aos quais a

organizao int ervm, promovendo a sua participao e a construo de
parmetros e indicadores prprios para monitorar e avaliar situaes de
seu interesse;
Utiliza recursos visuais para expressar situaes, processos e suas

variaes.
55
Bibliografia
ABONG. A s ONGs e o desenvolvimento institucional - o programa de co-financiamento dos Pases
Baixos no Brasil . So Paulo ; Cadernos Abong ; Nmero 24 ; 1998
ABONG. O impacto social do trabalho das ONGs no Brasil. So Paulo. Abong, 1998.
ARMANI, Domingos. Concepes e prticas de desenvolvimento institucional na rede PAD - Relatrio da
ARMANI, Domingos. PMA: conceitos origens e desafios: O Planejamento e a Avaliao de Programas
Sociais nas ONGs. Porto :alegre, mimeo, 1998.
CADERNOS DO OBSERVATRIO. Rio, Ibase/Observatrio da Cidadania no Brasil,. ns 0, 1 e 2.
CCFD. Encontro das entidades parceiras, regies Sul e Sudeste, Brasil: sistematizao e elaborao de
indicadores sociais. Rio de Janeiro. CCFD., 1999, mimeo.
CESE. Caminhos: Planejamento, monitoramento, Avaliao - PMA - Encontro de Agentes de Projetos.
Salvador. 1999.
CHIANCA, Thomaz; MARINO, Eduardo; SCHIESARI, Laura. Desenvolvendo a cultura de avaliao em
organizaes da sociedade civil. So Paulo. Global Editora - Instituo Fonte, 2001. (coleo Gesto e
Sustentabilidade)
CIDA - Canadian International Development Agency. Results-based management in CIDA: an
introductory guide to the concepts and principles. Canad. CIDA, 1999, mimeo.
COMISSO EUROPIA. Manual Gesto do Ciclo do Projeto: abordagem integrada e quadro lgico.
Bruxelas. 1993. (Srie Mtodos e Instrumentos para a gesto do ciclo do projeto)
DTTING, Martin et alii. A avaliao no contexto da cooperao das igrejas para o desenvolvimento:
manual de trabalho para organizaes de promoo do desenvolvimento. Stuttgart, AGKED /
FRUM SO PAULO SCULO XXI. ndice Paulista de responsabilidade social So Paulo. Assemblia
Legislativa de SP, 2001.
FOWLER, Alan. Measuring non-tangible outcomes. April 2002. Apresentao em Power Point.
FUNDAO JOO PINHEIRO / IPEA. Definio e metodologia de clculo dos indicadores e ndices de
desenvolvimento humano e condies de vida.1998.
GERMANN, Doris; GOHL, Eberhard. Monitorizao Participativa do Impacto - PIM (Participatory Impact
Management). GATE / Brot Fur die Welt. Stuttgart. 1997. Cadernos 1, 2 e 3.
HART, Maureen. Sustainable Community Indicators Trainers Workshop. US EPA Massachusetts. Office
of Sustainable Ecosystems Communities.OSEC, 1998.
IAF, Sal da Terra. Manual de referncia do sistema de registro de resultados de projetos. Sal da Terra,
1995, mimeo.
IBASE. O Ibase e o Balano Social. http://www.balancosocial.org.br/
IBGE / UNICEF. Indicadores sobre crianas e adolescentes. Braslia / Rio de Janeiro, 1997.
INSTITUTO DE GOVERNO E CIDADANIA DO ABC. Mapa da Excluso/Incluso social da cidade de
Santo Andr. Santo Andr, 2000. Segundo e terceiro produtos.
JANNUZZI, Paulo de Martino; MELLO, Leonardo; TIBAU, Mrcia; ARRUDA, Marcela.
Indicadores
Sociais e Polticas Pblicas: Humanizando os nmeros para a ao. Apresentao em Power Point
KISIL, Rosana. Elaborao de projetos e propostas para organizaes da sociedade civil. So Paulo.
Global Editora - Instituo Fonte, 2001. (coleo Gesto e Sustentabilidade)
La Gestion por Resultados GPR. Developpement et Paix. Montreal: s/d, mimeo.
LANDIM, Leilah (org). Aes em sociedade: militncia, caridade, assistncia, etc. Rio de Janeiro: NAU,
1998.
MARINO, Eduardo. Manual de Avaliao de Projetos Sociais: uma ferramenta para a aprendizagem e
desenvolvimento de sua organizao. So Paulo. Instituto Ayrton Senna.
MENDONA Eduardo Luiz e OLIVEIRA, Jane Souto. Pobreza e Desigualdade: repensando alguns
pressupostos. Apresentao em Power Point.
56
MILLER, Valerie. La incidencia poltica de los ONGs y de los organismos populares: ?como se mide el
xito?. IDR (Institute for Development Research), s/d, mimeo.
OLIVEIRA, Francisco. Entre a terra e o cu: mensurando a utopia?. Rio de Janeiro, 1999, mimeo
PAIXO, Marcelo. Os indicadores de Desenvolvimento Humano (IDH) como instrumento de
mensurao das desigualdades tnicas: o caso Brasil. Rio de Janeiro. FASE, 1999, mimeo.
PASSOS, Carlos A. K. (org). Indicadores, ongs e cidadania: contribuies sociopoliticas e metodolgicas.
Curitiba: Plataforma contrapartes Novib. GT Indicadores, 2003.
PAULICS, Veronika (org.). 125 Dicas - idias para a ao municipal. So Paulo, Plis, 2000.
PIRES, Mauro Oliveira; SANTOS, Irene Maria dos (orgs.). Construindo o Cerrado sustentvel:
experincias e contribuies das ongs. Goinia. Rede Cerrado de Organizaes No Governamentais,
2000.
PNUD. Relatrio do Desenvolvimento Humano 2000. Lisboa. Trinova Editora, 2000.
Roche, Cris. Avaliao de impacto dos trabalhos de ongs: aprendendo a valorizar as mudanas.So
Paulo: Cortez: ABONG: Oxford, Inglaterra: Oxfam, 2000.
SEADE. ndice Paulista de responsabilidade social. So Paulo, SEADE/Assemblia Legislativa de SP,
2001.
SILVA, Antonio Luiz de Paula. Utilizando o planejamento como ferramenta de aprendizagem. So Paulo.
Global Editora - Instituo Fonte, 2001. (coleo Gesto e Sustentabilidade)
SILVEIRA, Caio Mrcio; BOCAYUVA, Cunca. Desenvolvimento Local Integrado e Sustentvel : Enfoque
Estratgico e Construo de Indicadores. PNUD-DLIS. http://dlis.undp.org.br/.
SOUTO, Anna Luiza Salles et alii. Como reconhecer um bom governo?; O papel das administraes
municipais na melhoria da qualidade de vida. So Paulo, Plis, 1995. (Publicaes Plis, 21)
SOUTO, Anna Luiza Salles; KAYANO, Jorge. So Paulo: a cidade e seu governo - O olhar do cidado.
So Paulo, Plis, 1996. (Publicaes Plis, 26)
SPOSATI, Aldaza (coord.). Mapa da Excluso/Incluso Social da Cidade de So Paulo/2000: dinmica
social dos anos 90. So Paulo. NEPSAS - PUC/SP / INPE / PLIS, 2000.
TORRES, Ciro. Responsabilidade social e transparncia. http://www.balancosocial.org.br/
VALARELLI, Leandro. Indicadores de resultados de projetos sociais. Rio de Janeiro. RITS, 1998.
Mimeo
VALARELLI, Leandro. Aprendizagem organizacional. Rio, mimeo, 2000.
VALARELLI, Leandro. Um Panorama sobre o Estado da Arte do debate sobre Indicadores. Rio de
Janeiro: Plataforma das Contrapartes de Novib: GT Indicadores, 2001.
WALLACE, Tina with Tony Burdon. Strategic Planning Review. Oxford. OXFAM, 1994. Oxfam Research
Paper 10.
WWF. Monitoramento e Avaliao de Projetos de Conservao e Desenvolvimento Sustentvel:
sistematizao de uma experincia - Programa Piloto de Monitoramento e Avaliao. So Paulo. WWF,
2000. Consultores Eduardo Ehlers e Lcia Peixoto Calil.
Stios Internet
PNUD -- www.pnud.org.br
Instituto de Desenvolvimento Humano Sustentvel (IDHS)
http://virtual1.pucminas.br/idhs/site/index.htm
IPEA www.ipea.gov.br
Fundao Joo Pinheiro www.fjp.org.br
IBGE - http://www.ibge.gov.br/
Fundao Seade - http://www.seade.gov.br/
INSTITUTO ETHOS - www.ethos.org.br
IBASE ww.ibase.br

Indicadores de Qualidade

Enviado por

Dados do documento

Direitos autorais

Formatos disponíveis

Compartilhar este documento

Compartilhar ou incorporar documento

Opções de compartilhamento

Você considera este documento útil?

Este conteúdo é inapropriado?

Direitos autorais:

Formatos disponíveis

Indicadores de Qualidade

Enviado por

Direitos autorais:

Formatos disponíveis

Brasil em 109

Leandro Lamas Valarelli

1.1. Um mundo em mutao

1.2. As prticas sociais relacionadas ao uso de indicadores

1.3. Algumas consideraes sobre a construo e o uso de indicadores

2. OS SISTEMAS DE PMA E OS INDICADORES

2.1. A lgica da cadeia de impacto

2.2. Implicaes da abordagem lgica para o desenho do M&A

2.3. Lidando com a complexidade da ao e das relaes sociais

2.4. Uma abordagem alternativa

2.5. Sistemas de M&A Aspectos Centrais

3.1. Indicadores definies

3.2. Escolha e identificao dos indicadores

4. CONSTRUO E OPERACIONALIZAO DOS INDICADORES

5. CONSTRUO DOS INSTRUMENTOS DE COLETA E SISTEMATIZAO

7. SISTEMATIZAO DE VARIVEIS, FONTES E INSTRUMENTOS DE COLETA

8. CARACTERSTICAS DE UM BOM SISTEMA DE INDICADORES

Copyleft 2004 Leandro Lamas Valarelli

Rua Cndido Mendes, 335/302 Rio de Janeiro - RJ - 20241-220

Construo e Uso de Indicadores de Resultados e Impactos

1. Por que indicadores? 1

Construo e Uso de Indicadores de Resultados e Impactos

Construo e Uso de Indicadores de Resultados e Impactos

1.2. As prticas sociais relacionadas ao uso de indicadores

Palavras de Amartya Sen, prmio Nobel de economia de 1998 (PNUD, 1998)

Construo e Uso de Indicadores de Resultados e Impactos

Construo e Uso de Indicadores de Resultados e Impactos

Os indicadores como ferramentas de gesto (sistemas de PMA)

Leandro Lamas Valarelli

Construo e Uso de Indicadores de Resultados e Impactos

Os processos de avaliao de prticas e projetos sociais

Construo e Uso de Indicadores de Resultados e Impactos

PREMISSAS DO MARCO LGICO

Construo e Uso de Indicadores de Resultados e Impactos

Ele permite s pessoas responsveis pela preparao de um projeto estruturar e formular de

as relaes causais entre atividades, resultados e objetivos (lgica vertical).

a relao e influencia de fatores externos (hipteses) sobre as atividades, resultados e objetivos

detalhamento dos objetivos e resultados, atravs da descrio de indicadores e os seus meios de

Leandro Lamas Valarelli

Leandro Lamas Valarelli

Construo e Uso de Indicadores de Resultados e Impactos

gua do rio est

Construo e Uso de Indicadores de Resultados e Impactos

Leandro Lamas Valarelli

Construo e Uso de Indicadores de Resultados e Impactos

Leandro Lamas Valarelli

Melhoria das condies de sade e vida das crianas da comunidade X

LGICA DO PROJETO - EXEMPLO 2 ESTRATGIA EDUCAO AMBIENTAL

Melhoria das condies de sade e vida das crianas da comunidade X

Leandro Lamas Valarelli

LGICA DO PROJETO - EXEMPLO 1 ESTRATGIA GLOBAL

Construo e Uso de Indicadores de Resultados e Impactos

Leandro Lamas Valarelli

Matriz do Marco Lgico

Construo e Uso de Indicadores de Resultados e Impactos

Indicadores Objetivamente Verificveis

especficos em termos de quantidade (quanto?) e qualidade (qual?);

claros quanto ao grupo alvo e ao local a que se referem;

pertinentes (abranger o essencial do que contm o objetivo ou resultado - o qu);

Verificveis, baseados em dados acessveis;

Adequao de sua forma

Confiabilidade das informaes

Custos para obteno da informao

Construo e Uso de Indicadores de Resultados e Impactos