A POLTICA DA AVALIAO
DE POLTICAS PBLICAS*
Carlos Aurlio Pimenta de Faria
Em um plano normativo, a dcada de 1990
testemunhou, nas democracias ocidentais de uma
maneira geral, e na Amrica Latina particularmen-
te, a busca de fortalecimento da funo avalia-
* O autor agradece Fundao Vitae, Programa de Coo-
perao Cientfico-Acadmica Argentina, Brasil e Chile,
pelo financiamento da pesquisa que deu origem a este
trabalho. Partes deste trabalho foram apresentadas no
Seminrio Temtico Processo decisrio e implementa-
o de polticas pblicas no Brasil, durante o 28 En- viso mais cannica do processo de avaliao de
contro Anual da Anpocs, Caxambu, outubro de 2004, e
no Seminrio Nacional Avaliao de Polticas Pblicas manuais e apreciaes mais introdutrias, os quais
em Sade e Direitos Sexuais e Reprodutivos, So Pau-
lo, Cebrap/Nepo-Unicamp/ISC-UFBa, maio de 2005. O
autor gostaria de agradecer os comentrios e sugestes
feitos pelos pareceristas annimos da RBCS e pelos se-
guintes colegas participantes do referido encontro da
Anpocs: Eduardo Csar Marques, Marta Arretche, Sora-
ya Crtes, Telma Menicucci e Washington Bonfim.
Artigo recebido em janeiro/2005
Aprovado em julho/2005
o na gesto governamental. Com efeito, foram
implementados, em diversos pases da Amrica
Latina, sistemas de avaliao das polticas pbli-
cas de escopo varivel. Tal processo tem sido jus-
tificado pela necessidade de modernizao da
gesto pblica, em um contexto de busca de di-
namizao e legitimao da reforma do Estado.
Os argumentos que justificam a necessidade
de institucionalizao da avaliao da atividade go-
vernamental na Amrica Latina tambm fazem eco
polticas pblicas, aquela muitas vezes adotada em
apresentam a avaliao como ltima etapa do
chamado ciclo das polticas, definindo-a como:
(a) atividade destinada a aquilatar os resultados de
um curso de ao cujo ciclo de vida se encerra; (b)
a fornecer elementos para o desenho de novas in-
tervenes ou para o aprimoramento de polticas e
programas em curso; e (c) como parte da presta-
o de contas e da responsabilizao dos agentes
RBCS Vol. 20 n. 59 outubro/2005
98 REVISTA BRASILEIRA DE CINCIAS SOCIAIS - VOL. 20 N. 59
estatais, ou seja, como elemento central da ac-
countability. Mesmo que essa concepo reconhe-
a, ainda que implicitamente, o carter inextrica-
velmente poltico da avaliao, podemos observar
nos debates e nos estudos correlatos mais recentes
a prevalncia de um vis francamente normativo
e/ou uma priorizao dos aspectos mais tcnicos
da avaliao das polticas pblicas, bem como uma
nfase em seu papel de instrumento gerencial.
Reconhecendo o carter incipiente da pesqui-
sa e da prtica da avaliao no Brasil, o presente
trabalho tem como objetivos: (1) analisar os fatores
que tm justificado e condicionado a implantao
dos sistemas de avaliao, sobretudo nos pases da
Amrica Latina; (2) averiguar as razes da preva-
lncia, no mbito estatal e tambm no plano ana-
ltico, de uma concepo tecnicista da avaliao, res de polticas e aos gerentes de mais alto escalo.
vista hoje quase exclusivamente como instrumento
da gesto governamental; e, finalmente, (3) enfati-
zar o carter eminentemente poltico da avaliao
de polticas pblicas, elencando e categorizando as
suas distintas formas de utilizao. Ser ressaltada,
assim, a virtual subordinao do uso gerencial da
avaliao e de sua suposta capacidade de encer-
rar, reiniciar ou revitalizar o ciclo das polticas s
injunes polticas mais abrangentes e s estrat- preenso acerca desses processos e de seu impac-
gias e interesses dos tomadores de deciso e dos
demais envolvidos (aqueles que a literatura espe-
cializada denomina, desvelando suas matrizes in-
telectuais, stakeholders).
A institucionalizao da funo metodolgico experimental randomizado e con-
avaliao na Amrica Latina: pre-
missas, expectativas e motivaes
Diga-se, logo de incio, o essencial: nas dca-
das de 1980 e 1990 a avaliao de polticas pbli-
cas foi posta a servio da reforma do Estado.1 Se
parece haver consenso quanto a essa questo, h,
contudo, uma diversidade de maneiras de se pen-
sar a evoluo do papel atribudo pesquisa ava-
liativa desde o incio do boom da avaliao de po-
lticas e programas pblicos, ocorrido nos Estados
Unidos na dcada de 1960. Guba e Lincoln (1989),
por exemplo, tendo como foco os Estados Unidos
e fazendo uma caracterizao desde os anos de
1930, detectaram a emergncia de quatro sucessi-
vas geraes de pesquisas avaliativas, quais se-
jam: (1) um incio com um vis mais tcnico, no
perodo do New Deal; (2) uma gerao mais
descritiva, predominante desde a Segunda Guer-
ra Mundial at meados da dcada de 1960; (3) uma
que enfatizava a oferta de julgamentos abaliza-
dos, prevalecente entre meados dos anos de 1960
e meados da dcada seguinte, ou seja, quando da
avaliao dos polmicos programas da Guerra
Pobreza (War on Poverty) e da Grande Socieda-
de (Great Society); e, finalmente, (4) uma gera-
o reativa, caracterstica dos anos Reagan.
Albaek (1998), por seu turno, afirma que,
quando do incio da massificao da avaliao nos
Estados Unidos, na dcada de 1960, a pesquisa ava-
liativa era encarada predominantemente como fer-
ramenta de planejamento destinada aos formulado-
Em um contexto de expanso sem precedentes do
gasto pblico no pas, de escasso conhecimento
acerca do impacto da ao governamental e da bus-
ca de um maior controle sobre os burocratas/imple-
mentadores, a avaliao institucionalizada, tendo
como caracterstica predominante o seu desenho
top-down. A expectativa era, ainda, a de que a ava-
liao, ao superar o problema de dficit de com-
to, pudesse garantir a racionalidade dos processos
decisrios e a legitimao das polticas e dos pro-
gramas. Essa era de ouro da avaliao, assim de-
nominada por Rossi e Wright (1984), que, de acor-
do com Oakley (1998), teria durado at o final da
dcada de 1980, foi dominada por um paradigma
trolado (randomised, controlled experimental pa-
radigm, Oakley, 1998, p. 95) tendo sido dinami-
zada por uma Ordem Executiva do presidente
norte-americano, que determinava que os progra-
mas sociais fossem avaliados.
Segundo Albaek (1998), na dcada de 1970
avolumaram-se as evidncias acerca do excesso
de otimismo no que dizia respeito plena utiliza-
o e incorporao, de forma racional/instrumen-
tal, dos resultados das avaliaes. O paradigma
top-down foi assim progressivamente revertido,
abrindo espao para o desenvolvimento de abor-
dagens e metodologias bottom-up. Nas dcadas
de 1980 e 1990, como se ver em detalhe adian-
te, a avaliao das polticas pblicas foi posta a
servio da reforma do setor pblico.
A POLTICA DA AVALIAO DE POLTICAS PBLICAS
Uma terceira forma de se pensar a maneira
como tm variado as motivaes do Estado para a
valorizao da avaliao de polticas sugerida por
Derlien (2001), em artigo particularmente interes-
sante e provocativo. Partindo da distino das trs
funes bsicas atribudas avaliao informa-
o, realocao e legitimao , o autor defende a
tese de que, dos anos de 1960 aos anos de 1990,
os objetivos buscados com a avaliao teriam pas-
sado da funo de informao para a de realoca-
o. Tal deslocamento teria sido acarretado por fa-
tores polticos e econmicos especficos, tendo
havido tambm uma mudana nos atores polticos
dominantes. Segundo Derlien, na dcada de 1990
passou a predominar em muitos pases a funo de
realocao, associada ao movimento do New Pu-
blic Management, tendo os avaliadores se conver-
tido em auditores que privilegiavam a medio dos
resultados. Vale a pena reproduzirmos aqui, em
uma longa citao, a apresentao que o autor faz
da funo de (re)alocao, a qual, segundo sua
tese, passa a pautar a nfase na avaliao durante
as duas ltimas dcadas:
A funo predominante da avaliao nos anos de
1980, durante a segunda etapa de institucionaliza-
es, estava claramente destinada a apoiar uma
alocao racional dos recursos. Nesse momento
os atores principais j no so mais os administra-
dores dos programas (como quando prevalecia a
funo de informao), mas os escritrios de au-
ditoria, os ministrios da Fazenda e as unidades
centrais, a quem compete a elaborao global do
oramento e sua estrutura interna. As questes b-
sicas que passaram a ser enfatizadas so:
Quais programas podem ser suprimidos ou re-
duzidos a partir dos resultados negativos da ava-
liao?
Quais so as conseqncias do retrocesso das
fronteiras do Estado, ou seja, da privatizao de
determinadas atividades pblicas?
Como se pode obter mais rendimento pelo di-
nheiro a partir da reorganizao dos programas
individuais e das atividades pblicas em seu
conjunto?
As questes induzidas dos motivos da alocao
tendem a dar mais nfase na quantidade do que
na qualidade (Derlien, 2001, p.106).
precisamente essa associao da funo
avaliao reforma gerencialista do Estado, com
nfase nos resultados e na desresponsabiliza-
o/devoluo/privatizao da proviso de bens e dos bens e servios pblicos estaria, supostamen-
99
servios sociais, que torna compreensveis mani-
festaes como estas de Vieira (1997):
[...] [no] Brasil, desde o tempo da elaborao da
Constituio de 1988, a febre avaliatria ganha di-
menso de epidemia e os avaliadores metamorfo-
seiam-se em festejados demiurgos [...] (p.70).
Esta nova fase de acumulao capitalista no se
importa com direitos. Seus filhos mais queridos,
os recentes avaliadores, nutrem-se do relativismo
to a gosto da meritocracia (p.71).
Diga-se, de passagem, que reaes como
essa, que beiram a fobia, obscurecem a necessria
percepo de que a avaliao no , por nature-
za, caracterstica de um tipo especfico de Estado
ou cultura administrativa (Thoenig, 2000, p. 57).
A seguir apresentaremos, de maneira sucin-
ta, as premissas, as expectativas e as motivaes
para a institucionalizao da funo avaliao
na Amrica Latina. Tal processo ocorreu tardia-
mente, apenas na dcada de 1990, tendo prevale-
cido a perspectiva de instrumentalizao da pes-
quisa avaliativa para o sucesso da reforma do
Estado. Tal discusso pavimentar o nosso cami-
nho para que possamos, na seo subseqente,
analisar a postura da academia brasileira diante da
hegemonia da perspectiva gerencialista sobre o
papel da avaliao de polticas pblicas.2
Como destacado por diversos autores, a me-
dio e a avaliao do desempenho governamen-
tal e das polticas pblicas tornaram-se parte inte-
gral da agenda de reformas dos anos de 1980 e
1990, as quais, como se sabe, estiveram longe de
se circunscrever aos pases latino-americanos.
Tanto por razes pragmticas como ideolgicas
e no nos parece pertinente arrolarmos aqui os fa-
tores de ordem econmica, poltica e ideolgica
que tm dado sustentao aos processos de refor-
ma do Estado em grande parte das democracias
ocidentais , o desenho dessas reformas privile-
giou dois propsitos bsicos. Em primeiro lugar, a
adoo de uma perspectiva de conteno dos gas-
tos pblicos, de busca de melhoria da eficincia e
da produtividade, de ampliao da flexibilidade
gerencial e da capacidade de resposta dos gover-
nos, bem como de maximizao da transparncia
da gesto pblica e de responsabilizao dos ges-
tores, em um processo no qual o consumidor
100 REVISTA BRASILEIRA DE CINCIAS SOCIAIS - VOL. 20 N. 59

te, em primeiro plano. O segundo propsito ou rentemente no ter despertado um interesse equi-
expectativa de que tais reformas pudessem con- valente por parte da comunidade acadmica dos
tribuir para uma reavaliao da pertinncia das or- analistas de polticas pblicas, notadamente nas
ganizaes governamentais preservarem todo o reas da cincia poltica e da sociologia, no senti-
seu leque tradicional de atribuies, prevalecendo do de se abrir novas frentes de investigao. O
um contexto de valorizao da proviso privada mesmo parece no se dar, contudo, na seara da
de bens e servios (Caiden e Caiden, 2001, p. 79). administrao pblica, como demonstrado, por
Como corretamente assinalado por Caiden e exemplo, pela freqncia com que peridicos na-
Caiden, a medio de desempenho, o monitora- cionais, como a Revista do Servio Pblico e a Re-
mento e a avaliao no foram apenas ornamentais vista de Administrao Pblica, tm encampado
nem tiveram uma significao incidental nas refor- a temtica.3 Note-se, ainda, que a questo tem ga-
mas. Foram (ou deveriam ter sido) as alavancas es- nhado destaque tambm em publicaes do
senciais da mudana (Idem, p. 80). Vale lembrar Ipea,4 da Fundao Seade (Carvalho, 2003) e da
que Wiesner Duran chama a avaliao de proxy Fundao Carlos Chagas, como os Cadernos de
do mercado na administrao pblica (apud Mo- Pesquisa e os Estudos em Avaliao Educacional.
kate, 2002, p. 90). A centralidade da avaliao jus- importante destacarmos aqui o vis acentuada-
tifica-se, assim, porque se esperava que essas fun- mente normativo da maior parte destes trabalhos,
es garantissem a credibilidade do processo de bem como o fato de a Revista do Servio Pblico
reforma e a sustentabilidade poltica das diretrizes republicar trabalhos de consultores internacionais
de desregulamentao e de reduo do tamanho muitas vezes produzidos a partir de demandas
do governo, quer pela via da chamada devolu- dos organismos multilaterais, o que evidencia o
o, ou seja, do deslocamento das funes e dos forte carter de induo externa a vincar o pro-
servios para as instncias subnacionais, quer pela cesso de institucionalizao dos sistemas de ava-
via da privatizao. Esperava-se, tambm, que pu- liao na Amrica Latina.
dessem ser fomentadas a transparncia na gesto Se for possvel justificar esse panorama a
pblica e a satisfao dos usurios/clientes. partir do fato de a avaliao de polticas pblicas
Parece por demais bvio, pois, o carter ser tarefa eminentemente multidisciplinar, como
eminentemente poltico do projeto de moderni- amplamente reconhecido, resta-nos buscar com-
zao do Estado vinculado revoluo geren- preender o que pode ser denominado como a
cialista que se deseja implantar, no qual o moni- omisso da cincia poltica brasileira.5 Um primei-
toramento e a avaliao de polticas ocupam lugar ro elemento para se pensar tal omisso a postu-
de destaque. Contudo, como se discutir adiante,
ra assumida por Michael Scriven, um dos primei-
a poltica da avaliao das polticas pblicas est
ros e principais tericos da avaliao, para quem
longe de se restringir a questes e disputas relati-
a investigao avaliativa deve produzir como
vas definio dos interesses prioritrios e do es-
concluso exatamente o tipo de afirmao que os
copo do Estado, posto que a avaliao pode tam-
cientistas sociais dizem ser ilegtima: um juzo de
bm, por exemplo, ser elemento central na
valor ou mrito (Scriven, 1974, apud Ballart,
disputa eleitoral, no controle das interaes inter-
1996, p. 325). Esse vis normativo talvez possa
governamentais e na busca de acomodao de
nos ajudar na compreenso do seguinte parado-
foras e de interesses no mbito intraburocrtico.
xo: se as investigaes conduzidas na subrea da
anlise de polticas pblicas so fortemente con-
dicionadas pela conjuntura, como apontado por
A hegemonia inconteste da perspec- Melo (1999), tal condicionamento parece no ter
tiva gerencialista: uma discusso sido suficiente para que a questo da avaliao
exploratria acerca do papel da aca- ganhasse lugar de destaque na agenda de pesqui-
demia brasileira sa dos profissionais da rea, aqui entendida como
subrea da cincia poltica.
Pode parecer contraditrio o fato de a nova Cabe recordarmos, ainda, que apesar do boom
nfase dada avaliao de polticas no Brasil apa- das duas ltimas dcadas, a estruturao do campo
A POLTICA DA AVALIAO DE POLTICAS PBLICAS
da anlise de polticas pblicas ainda bastante in-
cipiente no Brasil, o qual padece, como tambm
mostrado por Melo (1999), de grande fragmentao
organizacional e temtica, tendo uma institucionali-
zao ainda precria. Porm, se essas caractersticas
podem tornar compreensveis determinadas lacu-
nas, a notria ausncia de investimentos mais siste-
mticos no estudo dos processos de implementao
e avaliao parece evidenciar tambm o status pri-
vilegiado de que desfrutam os processos decisrios
na cincia poltica do pas. No entanto,
[...] a escassez dos estudos ps-deciso no pas
parece explicada no apenas pela frgil institucio-
nalizao da rea no Brasil, que faz com que a
anlise de polticas pblicas continue gravitando
na rbita das questes analticas mais tradicional-
mente valorizadas pela Cincia Poltica, mas tam-
bm pela debilidade no pas do campo de estu-
dos da Administrao Pblica (Faria, 2003, p. 22).
Se a administrao pblica, como rea de
trabalho acadmico, extremamente dbil no
pas, tendo, porm, ganhado certo vigor na dca-
da passada com a abertura de Escolas de Gover-
no em diversos estados da Federao, sua intera-
o com a cincia poltica e com a sociologia
talvez ainda seja por demais frgil.
Retratado e explicado, assim, este panorama
de omisso, cabe recordarmos, como discutido na
seo anterior, que a atual gerencializao da
avaliao de polticas pblicas , antes de tudo, de-
rivada de sua instrumentalizao no processo/pro-
jeto de reforma do Estado. Contudo, a concepo
hoje prevalecente da avaliao como instrumento
administrativo e, portanto, como funo suposta-
mente alheia s disputas propriamente polticas tal-
vez fique ainda mais evidenciada em funo da
postura da cincia poltica brasileira, que acaba, as-
sim, por endossar esse vis distorcido do princpio
republicano da desvinculao entre poltica e ad-
ministrao pblica.
Reconhecida, portanto, a hegemonia quase
inconteste da perspectiva gerencialista e recor-
de-se que essa a tnica dada implantao dos
sistemas de avaliao pelos organismos multilate-
rais, que tm investido sistematicamente nesse
processo ao disponibilizar assistncia tcnica e fi-
nanciamento, ao articular redes de profissionais,
101
ao sensibilizar lideranas polticas e acadmicas e
ao atrelar o financiamento de projetos exigncia
de avaliao , parece-nos oportuno inventariar-
mos as distintas formas de uso esperado e poten-
cial da avaliao de polticas pblicas, para que
possamos ampliar a nossa percepo do vis po-
ltico da pesquisa avaliativa. Antes, contudo, cabe
alertarmos para o fato de que, evidentemente,
no se espera aqui que a cincia poltica seja ca-
paz, por si s, de (re)politizar a avaliao de po-
lticas pblicas. Cabe a ela, isto sim, a anlise do
impacto e das implicaes de tal hegemonia.
Os usos e a poltica da avaliao de
polticas pblicas
Parte significativa dos estudos sobre os pro-
cessos de avaliao de polticas pblicas realizados
desde a dcada de 1960, os quais, via de regra, ti-
veram (e ainda tm) o seu epicentro na academia
norte-americana, refere-se s questes de ordem
metodolgica e/ou s distintas maneiras de se clas-
sificar a avaliao. A avaliao tem sido, usualmen-
te, classificada em funo do seu timing (antes, du-
rante ou depois da implementao da poltica ou
programa), da posio do avaliador em relao ao
objeto avaliado (interna, externa ou semi-indepen-
dente) e da natureza do objeto avaliado (contexto,
insumos, processos e resultados) (Cotta, 2001, p.
91). Como discutido na primeira seo deste en-
saio, os estudos avaliativos tinham originalmente
um acentuado vis top-down, sendo via de regra
encarados como ferramenta de planejamento desti-
nada aos formuladores de polticas e aos gerentes
de mais alto escalo. Nesses primrdios, partia-se
da premissa que os resultados da avaliao seriam
automtica e necessariamente encampados pelos
tomadores de decises para a melhoria da poltica
ou do programa em questo. A discusso acerca do
uso da avaliao restringia-se, assim, ao que hoje se
denomina uso instrumental.
Logo se percebeu, uma vez que se avoluma-
vam as evidncias de que o esperado efeito de
feedback da avaliao era freqentemente obstru-
do, a flagrante ingenuidade das expectativas de se
produzir melhores e mais sbias decises com
base apenas na realizao da avaliao. a partir
desse momento que se passa a investigar os deter-
102 REVISTA BRASILEIRA DE CINCIAS SOCIAIS - VOL. 20 N. 59
minantes do uso da avaliao, sendo constituda,
assim, uma nova e vicejante seara de pesquisa.6
A nfase nos fatores que condicionam a uti-
lizao da avaliao e a mitigao do furor posi- jam intencional e meticulosamente criadas, sob
tivista da poca do primeiro boom dos estudos
avaliativos (j que se pode dizer que vivemos hoje
o seu segundo boom) abriu espao para um maior
questionamento, ainda hoje incipiente, diga-se,
acerca do que chamo poltica da avaliao de po-
lticas pblicas
Vale lembrar que tal denominao pensada
neste ensaio como abarcando as questes e as dis-
putas relativas definio dos interesses priorit-
rios e do escopo do Estado, competio eleitoral,
ao controle das interaes intergovernamentais e
busca de acomodao de foras e de interesses no
mbito intraburocrtico, entre muitas outras ques-
tes relacionadas s disputas de poder entre agen-
tes e principais os mais diversos. Essa concepo
mais abrangente engloba, assim, as trs dimenses
do uso da avaliao normalmente evocadas: instru-
mental (relativa ao apoio s decises e busca de
resoluo de problemas); conceitual (ou funo
educativa); e simblica (uso poltico) (Shulha e necessidade de mudana revelada pelos avalia-
Cousins, 1997).
A percepo da vasta diversidade e da inten-
sidade dos fatores que obstaculizam uma plena
ou mesmo freqente utilizao da avaliao para
o seu propsito original (melhorar a qualidade
das decises e garantir a maximizao da conse-
cuo dos objetivos definidos pelas polticas e
programas) produziu reaes muito diferencia-
das. Aaron Wildawsky, por exemplo, desalentado
diante de tantos obstculos, questiona, em um
quase desabafo, o valor de toda a empreitada: eu
comecei pensando que era ruim no avaliar as or-
ganizaes e terminei me perguntando por que
elas tm que faz-lo (apud Caiden e Caiden,
2001, p. 94). Thoenig, por seu turno, parece pro-
por, em algumas circunstncias, o uso de avalia-
es informais, as quais poderiam tornar possvel
a introduo de ajustes e mudanas sem atrair a
ateno de grupos interessados internos ou exter-
nos, que podem ser tentados a usar uma avalia-
o formal como uma oportunidade para resistir
reforma (2000, p. 66). Muitas das anlises mais
recentes, contudo, ao reconhecer que as condi-
es para o aproveitamento das informaes dis-
ponibilizadas pela avaliao quase nunca esto
dadas a priori, sugerem, a exemplo de Cotta, que
a avaliao uma atividade que, por suas pr-
prias caractersticas, exige que estas condies se-
pena de se comprometer todo o esforo despen-
dido (2001, p. 94).7
Mas quais seriam, mais especificamente, os
fatores que podem interferir na utilizao dos re-
sultados da avaliao? Entre tantos outros poss-
veis, podem ser destacados os seguintes: existncia
de crenas e interesses conflitantes na organizao
que gerencia o programa; ocorrncia de conflitos
de interesses entre as distintas unidades do progra-
ma; mudanas no pessoal encarregado, quando,
por exemplo, os novatos tm prioridades diferen-
tes daquelas vigentes na poca do incio da avalia-
o; eventual inflexibilidade das regras e dos pa-
dres operacionais da organizao encarregada,
que pode impedir a adoo das recomendaes
feitas quando da avaliao; e mudanas nas con-
dies externas, tais como cortes oramentrios e
alteraes no ambiente poltico, que podem tor-
nar impossvel para a organizao responder
dores (Weiss, 1998, p. 22).
Como o objetivo deste ensaio, mais do que a
anlise de qualquer caso especfico, ressaltar a es-
treiteza da concepo gerencialista da avaliao e
expandir a nossa percepo das mltiplas implica-
es polticas da pesquisa avaliativa, buscaremos a
seguir elencar e categorizar as distintas formas de
sua utilizao. Seguindo de perto a proposta de Ca-
rol Weiss (1998), sero discutidas no apenas as for-
mas de uso, mas tambm os elementos da avaliao
que podem ser utilizados e, por fim, o papel e os in-
teresses dos vrios usurios potenciais da avaliao.8
possvel distinguir pelo menos quatro ti-
pos de uso da avaliao, quais sejam: (a) instru-
mental; (b) conceitual; (c) como instrumento de
persuaso; e (d) para o esclarecimento. O uso
instrumental para a tomada de deciso depende
no apenas da qualidade da avaliao, mas tam-
bm da adequada divulgao de seus resultados,
de sua inteligibilidade e da factibilidade das reco-
mendaes eventualmente propostas. Segundo
Weiss (1998), o uso instrumental seria comum em
pelo menos quatro situaes: (1) quando as impli-
caes das descobertas da avaliao no so mui-
to controvertidas; (2) quando as mudanas deriva-
A POLTICA DA AVALIAO DE POLTICAS PBLICAS
das ou sugeridas no so de grande monta e/ou
fazem parte do repertrio do programa em ques-
to ou de sua organizao implementadora; (3)
quando o ambiente do programa relativamente
estvel no que diz respeito a suas lideranas, or-
amento, tipos de beneficirios etc.; e (4) quando
o programa est em crise e no se sabe bem o
que deve ser feito.
O segundo tipo de uso o conceitual,
usualmente circunscrito aos tcnicos locais do
programa, a quem no com freqncia atribu-
do um maior poder de deciso. Nesse caso, as
descobertas da avaliao (e o seu prprio proces-
so de realizao) podem alterar a maneira como
esses tcnicos compreendem a natureza, o modo
de operao e o impacto do programa que imple-
mentam. Tal aprendizagem torna-se maximizada
quando os tcnicos participam mais ativamente
do processo de avaliao.9 Como notado por Scri-
ven (1996), o uso conceitual das descobertas dife-
rencia-se do uso instrumental porque, no primei-
ro caso, nenhuma deciso ou ao esperada
(pelo menos no imediatamente).
O uso da avaliao como instrumento de per-
suaso, por seu turno, d-se quando ela utiliza-
da para mobilizar o apoio para a posio que os
tomadores de deciso j tm sobre as mudanas
necessrias na poltica ou programa. Busca-se aqui
legitimar uma posio e ganhar novos adeptos
para as mudanas desejadas. O ponto pode ser ilus-
trado pela forma como o ditador Augusto Pinochet
fez uso do sistema de avaliao educacional im-
plantado por ele no Chile (Simce), em 1988, para
dar maior visibilidade e legitimidade ao processo
de privatizao do ensino no pas, posto que os
primeiros resultados mostravam com clareza o de-
sempenho superior das instituies privadas (Faria
e Filgueiras, 2003).
Por fim, h o uso para o esclarecimento,
que nem sempre propositado, mas que acarreta,
pela via do acmulo de conhecimento oriundo de
diversas avaliaes, impacto sobre as redes de pro-
fissionais, sobre os formadores de opinio e sobre
as advocacy coalitions, bem como alteraes nas
crenas e na forma de ao das instituies, pau-
tando, assim, a agenda governamental. Esse um
tipo de influncia que ultrapassa a esfera mais res-
trita das polticas e dos programas avaliados.
Ainda que esta distino das formas de uso
da avaliao seja importante e inovadora, neces-
srio que se faa a seguinte ressalva:
103
Note-se que tal distino das formas de uso consti-
tui avano significativo em relao clebre con-
traposio entre avaliao somativa, que seria
judgement-oriented, e avaliao formativa, que
seria improvement-oriented. Contudo, ela parece
apenas resgatar, com modificaes tpicas, a pro-
posio feita por Floden e Weiner (1978) em um
trabalho pioneiro, hoje aparentemente relegado, o
qual, destacando tambm as debilidades e a ideali-
zao do modelo decisionista, chama a ateno
para o uso da avaliao nos seguintes sentidos: da
resoluo de conflitos; como mecanismo para a
reduo de complacncia (complacency reduc-
tion), dado o seu potencial de fazer com que o
pessoal encarregado do programa avalie critica-
mente as suas concepes e comportamentos; e
como ritual, cuja funo seria acalmar as ansie-
dades do pblico e perpetuar uma imagem do go-
verno como racional, eficiente e accountable (Fa-
ria e Filgueiras, 2003, p. 8).
No que diz respeito aos elementos da avalia-
o que podem ser utilizados, cabe destacar que as
suas descobertas (ou o relatrio final da avaliao)
inicialmente monopolizaram a ateno daqueles in-
teressados em investigar a questo da utilizao da
pesquisa avaliativa. Contudo, essas descobertas
constituem apenas um dos elementos que podem
ser utilizados. Como se sabe, elas usualmente se
concentram nos processos, nos resultados e no im-
pacto das polticas e dos programas.
Vale ressaltarmos, ainda que de maneira bre-
ve, que so exatamente as descobertas e/ou o re-
latrio final da avaliao as informaes mais am-
plamente divulgadas. A questo da abrangncia e
da forma de divulgao, que no objeto de
maiores consideraes neste trabalho, , contudo,
absolutamente central para que se possa melhor
aquilatar o uso dos estudos de avaliao. Discor-
rendo sobre a experincia de avaliao de polti-
cas na Frana, Meldolesi afirma que, naquele pas,
[...] o problema no a divulgao [dos relatrios],
que assegurada pela Documentation franaise,
mas a pouca divulgao que eles tm nos jornais
e, por conseqncia, na opinio pblica: nada
comparvel ao canal de televiso especializado,
que existe nos Estados Unidos, e influncia da
avaliao do GAO (General Accounting Office) so-
bre o debate pblico naquele pas (1996, p.104).
104 REVISTA BRASILEIRA DE CINCIAS SOCIAIS - VOL. 20 N. 59
Retornando necessidade de se distinguir os
elementos da avaliao que podem ser utilizados,
reportamo-nos uma vez mais a Weiss (1998), que
distingue a possibilidade de uso de outros quatro
elementos: (a) idias e generalizaes derivadas
da avaliao; (b) o prprio fato de a avaliao ter
sido ou estar sendo feita; (c) o foco do estudo, es-
pecialmente as medidas adotadas; e, finalmente,
(d) o desenho do estudo. A seguir discorreremos
brevemente sobre cada um desses elementos.
(a) Uso das idias e generalizaes derivadas da
avaliao
Ainda que descobertas especficas da avalia-
o no sejam usadas, os formuladores e o pessoal
tcnico do programa podem aplicar idias e gene-
ralizaes dela derivadas. o seguinte o exemplo
dado por Weiss (1998): a generalizao da desco-
berta de que agncias locais no promovem mu-
danas no seu padro de proviso de servios
quando elas so as nicas a fazer tais mudanas
pode levar a que se pense na necessidade de se
coordenar a atuao de todas as agncias.
(b) Uso possvel do prprio fato de a avaliao ter
sido ou estar sendo feita
So diversificadas as alternativas aqui. Pri-
meiramente, a realizao da avaliao pode ser
utilizada como uma desculpa para a inao. Por
que se deveria tomar qualquer atitude no sentido
de se operar mudanas antes que se tenha o re-
sultado do trabalho de avaliao? O fato de uma
avaliao estar sendo ou ter sido feita pode ser
utilizado tambm para demonstrar a racionalidade
e a predisposio ao aprimoramento e respon-
sabilizao por parte dos encarregados da polti-
ca ou do programa. Por outro lado, a prpria rea-
lizao da avaliao pode ser pensada como
assegurando uma aura de legitimidade para o
programa ou sugerir que algo no vai bem em
sua gesto ou que h problemas no seu desenho.
(c) Utilizao do foco do estudo
amplamente reconhecido que o pblico
(interno e o externo) do programa avaliado passa-
r a dar ateno prioritria a todos os focos da
avaliao, com destaque para os elementos esco-
lhidos para serem mensurados. Esse fenmeno
conhecido como ensinar para o teste, dado o
efeito quase universal que a avaliao externa tem
sobre o comportamento das instituies de ensi-
no. Como se sabe, o risco principal aqui que se-
jam negligenciados outros aspectos do programa
que no incidem sobre os indicadores de sucesso
definidos. Tal efeito, contudo, no necessria e
forosamente negativo.
(d) Utilizao do desenho da pesquisa avaliativa
Destaca-se aqui a possibilidade de que as
categorias de anlise utilizadas pelos avaliadores,
a metodologia de avaliao e a forma de se ana-
lisar os dados tenham influncia no apenas so-
bre a gesto da poltica ou do programa em ques-
to, ao fomentar, por exemplo, disputas entre
distintos nveis de implementao, mas tambm
sobre outras reas e esferas de governo.
Por fim, necessrio inventariarmos tambm
os usurios potenciais da pesquisa avaliativa. Ori-
ginalmente, a comunidade de avaliadores era qua-
se unnime na percepo de que os usurios da
avaliao se restringiam aos financiadores do pro-
grama (e da prpria avaliao), aos gerentes e en-
carregados de mais alto escalo e, por vezes, aos
tcnicos e profissionais que lidavam de maneira
mais direta com os beneficirios. Esses so os ato-
res que, inclusive, muitas vezes ajudam a definir o
escopo, a abrangncia, a metodologia e o mbito
de divulgao dos resultados da avaliao.
A crtica ao desenho hierrquico da avaliao
e a percepo das limitaes de seu planejamento
top-down levaram, primeiramente, a que se pres-
tasse mais ateno nos agentes encarregados da
implementao ou na chamada street level bureau-
cracy, percebidos a partir da dcada de 1970 como
capazes de muito mais autonomia do que aquela
concebida pelos modelos tradicionais de planeja-
mento (Pressman e Wildavsky, 1973; Lipsky, 1980).
Posteriormente, com a popularizao das me-
todologias participativas de avaliao e com o cres-
cente reconhecimento (e propaganda) da avaliao
como instrumento de empoderamento dos bene-
ficirios, a avaliao comeou a levar em conside-
rao, de maneira mais sistemtica, as necessida-
des e as expectativas dos beneficirios dos
programas. A reforma gerencialista do Estado, com
sua nfase nos resultados, em detrimento dos pro-
cessos, e na satisfao daqueles que passaram a ser
denominados clientes, viria a sacramentar a nfa-
A POLTICA DA AVALIAO DE POLTICAS PBLICAS
se nos beneficirios. Observada a questo de um
ponto de vista mais abrangente, contudo, no dei-
xam de parecer ingnuos comentrios como:
Os avaliadores freqentemente optavam por levar
em considerao os valores e os interesses dos
clientes [sic], valorizando as suas preocupaes.
Mais do que reforar o status quo, esses avaliado-
res esperavam produzir mudanas no sentido de
tornar os programas mais responsivos s necessi-
dades dos participantes. Eles queriam [...] desafiar
o discurso privilegiado dos poderosos. A sua pos-
tura significava um esforo em transformar a avalia-
o, de um mecanismo capaz de sustentar e refor-
ar as prticas correntes por meio de ajustes
tpicos, em um meio de se remediar as desigualda-
des e de se redistribuir o poder (Weiss, 1998, p.27).
certo que diversos outros usurios, para
alm daqueles envolvidos diretamente nos progra-
mas em questo, podem se valer das descobertas
ou de outros elementos da avaliao. Dentre tan-
tos, destacam-se: gerentes de programas similares
e/ou de diferentes nveis governamentais; agentes
do governo central e representantes de fundaes,
interessados em conhecer projetos exitosos que
meream financiamento ou preocupados em me-
lhorar os programas dos quais so responsveis;
membros do legislativo interessados na melhoria
de programas existentes ou na elaborao de no-
vas propostas; cientistas sociais e outros avaliado-
res que buscam aprender com as descobertas e
com as metodologias empregadas. ainda Weiss
(1998) que sugere a existncia de dois outros
usurios potenciais: (a) as prprias organizaes
que administram o programa avaliado ou similares
(e aqui deve ser feito no s o contraponto tra-
dicional nfase no indivduo como usurio, mas
tambm deve ser mencionada a importncia que
tem sido dada atualmente questo da learning
organization organizao que aprende e aos
limites, tradies e procedimentos cristalizados
e/ou impostos pelas organizaes); e (b) o pbli-
co em geral ou a sociedade civil.
A reviso crtica da literatura sobre a utilizao
da avaliao feita por Shulha e Cousins (1997)
aponta as principais preocupaes e questes que
tm sido enfatizadas mais recentemente pelos estu-
diosos da rea, quais sejam: a centralidade do con-
texto para a compreenso e a explicao do uso; a
105
necessidade de se expandir a idia de uso da esfe-
ra individual para a organizacional; a diversificao
do papel do avaliador, que muitas vezes incorpora
funes como a de facilitador, planejador e educa-
dor; e os impactos e condicionantes da no utiliza-
o ou da sub-utilizao. Tambm passou a ser
mais amplamente reconhecido o fato de que, para
serem efetivamente utilizadas, as descobertas da ava-
liao devem competir com outras propostas e ou-
tras fontes de informao pela ateno dos tomado-
res de deciso e demais envolvidos, tudo isso se
dando em contextos e instncias decisrias que tal-
vez possam ser mais bem caracterizados como plu-
ralistas e freqentemente no racionais. Ademais,
no deixa de ser importante recordarmos que o le-
gado de Herbert Simon continua a ser evocado no
que diz respeito, por exemplo, ao reconhecimento
dos incentivos para que o sistema governamental
adote um comportamento satisfazedor, em detri-
mento de uma postura estritamente racional, no
sentido da maximizao do impacto de sua atuao.
Breves consideraes finais
Vrias questes importantes podem ser infe-
ridas a partir deste breve mapeamento das distin-
tas formas de uso da avaliao, dos seus vrios
elementos que podem ser utilizados e dos usu-
rios potenciais dos estudos de avaliao das pol-
ticas pblicas. A primeira delas que a literatura
especfica parece ainda essencialmente circunscri-
ta s expectativas acerca do papel da avaliao
elencadas pelo modelo decisionista. Isso por-
que, mesmo tendo sido questionado o tradicional
modelo hierrquico e top-down de planejamento
e de desenho da avaliao, esta maior preocupa-
o com a questo do uso da pesquisa avaliativa
parece ainda fortemente restrita utilizao ge-
rencial da avaliao e necessidade de se gerar
feedbacks que justifiquem a relevncia da prpria
realizao de tais estudos. Dito de outra forma, o
que se pode verificar na literatura uma nfase
quase exclusiva na utilizao instrumental, intra-
burocrtica, da avaliao das polticas pblicas
ou, quando muito, nas interaes entre decisores,
gestores e populao beneficiria.
Ficam negligenciadas, assim, questes
como: o papel da avaliao das polticas no jogo
106 REVISTA BRASILEIRA DE CINCIAS SOCIAIS - VOL. 20 N. 59
eleitoral; a reao do legislativo e do judicirio
concentrao do poder de avaliao no executivo
(Henry, 2001; Derlien, 2001); a eventual diferena
na institucionalizao da avaliao entre pases
parlamentaristas e presidencialistas e entre Esta-
dos federais e unitrios (Derlien, 2001); o signifi-
cado da distinta localizao institucional dos siste-
mas de avaliao e o impacto de seu grau de
vinculao s autoridades financeiras etc.
Dessa forma, no deixa de ser irnico, mas
de maneira alguma contraditrio, o fato de ser
justamente a literatura que adota o enfoque ge-
rencialista de valorizao da avaliao como ins-
trumento da reforma do Estado aquela que est
aparentemente mais disposta a acentuar questes
polticas mais abrangentes, como, por exemplo, o
papel da avaliao na gerao de accountability
por parte dos agentes estatais, seu potencial de
empoderamento das comunidades menos privi-
legiadas e seu impacto sobre a questo do contro-
le social sobre o Estado. O fato no contradit-
rio porque, como visto, essa literatura advoga um
ideal regulativo que prescreve ao Estado um pa-
pel subsidirio, sendo determinantes os estmu-
los, os incentivos e os constrangimentos oriundos
ou espelhados no mercado.
Uma postura de omisso no tratamento ana-
ltico das questes associadas ao processo de ava-
liao das polticas pblicas e de seu uso, como
aquela detectada no caso da cincia poltica bra-
sileira (a qual, diga-se de passagem, parece no
se singularizar neste aspecto), significa o esvazia-
mento da possibilidade de se analisar de forma
cabal a poltica da avaliao de polticas, a qual
acaba, assim, negligenciada em muitos de seus as-
pectos e implicaes.
Se h resistncias, por parte da cincia pol-
tica brasileira, a includos os analistas de polticas
pblicas, em encampar uma agenda de pesquisa
que contemple os processos ps-deciso, como
sugerimos, no seria possvel e pertinente pensar-
mos a questo do uso e da poltica da avaliao
como claramente vinculada aos processos decis-
rios? Caso seja necessria uma nota de cautela,
lembramos que estudar o uso e a poltica da ava-
liao no implica, forosa e automaticamente, a
transposio da temida, e muitas vezes tnue,
fronteira entre os papis do analista e daquele que
faz advocacy ou que prescreve cursos de ao.
Contudo, a despeito do rano positivista que
ainda pode ser observado na prtica avaliativa e
tambm nas anlises sobre esse processo, a ava-
liao no deixa de envolver tambm, necessaria-
mente, advocacy, como defende Greene (1997),
na contracorrente do pensamento dominante na
rea.10 Isso, segundo a autora, se compreender-
mos por advocacy no um partidarismo progra-
mtico ou um vis contaminador, mas sim uma
adeso a valores como um ideal regulatrio espe-
cfico (relativo racionalidade do processo deci-
srio ou ao ativismo comunitrio) (p. 25). Se le-
varmos tambm em considerao o fato de que a
avaliao e os avaliadores atuam, como quer a
vertente construtivista, interpretando o contexto
e construindo esse contexto e [que], portanto, am-
bos so produtores do espao pblico (Escolar e
Domench, 2002, p. 110), torna-se ainda mais las-
timvel a negligncia ou a omisso de nossos
analistas de polticas pblicas.
Notas
1 Para uma discusso sucinta a esse respeito, ver,
por exemplo, Faria e Filgueiras (2003), Caiden e
Caiden (2001) e Albaek (1998).
2 Para uma anlise mais aprofundada a respeito da
institucionalizao dos sistemas de avaliao nos
pases latino-americanos, ver Bozzi (2001), que faz
uma apreciao da experincia do Chile e da Co-
lmbia; Silva (2002), que discute os casos de Ar-
gentina, Chile, Colmbia e Costa Rica; Silva e Cos-
ta (2002), que apresentam, ainda que muito
sumariamente, as experincias de Brasil, Argentina
e Chile; Ghirlanda (2002), que tambm trata do
caso brasileiro. No que diz respeito avaliao dos
sistemas educacionais dos pases latino-america-
nos, rea em que se avanou muito na regio, ver,
por exemplo, Horn, Wolff e Vlez (1991); Ravela
(2001); Wolff (1998) e Faria e Filgueiras (2003).
3 Ver, na Revista do Servio Pblico, Meldolesi
(1996); Thoenig (2000); Ala-Harja e Helgason
(2000); Caiden e Caiden (2001); Derlien (2001);
Bozzi (2001); Cotta (2001); Mokate (2002). Na Re-
vista de Administrao Pblica, ver, por exemplo,
Costa e Castanhar (2003).
4 Como, por exemplo, Calmon (1999); Garcia (2001);
Escolar e Domench (2002); Silva (2002); e Silva e
Costa (2002).
A POLTICA DA AVALIAO DE POLTICAS PBLICAS
5 Comentando o presente ensaio durante os traba-
lhos do Seminrio Temtico Processo decisrio e
implementao de polticas pblicas no Brasil, du-
rante o 28 Encontro Anual da Anpocs, em outubro
de 2004, onde uma parte deste trabalho foi apre-
sentada, Marta Arretche sugeriu a possibilidade de
se pensar a administrao pblica como detendo
no pas a hegemonia intelectual na subrea dos
estudos avaliativos, ao passo que economistas e
econometristas teriam uma hegemonia operacio-
nal. A pesquisadora sugeriu, ainda, que o que ex-
plicaria o subdesenvolvimento dos estudos sobre
avaliao no Brasil no seria apenas a negligncia,
por parte da cincia poltica, dos processos ps-de-
ciso (note-se que talvez esse quadro j tenha co-
meado a ser reparado, como sugere o prprio en-
foque do seminrio mencionado). O problema no
residiria apenas na agenda da cincia poltica, mas
tambm, ou principalmente, seria decorrente da
prpria incipincia das avaliaes no pas, que no
geraria polmicas capazes de pautar a agenda in-
vestigativa.
6 Para bons panoramas dessa subrea de pesquisa,
ver Shulha e Cousins (1997) e Weiss (1998). No
Brasil esse um campo ainda sobremaneira inci-
piente. Excees so Cotta (2001), Faria e Filguei-
ras (2003) e, tendo como nfase a questo da
aprendizagem organizacional decorrente da utiliza-
o da avaliao, Calmon (1999).
7 Para alm do desalento ou da simples incorpora-
o de novas prescries, acreditamos que pode
ser dito sobre a pesquisa acerca do uso da avalia-
o o mesmo que Rivlin disse sobre a anlise de
polticas: ela pode no ter resolvido problema al-
gum, mas pelo menos nos ajudou a determinar
melhor os problemas (apud Weiss, 1998, p. 23).
8 Antes, porm, pode ser til reproduzirmos aqui a
sinttica apresentao, feita por Ala-Harja e Helga-
son, das vrias formas de uso, para que se possa ter
uma viso panormica da questo e para que al-
guns termos centrais sejam introduzidos de manei-
ra ainda mais simples: A definio do uso de uma
avaliao deve fazer distino entre uso pelo pro-
grama e uso organizacional. O primeiro se refere a
estudos individuais de avaliao, e o segundo tem
a ver com o efeito cumulativo (aprendizagem) de-
rivado de uma srie de avaliaes em uma organi-
zao. O uso em programas pode ser posteriormen-
te dividido em uso instrumental, em que a
avaliao d suporte a ao especfica (confirma-
o, modificao ou trmino), e o uso conceitual, BOZZI, S. O. (2001), Evaluacin de la gestin
em que no se toma nenhuma ao imediata, mas
107
no qual os resultados so considerados e a informa-
o acumulada para uso posterior (2000, p. 25).
9 Alis, diga-se de passagem, a chamada avaliao
colaborativa, na qual avaliadores e corpo tcnico
do programa mantm interao constante e amig-
vel, compartilhando parte das decises e dos pro-
cedimentos necessrios, muitas vezes tratada, na
literatura especfica, como a melhor maneira de se
fomentar uma mais ampla utilizao dos resultados
da avaliao.
10 Vale a pena citarmos a seguinte passagem do traba-
lho de Greene: a prpria noo de avaliao como
advocacy provoca tremores de desagrado e horror
entre a maior parte da comunidade contempornea
da avaliao, tanto entre tericos como entre prati-
cantes. Isso porque o objetivo fundamental da ava-
liao era racionalizar a poltica social por meio da
produo de informao cientfica desinteressada,
relativa s opes de poltica, o que seria possvel
apenas por meio de uma adeso objetividade e
neutralidade de valores. Advocacy a anttese da
avaliao justa, de acordo com aqueles ideais e vi-
ses fundadores. Prescrever [to advocate] esposar
e promover uma crena ou postura partidria [par-
tisan], abraar e fazer avanar uma causa. Avaliar ,
de acordo com a tradio, julgar de maneira justa a
qualidade, o mrito e o valor de um programa, com
base em informao imparcial, coletada de manei-
ra cientfica (1997, p.26).
BIBLIOGRAFIA
ALA-HARJA, M. & HELGASON, S. (2000), Em di-
reo s melhores prticas de avalia-
o. Revista do Servio Pblico, 51 (4):
5-60.
ALBAEK, Erik. (1998), Knowledge, interests and
the many meanings of evaluation: a de-
velopmental perspective. Scandina-
vian Journal of Social Welfare, 7: 94-98.
BALLART, Xavier. (1996), Modelos tericos para
la prctica de la evaluacin de progra-
mas, in Quim Brugu e J. Subirats
(orgs.), Lecturas de gestin pblica. Ma-
drid, Instituto Nacional de Administra-
cin Pblica, pp.321-351.
pblica: conceptos y aplicaciones em el
108 REVISTA BRASILEIRA DE CINCIAS SOCIAIS - VOL. 20 N. 59
caso latinoamericano. Revista do Servi-
o Pblico, 52 (1): 25-55.
CAIDEN, G. E. & CAIDEN, N. (2001), Enfoques y
lineamiento, la medicin y la evalua-
cin del desempeno em programas del
sector pblico. Revista do Servio P-
blico, 52 (1): 78-103.
CALMON, Ktya M. N. (1999), A avaliao de
programas e a dinmica da aprendiza-
gem organizacional. Planejamento e
Polticas Pblicas, 19: 3-70.
CARVALHO, Sonia Nahas de. (2003), Avaliao
de programas sociais: balano das ex-
perincias e contribuio para o deba-
te. So Paulo em Perspectiva, 17 (3-4):
185-197.
COSTA, F. L. & CASTANHAR, J. C. (2003), Avalia-
o de programas pblicos: desafios
conceituais e metodolgicos. Revista
de Administrao Pblica, 5.
COTTA, T. C. (2001). Avaliao educacional e
polticas pblicas: a experincia do Sis-
tema Nacional de Avaliao da Educa-
o Bsica (SAEB). Revista do Servio
Pblico, 52 (4): 89-111.
DERLIEN, H-U. (2001), Una comparacin inter-
nacional en la evaluacin de las polti-
cas pblicas. Revista do Servio Pbli-
co, 52 (1): 105-123.
ESCOLAR, Cora & DOMENCH, Patrcia. (2002),
Los proyectos y programas sociales y la
evaluacin: reflexiones en torno a una
experiencia. Polticas Sociais: acompa-
nhamento e anlise, 5: 106-110, Brasilia,
Ipea.
FARIA, Carlos Aurlio Pimenta de. (2003), Idias,
conhecimento e polticas pblicas: um
inventrio sucinto das principais verten-
tes analticas recentes. Revista Brasilei-
ra de Cincias Sociais, 18 (51): 21-30.
FARIA, Carlos Aurlio P. & FILGUEIRAS, Cristina
de A. C. (2003), A avaliao de polti-
cas pblicas como instrumento de pla-
nejamento: os casos do Sistema de Ava-
liao da Educao Bsica (Saeb), do
Brasil, e do Sistema de Medicin de la
Calidad de la Educacin (Simce), do
Chile. Trabalho apresentado no GT
Polticas Pblicas do XXVII Encontro
Anual da Anpocs. Caxambu, MG, 21 a
25 de outubro.
FLODEN, Robert E. & WEINER, Stephen S. (1978),
Rationality to ritual: the multiple roles
of evaluation in governmental proces-
ses. Policy Sciences, 9 (1): 9-18.
GARCIA, Ronaldo Coutinho. (2001), Subsdios
para organizar avaliaes da ao go-
vernamental. Planejamento e Polticas
Pblicas, 23.
GHIRLANDA, Marta Penna M. (2002), A expe-
rincia do governo federal na avaliao
do Plano Plurianual 2000-2003. Traba-
lho apresentado no VII Congreso Inter-
nacional del CLAD. Lisboa, Portugal, 8 a
11 de outubro.
GREENE, Jennifer C. (1997). Evaluation as advo-
cacy. Evaluation Practice, 18 (1): 25-
36.
GUBA, E. & LINCOLN Y. (1989), Fourth genera-
tion evaluations. Nova York, Sage Pu-
blications.
HENRY, Gary T. (2001), How modern democra-
cies are shaping evaluation and the
emerging challenges for evaluation.
American Journal of Evaluation, 22 (3):
419-429.
HORN, Robin; WOLF, Laurence & VLEZ, Eduar-
do. (1991), Establecimiento de sistemas
de medicin del rendimiento acadmico
en Amrica Latina: un anlisis de los
problemas y las experiencias ms re-
cientes. Washington, Banco Mundial.
LIPSKY, Michael. (1980), Street-level bureaucracy:
dilemmas of the individual in public servi-
ces. Nova York, Russel Sage Foundation.
MELDOLESI, Nicoletta S. (1996). Avaliao de
polticas pblicas na Frana. Revista do
Servio Pblico, ano 47, 120 (1): 83-111.
MELO, Marcus Andr. (1999), Estado, governo e
polticas pblicas, in S. Miceli (org.), O
A POLTICA DA AVALIAO DE POLTICAS PBLICAS 109

que ler na cincia social brasileira ciedade, 18 (53): 67-73.

(1970-1995) [vol. 3: Cincia poltica],
WEISS, Carol H. (1998), Have we learned any-
So Paulo/Braslia, Sumar/Anpocs/Ca-
thing new about the use of evaluation?.
pes, pp. 59-100.
American Journal of Evaluation, 19,
MOKATE, K. M. (2002), Convertiendo el mons- (1): 21-34.
truo en aliado: la evaluacin como her-
WOLFF, Laurence. (1998), Las evaluaciones edu-
ramienta de la gerencia social. Revista
cacionales en Amrica Latina: avance
do Servio Pblico, 53 (1): 89-133.
actual y futuros desafios. Santiago do
OAKLEY, Ann. (1998), Public policy experimen- Chile, Preal.
tation: lessons from Amrica. Policy
Studies, 19 (2): 93-114.
PRESSMAN, J. L. & WILDAVSKY, A. (1973), Imple-
mentation. Berkeley, University of Cali-
fornia Press.
RAVELA, Pedro (ed.). (2001), Los prximos pa-
sos: cmo avanzar en la evaluacin de
aprendizajes en Amrica Latina?. Textos
PREAL/GRADE, 20.
ROSSI, P. H. & WRIGHT, J. D. (1984), Evaluation
research: an assessment. Annual Re-
view of Sociology, 10: 331-352.
SCRIVEN, Michael. (1996), Types of evaluation
and types of evaluator. Evaluation
Practice, 17 (2): 151-162.
SHULHA, Lyn M. & COUSINS, J. Bradley. (1997),
Evaluation use: theory, research, and
practice since 1986. Evaluation Practi-
ce, 18 (3): 195-209.
SILVA, Ricardo Toledo. (2002), Eficincia e efic-
cia da ao governamental: uma anli-
se comparativa de sistemas de avalia-
o. Relatrio tcnico. Braslia, Ipea.
SILVA, Pedro L. Barros & COSTA, Nilson do Ros-
rio. (2002), A avaliao de programas
pblicos: reflexes sobre a experincia
brasileira. Relatrio tcnico. Braslia,
Ipea.
THOENIG, J-C. (2000), A avaliao como conhe-
cimento utilizvel para reformas de ges-
to pblica. Revista do Servio Pblico,
51 (2): 54-71.
VIEIRA, Evaldo A. (1997), As polticas sociais e
os direitos sociais no Brasil: avanos e
retrocessos. Revista Servio Social & So-
RESUMOS / ABSTRACTS / RSUMS
A POLTICA DA AVALIAO
DE POLTICAS PBLICAS
Carlos Aurlio Pimenta de Faria
Palavras-chave
Avaliao de polticas pblicas;
Reforma do Estado; Novo geren-
cialismo pblico.
Nos ltimos anos, tem prevalecido
nos estudos e nos debates acerca da
avaliao de polticas pblicas um vis evaluation have clearly been marked
francamente normativo e/ou uma
priorizao dos aspectos mais tcni-
cos da pesquisa avaliativa, bem como
uma nfase em seu papel de instru-
mento gerencial. Reconhecendo o
carter incipiente da pesquisa e da
prtica da avaliao no Brasil, o pre-
sente trabalho pretende: (1) analisar
os fatores que tm justificado e con-
dicionado a implantao generaliza-
da de sistemas de avaliao, sobre-
tudo nos pases da Amrica Latina;
(2) averiguar as razes da prevaln-
cia, no mbito estatal e tambm no
plano analtico, de uma concepo
tecnicista da avaliao, vista hoje
quase exclusivamente como instru-
mento da gesto governamental; e, fi-
nalmente, (3) enfatizar o carter emi-
nentemente poltico da avaliao de
polticas pblicas, elencando e cate-
gorizando suas distintas formas de
utilizao. Ser ressaltada, assim, a
virtual subordinao do uso gerencial
da avaliao e de sua suposta capa-
cidade de encerrar, reiniciar ou revi-
talizar o ciclo das polticas s injun-
es polticas mais abrangentes, s
estratgias e aos interesses dos toma-
dores de decises e demais envolvi-
dos.
PUBLIC POLICY EVALUATION
POLITICS
Carlos Aurlio Pimenta de Faria
Keywords
Public policy evaluation; Reform
of the State; New public man-
agement.
In the last years, both research and
debates concerning public policy
tudes et des dbats sur lvaluation
by a specific normative bias and by
an emphasis upon the technical
aspects of evaluation, as well as by
the valorization of its role as a man-
agement tool. Recognizing the incip-
ient character of both the research
and the practice of public policy
evaluation in Brazil, this paper has
the following objectives: (1) to ana-
lyze the aspects that have justified
and conditioned the generalized
implementation of public policy eval-
uation systems, particularly in Latin
America; (2) to discuss the reasons
behind the prevalence, both in the
state and in the analytical level, of a
technicist conception of evalua-
tion, which is regarded today almost
exclusively as an instrument to be
used by the public managers; and
(3) to emphasize the essentially
political character of public policy
evaluation, listing and categorizing
the distinct forms of its utilization.
The virtual subordination of the
management use of evaluation to
broader political projects and to
specific strategies and interests of
decision makers and other stake-
holders will be stressed.
169
LA POLITIQUE DVALUATION
DES POLITIQUES PUBLIQUES
Carlos Aurlio Pimenta de Faria
Mots-cls
valuation des politiques publi-
ques; Rforme de ltat; Nouvel-
le gestion publique.
Au cours de ces dernires annes,
nous avons assist, dans le cadre des
des politiques publiques, une pr-
dominance du biais normatif et/ou
une primaut des aspects plus tech-
niques de la recherche valuative, ain-
si qu une mise en avant de leur rle
dinstrument de gestion. Tout en re-
connaissant le caractre initial de la
recherche et de la pratique de son
valuation au Brsil, ce travail propo-
se: (1) danalyser les facteurs qui, jus-
qu prsent, ont justifi et condition-
n la mise en place gnralise de
systmes dvaluation, surtout dans
les pays dAmrique latine ; (2) de
rechercher les raisons de l'importan-
ce, dans le cadre de ltat et aussi sur
le plan analytique, dune conception
technisciste dvaluation, comprise
aujourdhui presque exclusivement
comme un instrument de gestion
gouvernementale; et, finalement, (3)
de mettre laccent sur le caractre
minemment politique de lvalua-
tion des politiques publiques, en citant
et en rangeant leurs diffrentes for-
mes dutilisation. Nous prtendons,
de cette faon, mettre en avant la su-
bordination virtuelle de lemploi de
lvaluation comme instrument de
gestion et de son ventuelle capaci-
t de mettre une fin, de recommen-
cer ou de revitaliser le cycle des po-
litiques aux injonctions politiques les
plus englobantes, aux stratgies et
aux intrts des preneurs de dcision
et des autres acteurs impliqus.