Você está na página 1de 14

1

AVALIAO DE POLTICAS PBLICAS NO BRASIL:


por novas epistemes, mtodos e usos da avaliao

Edgilson Tavares de Arajo


edgilson@gmail.com; edgilson@ufrb.edu.br
Universidade Federal do Recncavo da Bahia

Trabalho preparado para sua apresentao no 9. Congresso Latino-Americano de


Cincia Poltica, organizado pela Associao Latino-Americana de Cincia
Polticas (ALACIP)
Montevidu, 26 a 28 de julho de 2017.
2

RESUMO: Este trabalho traz reflexes sobre como pensar respostas contra-hegemnicas s
demandas governamentais hegemnicas por avaliaes de polticas pblicas no Brasil, em
tempos polticos sombrios de ascenso de ondas conservadoras, mediante o golpe poltico-
institucional em curso. Os atores-avaliadores de polticas pblicas devem atentar para mais
dilemas que queles que comumente so enfrentados para atender as demandas avaliativas,
requerendo um olhar para novas epistemes, mtodos e usos da avaliao. preciso questionar
sobre como os juzos de valor argumentados para fazer usos polticos e tcnicos em processos
de tomada de deciso sobre polticas sociais devem ser criados, considerando para alm da
equao recursos-tcnicas-timing, a dimenso tico-cvico-dialgica nos processos
avaliativos.

PALAVRAS-CHAVE: avaliao; polticas pblicas; usos da avaliao

ABSTRACT: This paper presents reflections on how to think counter-hegemonic responses


to hegemonic governmental demands for evaluations of public policies in Brazil, in the dark
political times of the rise of conservative waves, through the ongoing political-institutional
coup. This actors-evaluators in public policy pay attention for more dilemmas than those that
are commonly faced to meet evaluative demands, requiring a look at new epistemes, methods
and uses of evaluation. It is necessary to question how judgments value to make political and
technical uses in decision-making processes on social policies must be created, considering
beyond the resource-technical-timing equation, the ethical-civic-dialogical dimension in the
evaluation processes.

KEYWORDS: evaluation; public policy; uses of evaluation


3

1. Introduo

Avaliao e polticas pblicas so termos polissmicos que ganharam importncia no


campo da gesto pblica na Amrica Latina, principalmente a partir de meados de 1990, em
contextos de afirmao democrtica. Frente s discrepncias sociais existentes em pases
como o Brasil e a ascenso de governos progressistas de esquerda nos anos 2000, uma das
principais razes de ser dos Estados Democrticos passou a ser a implementao de polticas
pblicas sociais, lindando com o enfrentamento de problemas pblicos complexos e
perversos, tais como a pobreza e excluso social. No mesmo passo, a necessidade de aferir os
resultados sobre os investimentos e esforos tcnicos e polticos para lidar com tais questes
passou a ser mister, imputando uma tendncia a aferir, medir e atribuir juzos de valor as
aes, programas e projetos desenvolvidos no mbito das polticas sociais.
Em pases como o Brasil, apesar do predomnio estadocntrico da lgica das polticas
pblicas, valorizando a noo clssica destas como o governo em ao, comea-se a
compreender a importncia do envolvimento dos mltiplos atores pblicos e privados em
torno de diretrizes para resolver problemas de pblica relevncia e para ofertar bens e servios
pblicos. Percebe-se, por outro lado, o aumento das exigncias pelas etiquetas gerenciais da
eficincia, eficcia, efetividade, sustentabilidade e viabilidade das policies, que nem sempre
conseguiram ampliar as formas de ver avaliao para alm de um ltimo estgio do ciclo de
uma poltica pblica. Tal estgio visto com o papel de dar uma sntese final sobre as
respostas de governo para um dado problema, subsidiando tomadores de deciso para
deliberar sobre os rumos de uma policy. Assim, parece haver em alguns aspectos um
descompasso entre a importncia dada ao produto avaliao de polticas pblicas pelos
avaliadores e seus demandantes e a importncia dada por estes para os processos
avaliativos, que deveriam ter um olhar mais apurado para a criao de novas epistemes,
mtodos e usos destas.
Criar sistemas de monitoramento e avaliao de polticas sociais e uma cultura de uso
destes numa perspectiva estratgica de transparncia e controle social passou a ser a tnica,
principalmente, na primeira dcada dos anos 2000. Certamente, nunca o Brasil conseguiu
avanar tanto na criao e aferio de indicadores econmicos e sociais de avaliao, na
produo de sries histricas e nos usos destes para fins de diagnstico territorial. Exemplos
disso, so as sofisticadas bases de dados criadas no mbito dos sistemas federativos de
polticas pblicas, como o Sistema nico de Sade (SUS) e Sistema nico de Assistncia
4

Social (SUAS), destarte a no uniformidade dos usos destes dados pelos diferentes governos
locais.
Num momento em que se avanava com relao a criao de uma cultura da avaliao
de polticas pblicas, de sbito, o pas sofre um golpe poltico-jurdico-institucional que
institui um governo ilegtimo e conservador com a proposta de desmonte do sistema de
proteo social. Neste caso, parece que as lgicas e intencionalidades da avaliao passam a
ser apenas as de deslegitimar aquilo que vinha sendo construdo, baseando-se em juzos de
valor meritocrticos, no capacitismo e na eficcia gerencial, como formas de manipular as
agendas polticas e governamentais, voltando-as para a extino de polticas sociais. Todos os
esforos dos atores-avaliadores vindos das universidades, think thanks e consultorias entram
em choque, ao no se ter clareza sobre qual ser o destino das avaliaes feitas at ento, bem
como, para quem e para que estas serviro estrategicamente. Isso exige que estejam ainda
mais atentos para os dilemas que enfrentam e enfrentaro, que queles que comumente j
vinham sendo enfrentados junto as demandas por avaliao pelos governos.
Situado tal contexto, o objetivo deste trabalho trazer reflexes sobre possveis
respostas contra-hegemnicas s demandas governamentais hegemnicas por avaliaes de
polticas pblicas no Brasil, em tempos polticos sombrios de ascenso de ondas
conservadoras, mediante o golpe poltico-institucional em curso. Para tanto, alm desta
introduo buscarei fazer alguns apontamentos sobre a necessidade de novas epistemes e
mtodos avaliativos, os usos da avaliao e seus dilemas, e possveis respostas contra-
hegemnicas para demandas governamentais por avaliao.

2. Por novas epistemes e mtodos de avaliao

Como j afirmado, muito avanamos no Brasil, em termos da certeza sobre as


necessidades de avaliar polticas pblicas, seja como produto complementar aos clssicos
processos hegemnicos de controle e legalidade tpicos das administraes pblicas (BASCO,
SUBIRATS, 2009), seja enquanto processos de aprendizagem, de construo de significados
ou de significncias (BOULLOSA, 2009). Para tanto preciso conceber que a avaliao
compreende atividades nem sempre correlacionadas voltadas para expressar um juzo de valor
argumentado ou uma sntese avaliatria voltada para um fim nem sempre claro e/ou
explcito, empreendido por um conjunto de agentes, nem sempre definidos ou etiquetados
como avaliadores (BOULLOSA, 2006, p. 112).
5

A ideia de conceber avaliao como juzo de valor algo que muitas vezes pode ser
contestada e gera dilemas dentro de lgicas gerencialistas e positivistas. importante lembrar
aqui o clssico conceito de avaliao proposto por Michael Scriven (1967) ao afirmar que
avaliar uma atividade formal de atribuio de valor material (worth), valor simblico (value)
e mrito (merit) a uma entidade (planos, programas, projetos e/ou aes).
Logo, ao compreender tais questes, percebe-se que avaliar no se trata apenas de
algo to racional e procedimental obtido tecnicamente por meio da pesquisa avaliativa
(incluindo mtodos e tcnicas da pesquisa social aplicada), que seja capaz de criar anlises
neutras, cientificamente comprovadas e governamentalmente aceitas ou rejeitadas.
preciso pensar em novas perspectivas para compreender a natureza, os mtodos, os
vnculos, os limites e potencialidades dos processos avaliativos, principalmente, quando se
tratar de objetos no campo das polticas sociais. A avaliao, assim, no pode apenas se
basear na lgica dos modelos positivistas, normativos e prescritivos.
Pensar numa cultura da policy evaluation como algo srio, comprometido com a
transformao social, demanda superar pressupostos epistemolgicos ultrapassados. preciso
adotar abordagens ps-positivistas que situem a pesquisa emprica avaliativa em um quadro
interpretativo mais amplo. Isso implica em ao invs de controlar e esconder as influncias do
analista / avaliador de polticas pblicas, recorrendo a modelos mais rigorosos de pesquisa
emprica, trazer tona tais julgamentos, reconhecendo sua centralizada para o processo
cientfico e poltico. Os produtos cientficos decorrentes das avaliaes, portanto, se destinam
apenas a oferecer uma descrio mais precisa do que j assumido como cincia (FISHER,
2016).
Atenta-se, porm, que na nossa tardia1 construo de uma cultura avaliativa no Brasil,
caminhamos para o desenvolvimento de enfoques que privilegiam modelos hegemnicos,
muitas vezes trazendo mtodos com lgicas empresariais para os governos, tendo a primazia
na lgica do custo-benefcio, nos resultados e nos chamados impactos. Avaliadores
acadmicos, consultores ou burocratas, comumente, trazem um discurso do tcnico e do
profissional como influenciador dos rumos da poltica social. Logo, urge a necessidade
repensar a primazia das chamadas avaliaes de impacto. preciso perguntar para que estas
de fato tm servido e quais os impactos que estas vem ocasionando nas polticas sociais,

1
Boullosa e Arajo (2009) enfatizam que a propagao da cultura de avaliao aos chamados pases perifricos tardou um
pouco, pois se deu somente com os programas de cooperao internacional empreendidos aps a Segunda Guerra Mundial
(1939-1945). No Brasil, vem se d ainda mais tardiamente, aps a lgica da Reforma Gerencial do Estado (1995) e se amplia
nos anos 2000 com a implementao de sistemas de proteo social.
6

desde os governos progressistas, at o momento atual com a instalao de um governo


ilegtimo que vem favorecendo o desmonte dos direitos sociais.
As etiquetas da avaliao de desempenho ou da avaliao de impacto cada vez
mais se demonstram insuficientes para resolver a carncia de recproco conhecimento entre
elas. Porm, parece ainda haver pouco esforo dos avaliadores para redefinir o arcabouo
conceitual e metodolgico da avaliao, uma vez que estes reforam posturas excessivamente
tcnicas e prescritivas com pouca ou nenhuma referncia ou reverncia a qualquer fase
analtica sobre os objetos avaliados nas polticas sociais (BOULLOSA, ARAJO, 2009).
Isso se d tambm pela prpria lgica de compreenso equivocada sobre poltica social e as
relaes entre os seus sistemas simblicos e resultados materiais.
Compreender as polticas sociais como argumentos 2 que favorecem diferentes
formas de ver e se relacionar com os problemas pblicos sociais pode ser um caminho para
pensar novas epistemes e mtodos avaliativos. Logo, pressupe uma avaliao dos impactos
transformacionais no pensamento e nas deliberaes da comunidade poltica, implicando na
compreenso dos conflitos normativos escondidos por trs de interpretaes muitas vezes
plausveis de objetivos abstratos ou valor (FISCHER, 1995, 2016). A especial ateno para
os diferentes contextos, os conflitos polticos e ideolgicos, os significados compartilhados e
as premissas que motivam distintos atores sociais para ao e engajamento em causas
coletivas, passa a ser algo fundamental para as polticas pblicas (REICH, 1988 apud
FISHER, 2016) e, em especial, para a avaliao destas. preciso ampliar a viso sobre
questes concretas nos processos avaliativos, que vo desde eficincia de um programa,
por meio do ser contexto e sistema societal, para questes normativas abstratas concernentes
ao impacto de uma poltica pblica de uma forma de vida particular (p. 174).
certo que cada vez mais se avaliam objetos extremamente complexos e que geram
muitas incertezas em ambientes que renem atores, tempos e interesses diferentes. Tal
complexidade se d pela integrao de objetivos em polticas de governo, com uma
pluralidade de instrumentos (cruzados) e pressupondo a sinergia entre diferentes setores e
nveis de governo; pela definio do pblico da policy, extrapolando as fronteiras clssicas
entre grupos de atores decisores, executores e beneficirios; pela exigncia de inovao de
arranjos institucionais, dificultando um tipo de aprendizagem ligado ao aperfeioamento de
processos, dificultando o desenvolvimento de sries de avaliao; e pelo crescente grau de
participao nas polticas pblicas avaliadas, gerando dilemas de no saber se o mais

2
A teoria da argumentative turning propostas por Fisher (2016), Fisher e Forester (1995) concebem a anlise de polticas
pblicas centrada nas ideias, processos e argumentos.
7

importante avaliar os efeitos e resultados da participao em si ou das decises participadas


(BOULLOSA, 2006, 2012).
As incertezas das avaliaes surgem principalmente ao se aferir o possvel sucesso do
desenho de uma resposta de governo proposta para transformar uma dada situao
considerada problemtica em uma outra considerada socialmente aceitvel, mesmo quando
este se d de modo consensual ou participativo. Neste caso, busca-se minimizar tal incerteza
com base numa lexicologia da avaliao centrada na aferio da efetividade, eficincia e
eficcia. Ainda pode-se elencar a incerteza quanto aos dilemas presentes para a
implementao da policy em multplos nveis (BOULLOSA, 2012), como muito ocorre no
SUS e SUAS no Brasil. Uma terceira incerteza sobre o alcance de mudanas de
comportamento e interesses exigidas para a sustentabilidade das aes propostas.
Frente a tais complexidades e incertezas, preciso pensar em novos desenhos de
avaliaes e novas competncias e sensibilidades das equipes de avaliao, que nem sempre
esto preparadas para responder a altura. Foi neste intuito que Arajo e Boullosa (2015),
Arajo (2016), desenvolveram e testaram o mtodo intitulado avaliao argumentativa, que
foi aplicada para avaliar um instrumento de poltica pblica para pessoas com deficincia.
Trazem uma proposta interpretativa problematizando o mtodo nos planos epistemolgico,
metodolgico e operacional (das tcnicas e critrios de avaliao). Este levou em
considerao a verificao emprica de questes de validao, buscando no s avaliar metas
e objetivos do instrumento de policy que estava em processo de implementao, mas como os
conceitos e suposies subjacentes ao problema pblico para qual o instrumento foi
desenhado fora apreendido. Logo, trata-se de um modo de interpretao do raciocnio que
ocorre nos quadros de sistemas de crenas normativas exercidas sobre um problema pblico,
buscando responder como o problema e suas alternativas foram concebidos e como so
vivenciados e praticados. O mtodo tem como aporte as teorias ps-positivistas da
instrumentalizao de polticas pblicas (LASCOUMES, L GALES, 2007, 2012) e a
virada argumentativa (FISHER, 2016, FISHER, FORESTER, 1995). O foco voltado para
a compreenso dos argumentos trabalhados, ou seja, dos aspectos implcitos e latentes,
observando tambm o que est nos textos oficiais (falados e escritos), os modos de deciso, as
formas de conceber os problemas pblicos e os instrumentos de polticas pblicas (ARAJO,
BOULLOSA, 2015)3.

3
Para mais informaes sobre o mtodo consultar Arajo (2016) e Arajo e Boullosa (2015).
8

3. Os usos da avaliao e seus efeitos em tempos polticos sombrios

Ao considerarmos a avaliao como juzo de valor argumentado, admitimos tambm


que podem ocorrer diferentes usos da avaliao, envolvendo os diferentes interesses e
subjetividades dos distintos atores envolvidos, com suas crenas, valores e preconceitos que
influenciam no processo (BOULLOSA, ARAJO, 2009). Logo, prevalecem tambm
discordncias quanto aos possveis usos das avalies de polticas pblicas. Alguns autores
defendem que o importante so os papis da avaliao, enquanto outros que o mais importante
so os objetivos possveis da avaliao. Para Talmage (1982) apud Boullosa, Arajo (2009),
os objetivos das avaliaes so mltiplos, mas trs deles aparecem com bastante frequncia:
(a) fornecer um julgamento de valor, (b) informar o tomador de deciso, (c) exercer uma
funo poltica. H ainda os que defendem que devem servir para o empoderamento ou
emancipao dos atores envolvidos.
O clssico estudo de King (1988), definiu os usos da avaliao como instrumental,
conceitual, persuasivo e simblico. O instrumental ocorre quando a avaliao usada para
promover ideias e generalizaes para dar sustentabilidade as decises e buscas de solues.
O conceitual gerado pela necessidade de reforar a identidade da ao e a compreenso de
seus objetivos por meio da aprendizagem institucional. O persuasivo quando a avaliao
usada para mobilizar o apoio necessrio para formular, reformular, continuar ou interromper
uma poltica pblica. O simblico quando a avaliao usada para fins polticos ou de
legitimao.
importante observar como no Brasil as avaliaes vem sendo predominantemente
usadas para fins persuasivos e/ou simblicos, em tempos de governos progressistas mais para
justificar a formulao de algumas polticas sociais e, atualmente, para promover a
descontinuidade e desmonte destas. Exemplo recente disso pode ser visto a partir de 2016,
com a efetivao do governo golpista de Michel Temer, quando se passa desvirtuar os usos
dos sistemas de monitoramento e avaliao criados pela Secretaria de Avaliao e Gesto da
Informao, do Ministrio do Desenvolvimento Social e Agrrio (SAGI/MDS), arduamente
criados desde 2004. Prticas de gesto e monitoramento usadas constantemente e h bastante
tempo, como o recadastramento anual das famlias beneficirias de um das principais polticas
sociais existentes do Brasil, o Programa Bolsa Famlia, surgem na agenda poltica e da mdia
como grandes novidades e no sentido de sistemas de auditoria. A mdia repercute que frente a
crise econmica do pas e a corrupo avassaladora, o governo passa um Pente-fino no Bolsa
Famlia encontra irregularidades em 1,1 milho de benefcios. O subttulo desta chamada
9

divulgada no site do prprio ministrio e depois reproduzida em vrios meios de comunicao


de massa anunciava: Maior cruzamento de dados da histria do programa, feito pelo
Ministrio do Desenvolvimento Social e Agrrio (MDSA), resultou em 654 mil bloqueios e
469 mil cancelamentos (MDSA, 2016). Na Revista Veja, em 26 de maio de 2016: Bolsa
Famlia perdeu R$ 2,6 bilhes com fraudes. Levantamento indito mostra o volume de
recursos desviado do programa. Funcionrios pblicos, mortos e at doadores de campanha
esto entre os beneficiados. No portal da Globo (G1), a chamada foi Ministrio aponta 1,1
milho de irregularidades no Bolsa Famlia (CARAM, 2017). Em 2017, a notcia ainda
repercutia no mesmo veculo: Fraudadores do Bolsa Famlia tinham rendas superiores a R$ 5
mil (VEJA, 18 abr. 2017).
Tais notcias evidenciam novidades que confundem o senso comum entre o que
monitoramento e avaliao com auditoria trazendo um juzo de valor que tenta impregnar uma
lgica de debilidade das metodologias empregadas anteriormente pelos governos, ausncia de
avaliao vista enquanto controle.
No por acaso, a partir deste mesmo perodo as vrias bases de dados abertas da
SAGI/MDS para todo e qualquer cidado, ofertando instrumentos e ferramentas de
cruzamento de dados e indicadores para diagnsticos, mapas de informao social etc. e
outras informaes pblicas sobre o Bolsa Famlia e demais instrumentos da Poltica de
Assistncia Social, passam a ser retiradas ou estar em atualizao. Tais bases que
subsidiavam pesquisas avaliativas, apesar de abertas eram muito mais usadas pelos gestores
dos programas, por avaliadores e acadmicos interessados em fundamenta suas investigaes.
Isso nos traz um alerta sobre a possvel subutilizao do conjunto de avaliaes (SUBIRATS,
1995) e indicadores fornecidos pela SAGI e refora o uso mais nas finalidades persuavivas
e simblicas que usos conceituais e instrumentais (KING, 1988)

4. Respostas contra-hegemnicas para demandas hegemnicas por avaliao

Passamos por um contexto no Brasil em que a onda das raras demandas


governamentais por avaliao focada apenas nas chamadas avaliaes de impacto, que
ascendem ainda mais na histrica hegemonia criada pela perspectiva positivista e quantitativa.
Como j tratado, sabido que a avaliao de polticas pblicas no uma atividade
plenamente objetiva, tcnica e instrumental, mas um processo carregado de subjetividades e
valores, sendo preciso atentar cada vez mais para as implicaes que os usos dos resultados
10

avaliativos possam ter na vida dos cidados. Isso se evidencia mais ainda quando se trata de
demandas por avaliao de impacto de polticas sociais que muitas vezes sequer possuem um
T0 sistematizado, e que possam ter de modo latente resultados usados de modo intencional
apenas para provocar a extino da poltica e, consequente, prejuzo aos cidados
beneficirios.
Tais fatores trazem desafios para os avaliadores profissionais atuantes no mbito
acadmico e das consultorias privadas ofertadas por empresas especializadas, think thanks e
organizaes do terceiro setor. Mais do que nunca preciso que estejamos atentos ao
contexto da avaliao e seus demandantes, impondo alguns enfretamentos a serem feitos no
que concerne a uma equalizao da dimenso tcnica e tica, assim como, dos usos polticos
dos resultados das avaliaes. A dimenso tica da avaliao, principalmente, das polticas
sociais urge, devendo os avaliadores ressaltar a complexidade dos problemas pblicos que
estas buscam enfrentar e no buscando contorn-los, acreditando que sero resolvidos por si
mesmos ao longo do trabalho de avaliao ou mesmo que no possuem tempo ou recursos
suficientes para problematiz-los. importante ressaltar que a falta de reflexo tem levado a
assumir um carter cada vez mais instrumental da avaliao, com todos os riscos que
implicam consider-la como uma atividade neutra, destituda de dimenso humana e poltica
(BOULLOSA, ARAJO, 2009). Deve-se atentar aos discursos que casam com as ideias
gerencialistas e meritocrticas trazidas pelo governo golpista vigente no Brasil. Isso associado
as pontuais demandas por avaliaes de custo-benefcio focadas em resultados e impactos, em
curtos espaos temporais que no permitam reflexes mais aprofundadas sobre as prticas
reais das polticas pblicas, torna-se um prato cheio para a extino de algumas polticas
sociais.
Para alm da dimenso tica, preciso tambm que mesmo diante das adversidades
em curso, no deixemos perder de vista tudo que foi criado em termos de avaliao, sejam
quantitativas ou qualitativas, sejam positivistas ou ps-positivistas. Sempre alertei
policymakers e demandantes por avaliaes que foram feitos muitos investimentos em
pesquisas avaliativas, porm, de modo geral, pouco se incidiram e usaram os resultados destas
para propor melhorias nas polticas pblicas. Prevaleceu na ltima dcada uma focalizao
das agendas de pesquisas avaliativas sobre programas de transferncia de renda, inclusive o
Bolsa Famlia, bem como, as polticas de segurana alimentar, em detrimento de pesquisas
voltadas para ofertas de servios socioassistenciais, por exemplo, que foram muito pontuais.
Neste sentido, h um acmulo de conhecimentos gerados que precisa ser melhor utilizado
para a realizao de meta-avaliaes, ou seja, avaliar as avaliaes existentes, assumindo que
11

teremos que compreender mltiplos nveis de anlise, o que estas tm em comum e diferente,
o que trazem de novidade para incidncia nas polticas pblicas.
Ainda cabe aqui destacar que no podemos deixar de lado a discusso sobre a criao
de novos mtodos e sistemas de indicadores, mesmo diante de um contexto com escasso
financiamento para pesquisas ou mesmo boicote a essas. preciso atentar que na cultura
avaliativa criada at ento no pas, passamos a fazer um uso indiscriminado, generalizado,
pouco contextualizado e muitas vezes impensado dos diversos indicadores sociais e
econmicos que foram criados e validados nos ltimos anos. Saber e decorar indicadores
passou a ser sinnimo de poder e de conhecimento em avaliao de polticas pblicas. Assim,
concordo com Boullosa (2011), ao destacar que o indicador passa a ser visto como um
construto interpretativo carregado de valores, da prpria compreenso da realidade ao qual se
debrua. Logo, devemos compreender sua natureza, os valores implcitos existentes em
qualquer sistema de indicadores e os possveis efeitos perversos destes. Destaca que estes so
artificiais (so sempre construdos e nunca colhidos), parciais, subjetivos, incertos e
interdependentes. Alm disso, os sistemas de indicadores carregam como principais valores o
progresso, a estandardizao, o controle e a aprendizagem.
Dar respostas contra-hegemnicas para demandas hegemnicas, enfim, pressupe
resistncia por parte dos avaliadores para compreender e valorizar as dimenses tica e
poltica da avaliao, bem como investir em formas alternativas para criar novos e inovadores
mtodos avaliativos que sejam difundidos e testados em diferentes contextos. preciso que
a comunidade epistmica que se debrua sobre avaliaes de polticas pblicas, as redes de
pesquisadores e demais atores estejam super alertas sobre os perigos dos usos indevidos do
ponto de vista tico, e indesejados do ponto de vista cvico, que algumas demandas avaliativas
governamentais podem causar. Assim, importante que sejam fortalecidas estratgias contra-
hegemnicas que tragam a dialogicidade e a crtica construtiva como princpios para o campo
da policy evaluation.

5. Consideraes Finais

Frente ao contexto poltico sombrio que vivemos no Brasil, no qual a cultura da


avaliao de polticas pblicas que estava em ascenso passa por cerceamento e perigos ticos
preciso reforar a ideia que avaliar uma atividade intrnseca ao ser humano, carregada de
subjetividade e relacionada tanto ao campo da deciso, quanto ao campo da aprendizagem
12

individual e social (BOULOSSA, ARAJO, 2009). Compreender as fronteiras informais e


intuitivas das avaliaes formais, a complexidade dos problemas pblicos sociais tratados nas
polticas pblicas e os usos das avalies para a tomada de deciso, passa cada vez mais a ser
uma obrigao tica e cvica. A interpretao dos objetos de avaliao deve explorar a
dimenso cvico-dialgica, compreendendo-a como um processo de aprendizagem que
procura explorar as dimenses prticas, sociais, organizacionais e cidad. Os juzos de valor
argumentados para fazer usos polticos e tcnicos em processos de tomada de deciso devem
ser feitos considerando para alm da equao recursos-tcnicas-timing, a dimenso tico-
cvico-dialgica nos processos avaliativos.
H dois grandes blocos de avaliaes no Brasil: a) avaliaes que no conseguem
contribuir com o debate pblico em torno de temticas que dialogam com os objetos que
avaliam; b) avaliaes que vem buscando construir sua identidade como ator produtor de
informao qualificada no e do debate pblico, por meio da produo de juzos avaliativos
argumentados, com explicitao do quadro de valores que guiou a construo de tal juzo.
Neste sentido, o cenrio da avaliao hoje em nosso pas to vasto quanto perdido
(BOULLOSA, ARAJO, 2009).
Os caminhos apontados para resistir e fortalecer a cultura avaliativa que vnhamos
criando no Brasil passam por compreender que no existem formas nicas e positivistas para
avaliar. Alm disso, devemos compreender de modo tico que as avaliaes so
eminentemente atividades polticas que devem ser usadas para defesa da cidadania, mas que
tambm podem ter usos desvirtuados. Por fim, cabe ainda ressalta que preciso problematizar
a avaliao como um contexto propcio aprendizagem, no qual todos podem e devem
aprender. Conforme aponta Boullosa (2012), um dos passos importantes nesta caminhada
reside na superao da dicotomia entre avaliadores e avaliados, entre os ns e os eles que
marcam e esterilizam muitos processos avaliativos. Esta superao pode ser alcanada por
meio da construo de uma comunidade de avaliadores dialgica, inclusiva e sensvel ao
objeto que ser avaliado.

Referncias

ARAJO, Edgilson Tavares. Avaliao do processo de implementao dos Centros-dia de


Referncia para a Pessoa com Deficincia e suas Famlias, no mbito do Plano Viver Sem
Limite, na Regio Nordeste. Relatrio Final de Pesquisa. Projeto apoiado pela chamada
pblica MCTI-CNPq/MDS-SAGI N 24/2013 DESENVOLVIMENTO SOCIAL, no TEMA
1: Assistncia Social - 1.6 A Implementao do Plano Viver Sem Limites. Ago. 2015.
13

ARAJO, Edgilson Tavares; BOULLOSA, Rosana de Freitas. Avaliao da implementao


do Centro-dia para Pessoas com Deficincia: entre inovao e aprendizagem em polticas
pblicas. Interfaces Cientficas - Humanas e Sociais, v.3, n.3, Aracaju: Unit, p. 123 136,
Jun. 2015.

BLASCO, J., SUBIRATS, J. Consideraciones generales sobre la evaluacin de polticas


pblicas. Las especificidades de las polticas sociales. Dilemas de la Poltica Social, p. 39-58,
2009, Disponvel em:
http://www.caritas.es/imagesrepository/CapitulosPublicaciones/1046/04%20-
%20CONSIDERACIONES%20GENERALES%20SOBRE%20LA%20EVALUACI%C3%9
3N%20DE%20POL%C3%8DTICAS%20P%C3%9ABLICAS.pdf Acesso em: 20 nov. 2017

BOULLOSA, Rosana de F.. . Algumas notas de problematizao para a construo de


sistemas de indicadores de avaliao e monitoramento de experincias de economia solidria.
In: KRAYCHETE, G.; CARVALHO, P.. (Org.). Economia Popular Solidria: indicadores
para a sustentabilidade. 1ed.Rio de Janeiro: Tomo Editorial, 2012, v. 1, p. 85-93.

_____. Che tipo di innovazione stiamo vivendo? Le politiche urbane di regolarizzazione


fondiaria. La costruzione di un modello interpretativo. Doutorado em Pianif e Politiche
Pubbliche del Territor. Tese. Universitat IUAV Veneza, 2006

BOULLOSA, Rosana de F; ARAJO, Edgilson Tavares. Avaliao e monitoramento de


projetos sociais. Curitiba: IESDE, 2009.

CARAM, B.Ministrio aponta 1,1 milho de irregularidades no Bolsa Famlia. 07 nov. 2016. Disponvel em:
http://g1.globo.com/politica/noticia/2016/11/pente-fino-encontra-11-milhao-de-irregularidades-no-bolsa-
familia-diz-ministerio.html Acesso em 20 jun. 2017

FISHER, Frank. Para alm do empirismo: policy inquiry na perspectiva ps-positivista.


Traduo: Rosana Boullosa. Revista NAU Social, v.7, n.12, p. 163-180 Maio/Nov 2016

FISHER, F., FORESTER, (eds). The Argumentative Turn in Policy Analysis and Planning.
Chapel Hill, NC: Duke University Press, 1993.

_________. Evaluating Public Policy. Chicago: Nelson-Hall Publishers, 1995.

KING, Jean. Research on evaluation Use and its implication for evaluating research and

practices. Studies in Educational Evaluation, 1988.

LACOUMES, P.; LE GALS, P. Governance. International Journal of Policy,


Administration, and Institutions, v. 20, n. 1, USA: Blackwell Publishing, jan. 2007, p. 1-21

_____. Sociologia da Ao Pblica. Traduo e estudo introdutrio: George Sarmento,


Macei: EDUFAL, 2012.

MDSA. Pente-fino no Bolsa Famlia encontra irregularidades em 1,1 milho de benefcios.


Site institucional do Ministrio do Desenvolvimento Social e Agrrio. Disponvel em:
http://mds.gov.br/area-de-imprensa/noticias/2016/novembro/pente-fino-no-bolsa-familia-
encontra-irregularidades-em-1-1-milhao-de-beneficios Acesso em 20 de mar. 2017.

SCRIVEN, Michael. Evaluation Thesaurus. Newbury Park, California: Sage, 1991.


14

_____. The methodology of evaluation. In R.E. Stake (Ed.) Curriculum Evaluation. AERA
Monograph Series on Curriculum Evaluation. v. 1. Chicago: Rand McNally, 1967.

Revista VEJA. Bolsa Famlia perdeu R$ 2,6 bilhes com fraudes . Disponvel em:
http://veja.abril.com.br/brasil/bolsa-familia-perdeu-r-26-bilhoes-com-fraudes/ , 26 mai. 2016,
Acesso em 30 jan. 2017.

Você também pode gostar