Escolar Documentos
Profissional Documentos
Cultura Documentos
RESUMO: Este trabalho traz reflexes sobre como pensar respostas contra-hegemnicas s
demandas governamentais hegemnicas por avaliaes de polticas pblicas no Brasil, em
tempos polticos sombrios de ascenso de ondas conservadoras, mediante o golpe poltico-
institucional em curso. Os atores-avaliadores de polticas pblicas devem atentar para mais
dilemas que queles que comumente so enfrentados para atender as demandas avaliativas,
requerendo um olhar para novas epistemes, mtodos e usos da avaliao. preciso questionar
sobre como os juzos de valor argumentados para fazer usos polticos e tcnicos em processos
de tomada de deciso sobre polticas sociais devem ser criados, considerando para alm da
equao recursos-tcnicas-timing, a dimenso tico-cvico-dialgica nos processos
avaliativos.
1. Introduo
Social (SUAS), destarte a no uniformidade dos usos destes dados pelos diferentes governos
locais.
Num momento em que se avanava com relao a criao de uma cultura da avaliao
de polticas pblicas, de sbito, o pas sofre um golpe poltico-jurdico-institucional que
institui um governo ilegtimo e conservador com a proposta de desmonte do sistema de
proteo social. Neste caso, parece que as lgicas e intencionalidades da avaliao passam a
ser apenas as de deslegitimar aquilo que vinha sendo construdo, baseando-se em juzos de
valor meritocrticos, no capacitismo e na eficcia gerencial, como formas de manipular as
agendas polticas e governamentais, voltando-as para a extino de polticas sociais. Todos os
esforos dos atores-avaliadores vindos das universidades, think thanks e consultorias entram
em choque, ao no se ter clareza sobre qual ser o destino das avaliaes feitas at ento, bem
como, para quem e para que estas serviro estrategicamente. Isso exige que estejam ainda
mais atentos para os dilemas que enfrentam e enfrentaro, que queles que comumente j
vinham sendo enfrentados junto as demandas por avaliao pelos governos.
Situado tal contexto, o objetivo deste trabalho trazer reflexes sobre possveis
respostas contra-hegemnicas s demandas governamentais hegemnicas por avaliaes de
polticas pblicas no Brasil, em tempos polticos sombrios de ascenso de ondas
conservadoras, mediante o golpe poltico-institucional em curso. Para tanto, alm desta
introduo buscarei fazer alguns apontamentos sobre a necessidade de novas epistemes e
mtodos avaliativos, os usos da avaliao e seus dilemas, e possveis respostas contra-
hegemnicas para demandas governamentais por avaliao.
A ideia de conceber avaliao como juzo de valor algo que muitas vezes pode ser
contestada e gera dilemas dentro de lgicas gerencialistas e positivistas. importante lembrar
aqui o clssico conceito de avaliao proposto por Michael Scriven (1967) ao afirmar que
avaliar uma atividade formal de atribuio de valor material (worth), valor simblico (value)
e mrito (merit) a uma entidade (planos, programas, projetos e/ou aes).
Logo, ao compreender tais questes, percebe-se que avaliar no se trata apenas de
algo to racional e procedimental obtido tecnicamente por meio da pesquisa avaliativa
(incluindo mtodos e tcnicas da pesquisa social aplicada), que seja capaz de criar anlises
neutras, cientificamente comprovadas e governamentalmente aceitas ou rejeitadas.
preciso pensar em novas perspectivas para compreender a natureza, os mtodos, os
vnculos, os limites e potencialidades dos processos avaliativos, principalmente, quando se
tratar de objetos no campo das polticas sociais. A avaliao, assim, no pode apenas se
basear na lgica dos modelos positivistas, normativos e prescritivos.
Pensar numa cultura da policy evaluation como algo srio, comprometido com a
transformao social, demanda superar pressupostos epistemolgicos ultrapassados. preciso
adotar abordagens ps-positivistas que situem a pesquisa emprica avaliativa em um quadro
interpretativo mais amplo. Isso implica em ao invs de controlar e esconder as influncias do
analista / avaliador de polticas pblicas, recorrendo a modelos mais rigorosos de pesquisa
emprica, trazer tona tais julgamentos, reconhecendo sua centralizada para o processo
cientfico e poltico. Os produtos cientficos decorrentes das avaliaes, portanto, se destinam
apenas a oferecer uma descrio mais precisa do que j assumido como cincia (FISHER,
2016).
Atenta-se, porm, que na nossa tardia1 construo de uma cultura avaliativa no Brasil,
caminhamos para o desenvolvimento de enfoques que privilegiam modelos hegemnicos,
muitas vezes trazendo mtodos com lgicas empresariais para os governos, tendo a primazia
na lgica do custo-benefcio, nos resultados e nos chamados impactos. Avaliadores
acadmicos, consultores ou burocratas, comumente, trazem um discurso do tcnico e do
profissional como influenciador dos rumos da poltica social. Logo, urge a necessidade
repensar a primazia das chamadas avaliaes de impacto. preciso perguntar para que estas
de fato tm servido e quais os impactos que estas vem ocasionando nas polticas sociais,
1
Boullosa e Arajo (2009) enfatizam que a propagao da cultura de avaliao aos chamados pases perifricos tardou um
pouco, pois se deu somente com os programas de cooperao internacional empreendidos aps a Segunda Guerra Mundial
(1939-1945). No Brasil, vem se d ainda mais tardiamente, aps a lgica da Reforma Gerencial do Estado (1995) e se amplia
nos anos 2000 com a implementao de sistemas de proteo social.
6
2
A teoria da argumentative turning propostas por Fisher (2016), Fisher e Forester (1995) concebem a anlise de polticas
pblicas centrada nas ideias, processos e argumentos.
7
3
Para mais informaes sobre o mtodo consultar Arajo (2016) e Arajo e Boullosa (2015).
8
avaliativos possam ter na vida dos cidados. Isso se evidencia mais ainda quando se trata de
demandas por avaliao de impacto de polticas sociais que muitas vezes sequer possuem um
T0 sistematizado, e que possam ter de modo latente resultados usados de modo intencional
apenas para provocar a extino da poltica e, consequente, prejuzo aos cidados
beneficirios.
Tais fatores trazem desafios para os avaliadores profissionais atuantes no mbito
acadmico e das consultorias privadas ofertadas por empresas especializadas, think thanks e
organizaes do terceiro setor. Mais do que nunca preciso que estejamos atentos ao
contexto da avaliao e seus demandantes, impondo alguns enfretamentos a serem feitos no
que concerne a uma equalizao da dimenso tcnica e tica, assim como, dos usos polticos
dos resultados das avaliaes. A dimenso tica da avaliao, principalmente, das polticas
sociais urge, devendo os avaliadores ressaltar a complexidade dos problemas pblicos que
estas buscam enfrentar e no buscando contorn-los, acreditando que sero resolvidos por si
mesmos ao longo do trabalho de avaliao ou mesmo que no possuem tempo ou recursos
suficientes para problematiz-los. importante ressaltar que a falta de reflexo tem levado a
assumir um carter cada vez mais instrumental da avaliao, com todos os riscos que
implicam consider-la como uma atividade neutra, destituda de dimenso humana e poltica
(BOULLOSA, ARAJO, 2009). Deve-se atentar aos discursos que casam com as ideias
gerencialistas e meritocrticas trazidas pelo governo golpista vigente no Brasil. Isso associado
as pontuais demandas por avaliaes de custo-benefcio focadas em resultados e impactos, em
curtos espaos temporais que no permitam reflexes mais aprofundadas sobre as prticas
reais das polticas pblicas, torna-se um prato cheio para a extino de algumas polticas
sociais.
Para alm da dimenso tica, preciso tambm que mesmo diante das adversidades
em curso, no deixemos perder de vista tudo que foi criado em termos de avaliao, sejam
quantitativas ou qualitativas, sejam positivistas ou ps-positivistas. Sempre alertei
policymakers e demandantes por avaliaes que foram feitos muitos investimentos em
pesquisas avaliativas, porm, de modo geral, pouco se incidiram e usaram os resultados destas
para propor melhorias nas polticas pblicas. Prevaleceu na ltima dcada uma focalizao
das agendas de pesquisas avaliativas sobre programas de transferncia de renda, inclusive o
Bolsa Famlia, bem como, as polticas de segurana alimentar, em detrimento de pesquisas
voltadas para ofertas de servios socioassistenciais, por exemplo, que foram muito pontuais.
Neste sentido, h um acmulo de conhecimentos gerados que precisa ser melhor utilizado
para a realizao de meta-avaliaes, ou seja, avaliar as avaliaes existentes, assumindo que
11
teremos que compreender mltiplos nveis de anlise, o que estas tm em comum e diferente,
o que trazem de novidade para incidncia nas polticas pblicas.
Ainda cabe aqui destacar que no podemos deixar de lado a discusso sobre a criao
de novos mtodos e sistemas de indicadores, mesmo diante de um contexto com escasso
financiamento para pesquisas ou mesmo boicote a essas. preciso atentar que na cultura
avaliativa criada at ento no pas, passamos a fazer um uso indiscriminado, generalizado,
pouco contextualizado e muitas vezes impensado dos diversos indicadores sociais e
econmicos que foram criados e validados nos ltimos anos. Saber e decorar indicadores
passou a ser sinnimo de poder e de conhecimento em avaliao de polticas pblicas. Assim,
concordo com Boullosa (2011), ao destacar que o indicador passa a ser visto como um
construto interpretativo carregado de valores, da prpria compreenso da realidade ao qual se
debrua. Logo, devemos compreender sua natureza, os valores implcitos existentes em
qualquer sistema de indicadores e os possveis efeitos perversos destes. Destaca que estes so
artificiais (so sempre construdos e nunca colhidos), parciais, subjetivos, incertos e
interdependentes. Alm disso, os sistemas de indicadores carregam como principais valores o
progresso, a estandardizao, o controle e a aprendizagem.
Dar respostas contra-hegemnicas para demandas hegemnicas, enfim, pressupe
resistncia por parte dos avaliadores para compreender e valorizar as dimenses tica e
poltica da avaliao, bem como investir em formas alternativas para criar novos e inovadores
mtodos avaliativos que sejam difundidos e testados em diferentes contextos. preciso que
a comunidade epistmica que se debrua sobre avaliaes de polticas pblicas, as redes de
pesquisadores e demais atores estejam super alertas sobre os perigos dos usos indevidos do
ponto de vista tico, e indesejados do ponto de vista cvico, que algumas demandas avaliativas
governamentais podem causar. Assim, importante que sejam fortalecidas estratgias contra-
hegemnicas que tragam a dialogicidade e a crtica construtiva como princpios para o campo
da policy evaluation.
5. Consideraes Finais
Referncias
CARAM, B.Ministrio aponta 1,1 milho de irregularidades no Bolsa Famlia. 07 nov. 2016. Disponvel em:
http://g1.globo.com/politica/noticia/2016/11/pente-fino-encontra-11-milhao-de-irregularidades-no-bolsa-
familia-diz-ministerio.html Acesso em 20 jun. 2017
FISHER, F., FORESTER, (eds). The Argumentative Turn in Policy Analysis and Planning.
Chapel Hill, NC: Duke University Press, 1993.
KING, Jean. Research on evaluation Use and its implication for evaluating research and
_____. The methodology of evaluation. In R.E. Stake (Ed.) Curriculum Evaluation. AERA
Monograph Series on Curriculum Evaluation. v. 1. Chicago: Rand McNally, 1967.
Revista VEJA. Bolsa Famlia perdeu R$ 2,6 bilhes com fraudes . Disponvel em:
http://veja.abril.com.br/brasil/bolsa-familia-perdeu-r-26-bilhoes-com-fraudes/ , 26 mai. 2016,
Acesso em 30 jan. 2017.