Para uma Cultura da Avaliao da Cultura 1

Jos Mrcio Barros 2

I
Mais que um modismo metodolgico e gerencial, a preocupao crescente com a
avaliao no campo da cultura, e a busca de aprimoramento de seus modelos e
prticas, expressa o reconhecimento, tambm crescente, de sua importncia e
centralidade na vida contempornea. H uma correlao positiva entre o aumento das
demandas de avaliao da cultura e a sua consolidao como epicentro de novos
modelos de desenvolvimento humano. Tanto no setor pblico, governamental e nogovernamental, quanto no setor privado, emerge, mesmo que de forma ainda tmida e
heterognea, uma conscincia da necessidade de se dotar o trabalho com e na cultura,
de patamares de competncia gerencial, compatveis com sua importncia estratgica
nos campos da poltica, da economia, da educao, da sade, etc.
Entretanto, o desafio mais urgente, parece ser o de romper com a etapa apenas terica,
discursiva e ideolgica, que associa e defende a importncia da cultura para se
construir modelos de gesto abertos, dinmicos e inovadores. Ao acesso cultura
soma-se a urgncia da qualidade e da transparncia de processos e resultados, de
forma a aferir e qualificar e no apenas descrever quem, o que e como se faz cultura.
Estudos recentes realizados pelo IPEA e pelo IBGE 3 revelam que alm de problemas e
carncias nos investimentos e no consumo cultural, existem singularidades que
precisam ser melhor conhecidas de forma a garantir discernimento para intervir na
realidade cultural do pas.
H uma circularidade entre produo e utilizao de informaes no campo cultural.
Tanto a produo de informaes pr-condio para a prtica de avaliaes, quanto a
definio de modelos avaliativos adequados singularidade da cultura e ao papel
emancipatrio, condio para se alimentar bancos de dados. 4 Se as bases de dados
construdas e em construo apontam com otimismo para a possibilidade de se dotar a
cultura de informaes confiveis e objetivas, so os usos, apropriaes e
reverberaes que as pesquisas realizarem a partir delas que podero garantir a
vitalidade e o dinamismo das iniciativas.

Texto produzido a partir dos debates da mesa redonda Avaliao no Setor Cultural, realizada
no Seminrio Indicadores Culturais: debate Brasil e Espanha, promovido pelo Instituto Ita
Cultural nos dias 11 e 12 de novembro em So Paulo.
2

Professor do Programa de Ps Graduao em Comunicao da PUC Minas e Coordenador do

Observatrio da Diversidade Cultural (www.observatoriodadiversidade.org.br ).
3
Implantao do Sistema de Informaes e Indicadores Culturais, realizao da MUNIC
Suplemento Cultura, ambos do IBGE, Poltica Cultural no Brasil, 2002 - 2006: Acompanhamento
e Anlise e Economia e Poltica Cultural: acesso, emprego e financiamento, Consumo Cultural
das Famlias Brasileiras, todos realizados pelo e lanados em 2007.
4
Este desafio vem sendo enfrentado por alguns Observatrios criados pelo poder pblico
(MINC), por fundaes privadas (Observatrio Ita Cultural) e do Terceiro Setor (Observatrio da
Diversidade Cultural).

Arrisco a apresentar algumas questes de ordem conceitual e estratgica que podem

contribuir para a reflexo.
1 Avaliao um modelo de pesquisa aplicada, e s como tal pode realizar sua
funo. Avaliao desconectada de processos de deciso, no passa de um rito autoreferente e incuo.
Segundo o IPEA, BID e PNUD 5 , os anos 80 significaram para os pases da Amrica
Latina um processo de crise econmica que levou a maioria deles a implementar
polticas de estabilizao e de ajuste estrutural que incluram reformas fiscais e
financeiras e profundas revises dos papis atribudos ao Estado e aos principais atores
da cena poltico-econmica. Percebeu-se que a falta de qualidade na gesto pblica,
colocava em risco a busca pelo desenvolvimento, obrigando pases como o Brasil,
Argentina e Chile, a adotarem
novos paradigmas para o funcionamento dos aparatos do Estado,
centrados na busca permanente de maior eficcia e eficincia da gesto
pblica e em maior controlabilidade social de seus processos e resultados,
passam a dominar as estratgias de reforma administrativa. E nesse
contexto que os pases da Amrica Latina procuram realar a importncia
da avaliao das aes de governo como instrumento indispensvel para
esses novos estilos de gesto do setor pblico. (p.1)
Transpondo tais questes para o nosso campo, possvel perceber que a construo
de um novo sistema de governana da cultura demanda novos marcos polticos e
legais, especialmente, a institucionalizao com foco no cidado, tomado como sujeito
para onde deve convergir o bem pblico. A questo que emerge, no caso especfico do
Brasil, a de saber como tornar a avaliao um princpio de gesto pblica em tempos
que se reconhece a urgncia e a legitimidade de aes que promovem, de forma ampla
e horizontal, a incluso de grande parte da populao, at ento excluda das polticas
pblicas de cultura. Como articular o tempo poltico da incluso com o tempo e as
prticas de anlise crtica? Como no limitar a avaliao a rpidas anlises de
conjuntura ou acompanhamento de processo?

Alm da integrao entre produo de informaes e modelos de sua utilizao, o que a

avaliao como princpio de gesto pblica demanda sua vinculao a um
compromisso de melhoria de desempenho, sintonizando caractersticas regionais e
mundiais, s singularidades nacionais. Como isso pode ser realizado em contextos de
expressiva excluso e conseqente urgncia de participao?
Ainda segundo o IPEA, BID e o PNUD, a incorporao de sistemas de avaliao deve
fazer parte de estratgias de inovao que visem aproximar modelos de gesto pblica
dos imperativos de desenvolvimento, e estes s podem ter eficincia e adquirir
relevncia e pertinncia se
se integram ao processo de adoo de novos estilos de gesto pblica
orientados para resultados, socialmente controlados (ou dotados de
accountability), gerenciados por critrios de efetividade e eficincia e,
5

Fortalecimento da Funo Avaliao na Amrica do Sul, IPEA/MPO - BID PNUD.

por fim, direcionados para a eqidade na distribuio social de seus

benefcios.
Assim, com base nas referncias aqui utilizadas, pensar em avaliao no setor cultural
brasileiro, significaria tambm avaliar o prprio setor cultural, de forma a garantir a
avaliao simultnea de sujeitos e objetos. No Brasil, e mais especificamente no setor
pblico, isso significaria assumir o desafio de:
Superar a ausncia de sinergia entre a formulao de polticas,
desenvolvimento institucional e alocao oramentria;
Superar a fragilidade dos indicadores disponveis e a desarticulao
entre as diversas abordagens setoriais;
Superar a incipiente participao da sociedade civil no processo de
acompanhamento e avaliao;
Superar a ausncia de retorno dos resultados da avaliao ao
processo de gesto;
Integrar-se a outras iniciativas de avaliao do setor pblico. 6

2 Pensar a importncia das metodologias de avaliao no setor cultural to

importante quanto pensar uma cultura da avaliao.
Mesmo que se considere os riscos de uma institucionalizao autoritria e burocrtica
da avaliao 7 , e sua utilizao como instrumento de legitimao de prticas de censura
e dominao, preciso reconhecer que ainda falta ao setor cultural uma convivncia
cotidiana com metodologias de acompanhamento de processo e avaliao de
resultados, tanto no nvel de aes e projetos, quanto de polticas e programas. H de
se reconhecer que nos ltimos 5 anos a perspectiva da avaliao avanou
significativamente neste setor. Entretanto, parece haver um descompasso entre o
primeiro, o segundo e o terceiro setor. Se no setor pblico governamental os avanos
so visveis, no setor privado e no-governamental as perspectivas so menos otimistas
e as experincias ainda tmidas.
Em 2003, por exemplo, quando do incio do primeiro governo do Presidente Lula, o
Ministrio da Cultura realizou vrios seminrios em diferentes capitais intitulados
Cultura para todos, envolvendo diversos segmentos profissionais, institucionais e
culturais implicados com as polticas culturais para se discutir o modelo de
financiamento pblico da cultura 8 . Seu objetivo era
Promover um amplo debate com artistas, produtores e gestores culturais
a fim de obter subsdios para a proposio de um novo modelo de
6

IPEA, BID, PNUD, op. Cit.

compreensvel e correto o alerta que Albino Rubin faz sobre as experincias de avaliao no
mbito das universidades pblicas brasileiras. Comentrio realizado no Seminrio Indicadores
Culturais: debate Brasil e Espanha, promovido pelo Instituto Ita Cultural nos dias 11 e 12 de
novembro em So Paulo.
8
Relatrio Seminrio Cultura para Todos, MINC, Julho, 2003.
7

financiamento pblico da cultura, capaz de incorporar outros mecanismos

de apoio financeiro e renovar os j existentes. O propsito obter um
modelo construdo de forma participativa que atenda aos requisitos
desejados de transparncia, descentralizao e democracia e que
aponte caminhos de auto sustentabilidade de parte significativa da
produo cultural brasileira. (p.4)
Curiosamente, se consultarmos o relatrio final da etapa de Belo Horizonte, que reuniu
centenas de pessoas, encontraremos uma nica citao sobre a avaliao no sentido
aqui debatido. 9 Todas as demais citaes referiam-se exclusivamente composio da
comisso de avaliao da Lei Rouanet e ao acompanhamento da tramitao do
andamento do processo pela internet. Em outros seminrios, que reuniram investidores
pblicos (estatais) e privados, tambm houve omisso em relao questo da
avaliao, restringindo a questo avaliao de quota de fundo, avaliao de
investimento e do plano de negcios.
Tais seminrios, realizados como fruns de discusso e debate, levantamento de
demandas e sugestes para um incio de governo, foram alados condio de
metodologia de avaliao, apesar de em seu contedo a prpria questo de um sistema
de acompanhamento e avaliao, ter sido secundarizada ou esquecida. 10
J em 2005, quando da realizao da Conferncia Nacional de Cultura 11 , a questo da
avaliao mereceu referncias mais precisas que culminaram na sua eleio entre as
30 prioridades:
21. Criar e implementar um sistema nacional de informaes culturais,
estruturado em rede, para gerar indicadores que orientem a
elaborao, implementao e avaliao das polticas pblicas de
cultura numa perspectiva da transversalidade. (p. 4)
importante ressaltar que aqui a avaliao foi pensada como decorrncia da
construo de um sistema de informaes e indicadores e sua perspectiva a da
transversalidade.
J no Plano Nacional de Cultura, imperativo constitucional que comea a sair do papel e
se transformar em realidade, reserva-se uma ateno muito significativa questo da
avaliao, reconhecendo sua importncia para a efetivao do futuro Sistema Nacional
de Cultura e uma das principais atividades do Conselho Nacional de Polticas Culturais.
Segundo o texto do Plano,
Normas e diretrizes no devem ser apenas relatos de boas intenes,
mas suportes para a ao efetiva, traduzida na implementao de
9

Se o recurso financeiro advm do pblico, a este a lei deve priorizar o atendimento e para
tanto se torna necessrio uma avaliao de resultados dos projetos realizados. Instituir a
avaliao ps-projeto na prestao de contas, e ser um dos parmetros para uma poltica
cultural (proposta apresentada por escrito pelo arte educador mineiro Elias Rodrigues de
Oliveira).
10
O texto do Plano Nacional de Cultura, refere-se a estes seminrios como incio de uma
participao dos cidados na avaliao e direcionamento (p.16).
11
Relatrio Final da Conferncia Nacional de Cultura, MINC, 2007.

polticas pblicas com metas definidas e requisitos de eficincia,

eficcia e efetividade, monitorados pelas instituies pblicas e a
sociedade.
O funcionamento do sistema deve considerar a dinmica complexa dos
fenmenos culturais que no podem ser planejados pelo Estado. Por
outro lado, necessrio garantir que esteja atento no s s aes do
prprio Plano Nacional de Cultura, como tambm quelas que sero
executadas em consonncia com os Planos Estaduais e Municipais,
refletindo o pacto federativo a ser construdo em torno dos objetivos,
prioridades, diretrizes e metas das polticas pblicas de cultura. A
implantao e o desenvolvimento desse sistema dependero, portanto,
da coordenao das atribuies exercidas pelos respectivos rgos
responsveis pela cultura, em cada Estado e em cada Municpio, e
acompanhadas pelos espaos colegiados de participao
social. Desse modo, a consolidao do Sistema de Acompanhamento e
Avaliao do PNC ter entre os seus desafios a organizao de uma
rede cooperativa de instituies e agentes envolvidos com o tema.
(Plano Nacional de Cultura, Diretrizes Gerais, 2007, p.25).
importante, ainda, ressaltar que a criao do Comit de Patrocnio das empresas
Estatais, deve ser considerada no apenas como um esforo na otimizao dos
investimentos de patrocnio, mas como um avano na questo da avaliao no setor
pblico.
J no setor privado, a despeito do crescente investimento em cultura, poucas so as
empresas que alm de critrios de seleo de projetos que associam desenvolvimento
scio-cultural e imagem institucional, desenvolvem sistemticas de avaliao e
acompanhamento.
De acordo com Aurio Lcio Leocdio e Renato Marchetti 12 , as empresas parecem muito
mais preocupadas com uma abordagem quantitativa e de retorno direto de imagem do
que com a qualidade cultural dos patrocinados e os resultados a mdio e longo prazo.
Alm disso, um outro ponto comum a quase informalidade total do processo de
avaliao de impacto de investimento cultural por parte das empresas.
A Petrobrs, por exemplo, exige que o patrocinado fornea, no encerramento de cada
projeto, um relatrio informando a quantidade de pblico presente a cada evento e
clipping resultante de cada projeto, para que se visualize a exposio que o projeto
patrocinado teve na mdia e o que obteve de mdia espontnea.
Empresas como a Pirelli e o Banco Real no exigem nenhum relatrio ao final do
evento, contentando-se com algumas informaes fornecidas informalmente pelo

12 LEOCADIO, urio Lcio & MARCHETTI, Renato. Marketing cultural: critrios de avaliao utilizados pelas empresas patrocinadoras. So Paulo:
Ed. Do autor, 2003

produtor do projeto patrocinado, especialmente no que se refere quantidade de

pblico e um relato de depoimentos coletados pelos prprios patrocinados.
O estudo dos autores demonstra que as empresas no avaliam os resultados do
patrocnio cultural com a devida abrangncia e que outros recursos de avaliao, como
a pesquisa de recall e de imagem, somente ocorrem em projetos que tenham exigido
um considervel valor de investimento e, mesmo assim, em casos especficos. O
clipping o critrio de avaliao comumente utilizado, bem como relatrios formais.
Depoimentos do pblico, coletados informalmente, tm sido considerados como critrio
confivel, apesar da inexistncia de procedimentos formalizados. A qualidade dos
projetos patrocinados e a identificao do pblico com o projeto, se configuram como o
principal vnculo constatado pelas empresas, apesar da inexistncia de pesquisa que
confirme esse vnculo.
A criao do Frum de Investidores Privados em Cultura, coordenado pelo GIFE, em
2007, representa uma tentativa de aprimoramento de critrios de escolha de patrocnios
e uma busca de integrao de polticas de patrocnio.
Quanto s organizaes no-governamentais, arriscaria a afirmar que aqui parece
ainda valer a idia de que, dadas as carncias culturais de boa parte da populao, as
boas intenes que o idealismo cultural carrega, se mostram suficientes para oferecer
um salvo conduto para os meios e fins. A avaliao ainda no tratada como uma
questo de valores que alimentam prticas e que pode se transformar em uma questo
poltica de visibilizao, crtica e transformao.
Assim, para alm da superao do abismo que separa estes trs atores do cenrio
cultural brasileiro, ainda h muito o que fazer para traduzir a cultura da avaliao como
uma postura de produo de informaes, construo de indicadores e descritores que,
se realizada de forma contnua e permanente, pode evitar a descontinuidade que torna
incua a aplicabilidade de seus resultados. Avaliao no o que se faz de quando em
vez em funo de exigncias conjunturais. Avaliao no a simples compilao de
discursos em eventos democrticos. um processo de circularidade ativa, num
contnuo que alimenta e se alimenta, institui e institudo.
3 Avaliao no se constitui como a descoberta linear de uma nica verdade.
As tpicas e velhas perguntas do tipo, quem? o que? porque?, para que?, para quem?,
como? por quanto tempo?, que se configuram como perguntas permanentes para que
saibamos definir tipologias metodolgicas, so tambm pr requisitos para que se
defina se desencadeamos um processo de confronto de ticas e perspectivas, ou se
nos contentamos com consensos e imposies. A confiabilidade do processo para alm
do acerto metodolgico e de sua aplicabilidade, est tambm relacionada ao que e a
quem consegue mobilizar. Quanto mais interdisciplinar e totalizante, quanto mais tica,
aberta e horizontal, mais a avaliao poder, efetivamente oferecer elementos que
definem, quantificam e qualificam, mas que no eliminam as pluralidades de
apropriao e leitura.
Ao defender uma cultura da avaliao, com todos os cuidados e radicalidades
necessrias, penso ser necessrio considerar que, como prtica metodolgica e

poltica, a avaliao no deve se furtar ao complexo mas necessrio embate com a

questo da diversidade. Ou seja, com a realidade de que aes, projetos, programas e
polticas culturais so mobilizados por sujeitos e instituies que possuem valores
culturais que tanto tm o sentido da universalidade, quanto so a expresso de
singularidades.
Considerar a diversidade em processos de avaliao, mais do que pensar em pesos e
medidas diferentes, ou de reduzi-la a um mosaico de diferentes opinies, significaria
construir variveis e indicadores que pudessem dar conta da diversidade de formas e
possibilidades de apropriao, uso e significao de bens e servios culturais. Se
admitirmos que so diferentes os sujeitos que acionam nossos projetos e aes
culturais e que tambm so plurais os que deles se apropriam e fazem uso, uma
avaliao que respeite e se alimente da diversidade dever ser, necessariamente, uma
avaliao colaborativa. Seus objetivos, para alm da mensurao e comparao de
resultados, devem ser o de compreenso, aprendizagem, deciso e comprometimento.
Aqui variveis tnicas, de gnero, sociais, polticas, no devem compor apenas um
perfil demogrfico de entrevistados, mas oferecer diferentes possibilidades de
compreenso de uma realidade polissmica. Neste caso, poderamos dizer que a
avaliao assume o papel de mediao.