Você está na página 1de 34

issn

0034-7612

Avaliao de projetos sociais em ONGs da Grande


Florianpolis: um estudo sobre modelos relacionados
ao foco de atuao*
Jairo Jos Assumpo**
Lucila Maria de Souza Campos***

S u m r i o : 1. Introduo; 2. O campo terceiro setor e as organizaes no governamentais (ONGS); 3. Avaliaes em projetos sociais; 4. Os modelos tericos de
avaliao; 5. Metodologia e anlise dos dados; 6. Consideraes finais.
S u m m a ry : 1. Introduction; 2. The third sector field and nongovernmental organizations (NGOs); 3. Theoretical models of evaluation; 4. Methodology and data
analysis; 5. Final remarks.
P a l av r a s - c h av e : avaliao; modelos de avaliaes; terceiro setor.
Key

words:

evaluation; models of evaluation; third sector.

Este artigo tem como objetivo compreender como os modelos de avaliao de projetos
sociais em cinco ONGs da Grande Florianpolis so influenciados em decorrncia
de sua matriz ideolgica e natureza do foco de sua atuao. Com experincia e aplicabilidade no campo educacional, tais modelos esto sendo adaptados e utilizados

* Artigo recebido em jun. 2009 e aceito em out. 2010.


** Mestre em administrao pela Univerisdade do Vale do Itaja (Univali). Graduado em administrao com especializao em gesto empresarial pela Faculdade Estcio de S e coordenador
e professor do Curso de Administrao da Faculdade do Litoral Catarinense (FLC), Sociedade
Educacional de Santa Catarina (Sociesc). Endereo: Universidade do Vale do Itaja (Univali).
Programa de Ps-Graduao em Administrao (PPGA). Rua Fulvio Vieira da Rosa, 42 Barreiros
CEP 88117-750, So Jos, SC, Brasil. E-mail: jairo.jose@sociesc.org.br.
*** Doutora e mestre em engenharia de produo pela Universidade Federal de Santa Catarina
(UFSC). Graduada em engenharia de produo pela Universidade Federal de So Carlos (UFSCar).
Professora adjunta do Departamento de Engenharia de Produo e Sistemas (EPS) e do Programa de Ps-Graduao em Engenharia de Produo (PPGEP) da UFSC. Endereo: Universidade
Federal de Santa Catarina (UFSC). Programa de Ps-Graduao em Engenharia de Produo
(PPGEP). Campus Universitrio Trindade CEP 88040-900, Florianpolis, SC, Brasil. E-mail:
lucila@deps.ufsc.br.

rap Rio de Janeiro 45(1):209-42, jan./fev. 2011

210

Jairo Jos Assumpo Lucila Maria de Souza Campos

em avaliaes de projetos sociais. Assim, para se atingir este objetivo, buscou-se


inicialmente identificar o campo reconhecido como terceiro setor e sua realidade
formal, para depois apresentar os conceitos de ONGs e a evoluo das avaliaes em
projetos sociais. Os diversos modelos de avaliaes foram agrupados em abordagens
similares em decorrncia de sua atribuio de valor, fontes filosficas e ideolgicas,
bem como predilees metodolgicas. A presente pesquisa caracteriza-se como qualitativa, utilizando como estratgia de campo o estudo de caso, do tipo interpretativo
que utilizou categorias conceituais, do tipo fechadas, e a anlise de contedo como
tcnica de anlise dos dados. Os resultados apontam para a constatao de que os
modelos avaliativos so influenciados pela natureza de atuao das ONGs estudadas,
por crenas filosficas e ideolgicas e predilees metodolgicas.
An evaluation of social projects in Greater Florianpolis NGOs: a study on
models that relate to the work focus
The objective of this article is to understand how ideology influences models of
evaluation used in social projects carried out by five NGOs in the city of Greater
Florianpolis. With application in the field of education, these models are being
adapted and used in evaluations for social projects. In order to understand how
ideological assumption influence NGO evaluation, we initially sought to identify
the area known as the third sector in order to later present the concepts by which
NGOs evaluate social projects. The different models of evaluation were grouped
according to the similarity of their values, their philosophical and ideological
sources, and also their methodological approaches. The present study is qualitative in character, using case studies, interpretive strategies that use conceptual
categories of the closed kind, and with a technique of data analysis that involves
content analysis. Our results show that the evaluative models used by the NGOs
we studied are influenced by their philosophical beliefs, ideologies, and methodological approaches.

1. Introduo
Existe uma tendncia de crescimento da atuao das ONGs no cenrio brasileiro, e isso se reflete diretamente na temtica de estabelecer a amplitude de
ao de tais entidades, bem como estabelecer critrios de avaliao da ao e
do investimento social realizado. Esse crescimento ocasionou uma amplitude
de atuao no tempo e no espao, impreciso do termo e contradies entre
as diversas maneiras de atuar, causando diversas polmicas em funo do
enquadramento de aes e confuses sobre a natureza dessas aes (Alves,
2002; Vergara e Ferreira, 2005). Por outro lado, tais aes, que so reconhecidas como extenses dos objetivos do Estado, teoricamente, nesse contexto de
ONGs, podem ser realizadas de forma mais dinmica, eficiente e flexvel, pois
rap Rio de Janeiro 45(1):209-42, jan./fev. 2011

Avaliao de projetos sociais em ONGs da Grande Florianpolis

211

a princpio no esto atreladas a um aparato burocrtico esttico, ineficiente


e inflexvel (Alves, 2002; Montao, 2007).
Assim, emergem questes como: qual a diferena entre ONGs, institutos
e fundaes? Existem diferenas no ordenamento jurdico dessas organizaes? Existem diferenas entre aes assistencialistas, beneficentes, filantrpicas ou voluntrias? Seus fins esto atrelados a ideologias (em Marx) ou o foco
so os excludos e necessitados? A natureza de suas aes de carter social
e, com isso, pblica, ou tem caractersticas associativistas e cooperativistas?
Como avaliar as intervenes sociais realizadas? Entre essas e outras questes
que aparecem evidencia-se a dificuldade de sistematizao e classificao do
tipo de avaliao utilizada intrigando diversos cientistas e abrindo uma gama
de discusso, com o objetivo de se tentar estabelecer similaridades entre a
organizao, a ao, a natureza dessa ao e os fins a que se prope. Como
se no bastasse, abre-se ainda outra dificuldade alm daquela objeto da ao:
a prpria complexidade do processo de avaliar a amplitude da ao. Tal dificuldade, porm, ampliada ao se tentar estabelecer critrios para avaliar e
monitorar o processo e o resultado de tais intervenes.
Nesse contexto, a gesto das organizaes do terceiro setor (neste caso,
mais especificamente, as ONGs), emerge como tema de alta relevncia, no sentido de se compreender como os processos de gesto influenciam sua maneira de
ser, atuar e modificar a realidade social da comunidade em que esto inseridas.
Da mesma forma, compreender como as mesmas processam suas atividades de
monitoramento e avaliao, considerando critrios de retorno social e de racionalidade operacional, constitui-se tema incipiente nas agendas de estudos acadmicos. Em funo do exposto, surge a seguinte questo de pesquisa: como os
modelos avaliativos, em cinco ONGs da Grande Florianpolis, so influenciados
pela matriz ideolgica e natureza do foco de sua atuao?
Para responder pergunta e consequentemente se atingir o objetivo geral da pesquisa, foi necessrio identificar como referncias tericas disponveis
a evoluo do terceiro setor, o que se conhece por ONGs, bem como os modelos de avaliao sob a tica da lgica instrumental e substantiva. Nesse contexto, o tema pode ser estudado sobre trs eixos de anlise: o primeiro, relativo
ao surgimento do terceiro setor como contraponto ao modelo poltico de Es-

Ideologia em Karl Marx: conjunto de ideias presentes nos mbitos terico, cultural e institucional das sociedades, que se caracteriza por ignorar a sua origem materialista nas necessidades e
interesses inerentes s relaes econmicas de produo, e, portanto, termina por beneficiar as
classes sociais dominantes (Houaiss, 2001).


rap Rio de Janeiro 45(1):209-42, jan./fev. 2011

212

Jairo Jos Assumpo Lucila Maria de Souza Campos

tado reinante e sua consequente terceirizao das questes sociais, atrelada


condio de financiamentos por meio das parcerias, reforando a necessidade
de sistemticas avaliaes. O segundo, ligado s questes ideolgicas como
elementos motivadores ou restringentes de suas aes e assim facilitando ou
dificultando os processos de avaliao. Finalmente, em relao legitimidade
das atividades e, com isso, atrelado aos processos de gesto (considerando-se
os mecanismos de avaliao e monitoramento) para garantir a efetividade de
suas aes e com isso influenciando o modelo de avaliao adotado.
Nos trs eixos citados, a relevncia da atividade de avaliao se estabelece em funo da necessidade de se conhecer o contraponto entre a preservao de valores como autonomia, cooperao e solidariedade e a busca por
padres cada vez mais exigidos de eficincia, eficcia e efetividade.
Portanto, o presente artigo apresenta, alm desta introduo, um segundo tpico que traz uma discusso a respeito do campo terceiro setor e as
organizaes no governamentais (ONGs), apresentando uma tipologia em
que organiza os tipos de ONGs em cinco conjuntos que se diferenciam em
funo do seu discurso, natureza e caractersticas de atuao. O terceiro tpico apresenta o tema avaliao, bem como as bases ideolgicas, predilees
metodolgicas e atribuio de valor que norteiam os processos de avaliaes
em projetos sociais. O quarto tpico identifica os principais modelos referenciados na literatura, os quais so agrupados em seis abordagens que norteiam
tais modelos em funo de suas bases ideolgicas, predilees metodolgicas
e atribuio de valor. O quinto tpico expe a anlise e discusso dos dados
para, no sexto, apresentarem-se as concluses do artigo.

2. O campo terceiro setor e as organizaes no governamentais


(ONGs)
Um conceito de entidades do setor no lucrativo aquele que se origina a
partir de um modelo de sociedade que se reconhece como veculo de protestos contra as elites dominantes que atuavam tanto na esfera poltica como na
econmica. Esses movimentos sociais, entre as dcadas de 1970 e 1980, se

Ideologia: Sistema de ideias (crenas, tradies, princpios e mitos) interdependentes, sustentadas por um grupo social de qualquer natureza ou dimenso, as quais refletem, racionalizam e
defendem os prprios interesses e compromissos institucionais, sejam estes morais, religiosos,
polticos ou econmicos (Houaiss, 2001).


rap Rio de Janeiro 45(1):209-42, jan./fev. 2011

Avaliao de projetos sociais em ONGs da Grande Florianpolis

213

caracterizaram por uma atuao dirigida contra o Estado, principalmente em


contextos ditatoriais como no Brasil daquela poca. A partir desses movimentos que nasceu o que conhecemos hoje por organizaes no governamentais (ONGs). Sob essa tica, o setor sem fins lucrativos se formaliza por meio
de um conjunto de organizaes destinadas a emponderar as pessoas perseguidas, excludas e desfavorecidas e, por conseguinte, alterar o equilbrio de
poder social dominante (Anheier e Sibel, 2001; Salamon, 2006).
Essas entidades no governamentais surgidas com o objetivo de organizar, participar e articular aes de reivindicaes e lutas sociais se descaracterizaram, a partir do final da dcada de 1980, em funo do movimento
democrtico que se instalou, mais especificamente no Brasil. Assim, hoje so
reconhecidas como organizaes da sociedade civil que assumem funes de
respostas s demandas sociais a partir de valores como solidariedade local,
autoajuda e ajuda mtua (Montao, 2007:184). Em funo dessa mudana,
tais organizaes passaram a agir com mais autonomia e hoje atuam menos
politizadas e mais empresariais, buscando defender suas prprias pautas sociais objetivando legitimar-se no espao pblico, tendo como fonte de recursos
o autofinanciamento ou o estabelecimento de parcerias com o ooder pblico
e/ou a iniciativa privada. Conforme Montao (2007:146), a chamada parceria nada mais do que, seno, o repasse de verbas e fundos pblicos para
instncias privadas, substituindo o movimento social pela ONG.
Em lugar das organizaes do Estado (burocrtico e ineficiente) ou do
mercado (lucrativo) para responder s demandas sociais, as organizaes da
sociedade civil assumem essa tarefa. Assim, em uma sociedade que possui trs
categorias de cidados: consumidores de servios mercantilizados; usurios
de servios estatais; excludos e assistidos pela caridade e filantropia (Montao, 2007:198), cabe sociedade civil se mobilizar para atender a ltima
das trs categorias de cidados. Essa alterao no cenrio poltico estabeleceu
duas mudanas significativas: a) de movimentos sociais anteriores, para ONGs
que encarnam mais uma lgica gerencial e empresarial, pois esto articulados com o Estado e o capital privado, ambos provedores de recursos; b) de
militantes no passado para voluntarismo e altrusmo, por meio da autorresponsabilizao do cidado e da comunidade local para executar relevantes
aes de carter social. Logo, aquela lgica de emancipao do homem e do
cidado que deu origem aos movimentos sociais na dcada de 1970 originou
um enfoque de busca pela eficincia ao focar clientes, metas, ou alvos a serem
atingidos (Tenrio, 2004).
Na realidade, trata-se de organizaes sem fins lucrativos que operam
servios destinados a aliviar os sintomas de desigualdades, objetivando merap Rio de Janeiro 45(1):209-42, jan./fev. 2011

214

Jairo Jos Assumpo Lucila Maria de Souza Campos

lhorar as condies sociais, e ao mesmo tempo mantm intactas as fontes


dessa desigualdade em funo de sua dependncia de recursos, do agir localmente e do complexo campo de atuao (Anheier e Sibel, 2001; Salamon,
2006). Portanto, o foco da ao dessas organizaes e/ou grupos de cidados
objetiva prover desenvolvimento econmico, reduzir a pobreza, promover os
direitos civis e defender interesses sociais e de grupos especficos. Essas quatro
caractersticas de atuao num espao social reconhecido como terceiro setor,
atreladas aos princpios filosficos que regulam suas aes, possibilitam uma
anlise mais aprofundada em relao ao tipo de atividade que se opera. Nesse
sentido as organizaes que atuam nesse campo so essencialmente independentes de governo e de empresas privadas, embora possam relacionar-se com
ambos. Apesar de tambm englobar aes solidrias e atividades pontuais e
informais, em termos gerais e formais, o terceiro setor um espao constitudo
pelo conjunto de entidades privadas, sem fins lucrativos, que realizam atividades complementares s pblicas, objetivando prover solues para problemas
sociais em prol do bem comum (United Nations, 2003).
Tais atividades, quando operadas por entidades que tenham alguma
realidade institucional, tm em comum seis caractersticas que as distinguem
das organizaes privadas e do Estado, a saber: a) so formalmente constitudas; b) no tm fins lucrativos e, por lei ou costume, no distribuem qualquer
excedente que possa ser gerado para seus donos ou controladores; c) so institucionalmente separadas do governo; d) so autogeridas; e e) no compulsrias (Salamon e Anheier, 1997; United Nation, 2003).
Assim, so formalmente constitudas ao possurem uma realidade institucional. No possuem fins lucrativos, pois no existem primordialmente para
gerar lucros, e no so dirigidas primordialmente por metas e consideraes
comerciais. Ou seja, podem acumular excedentes em um certo ano, mas esse
excedente deve ser investido de volta na misso bsica da instituio, teoricamente, no sendo distribudos para os donos, fundadores, membros ou seus
conselheiros. So separadas do Estado, pois no fazem parte do aparato governamental e no exercem autoridade governamental em seu benefcio. So
autogeridas, pois so capazes de controlar suas prprias atividades e no esto
sob o controle efetivo de qualquer outra entidade, tendo, assim, capacidade
de governana e estrutura prpria. E, finalmente, no so compulsrias, pois
sua filiao, contribuio de tempo e dinheiro no so requeridas ou obrigatrias por lei e nem fazem parte da condio de cidadania (United Nations,
2003). Isso inclui, portanto, congregaes religiosas, universidades, hospitais,
museus, grupos de direitos civis que abrigam excludos, sindicatos, partidos
polticos e organizaes ambientais, entre outras. Tais entidades so criadas a
rap Rio de Janeiro 45(1):209-42, jan./fev. 2011

Avaliao de projetos sociais em ONGs da Grande Florianpolis

215

partir de novos movimentos sociais ou por apoio de grupos e entidades ligadas


a movimentos sociais, Igrejas e so mantidas por meio de financiamento de
suas atividades, repasse de recursos privados e/ou pblicos e/ou de recursos
de cooperao internacional.
Nesse contexto, conforme Andion (2007), destacam-se cinco conjuntos
de ONGs que se diferenciam em funo do seu discurso, natureza e caractersticas de atuao. Primeiramente o que a autora chamou de ONGS histricas e
de assessorias aos movimentos sociais, vinculadas s transformaes sociais
como construo de uma nova hegemonia por meio de uma mudana tica
que altere o comportamento individual e coletivo (Andion, 2007:128). Nesse
conjunto prevalecem relaes estreitas com os movimentos afirmativos.
Um segundo conjunto formado por um grupo de ONGs que a autora
denominou de ONGs mais recentes e ligadas aos novos movimentos sociais. Nesse conjunto prevalecem relaes estreitas com os movimentos afirmativos, sendo que, enquanto as de assessorias tm um papel de apoio aos
movimentos populares, as mais recentes esto ligadas aos novos movimentos
sociais (direitos de excludos, ambientalistas, feministas, AIDS, entre outros).
Segundo a autora esses vnculos se traduzem por uma no separao entre os
movimentos e as organizaes (Andion, 2007:128).
O terceiro conjunto formado por um grupo de ONGs que a autora
denominou de mais recentes formados por tcnicos. Tais entidades so criadas por tcnicos vinculados ao setor privado, s universidades ou ainda ao setor pblico, visando responder a uma questo social, cultural, econmica ou
ambiental particular (Andion, 2007:128), por meio da prestao de servios,
objetivando prover a insero profissional para resolver questes socioeconmicas, bem como atuar em reas como sade, educao, social, cultura e
esporte. Seu foco de atuao tem uma caracterstica muito forte de consultoria
e so pautadas por uma profunda profissionalizao das intervenes e articulao com as esferas empresariais, entidades sociais e setor pblico.
muito similar lgica de atuao desse grupo um quarto conjunto
de ONGs, ligadas s empresas e caracterizadas como fundaes e institutos
ligados ao investimento social. Sua natureza e caractersticas de atuao so
muito parecidas com o conjunto anterior, diferenciando-se apenas na natureza e gnese de sua criao, pois normalmente emergem de iniciativas ligadas
somente ao setor privado, tendo uma atuao apoltica, com nfase na ao
cvica e no voluntariado. Nesse grupo esto inseridas aquelas entidades que
atuam com um conceito recente no pas, mas que existe em mais de 46 pases
do mundo. O conceito de fundaes comunitrias baseado na constituio
de fundos que financiam outras entidades que atuam diretamente na execuo
dos projetos. Possui quatro premissas essenciais: a) base territorial definida;

rap Rio de Janeiro 45(1):209-42, jan./fev. 2011

216

Jairo Jos Assumpo Lucila Maria de Souza Campos

b) apoio financeiro e tcnico s organizaes sociais locais (Grant-making); c)


mobilizao de uma ampla gama de investidores sociais fortalecimento de
redes sociais; e) existncia de mecanismo de sustentabilidades por meio de
fundos permanentes (Dellagnelo, 2006). Portanto, so institutos que, apesar
de no estarem vinculados diretamente s empresas, atuam de forma dependente delas e de entidades de financiamento internacional para fazerem face
a seus objetivos primordiais. Assim, estas caractersticas possibilitam que tais
entidades sejam criadas por grupos que querem viabilizar projetos sociais e
que no possuem a capacidade ou interesse em criar uma fundao privada. Conforme Cleland e Ireland (2000), uma forma de incluir em projetos
sociais pessoas que no teriam dinheiro suficiente para criar uma fundao
privada, o que requer muito dinheiro e envolve muita burocracia.
Finalmente, a autora identifica um quinto grupo de ONGs com atuao caracterizada pela caridade, por meio de intervenes assistenciais como
forma de prover insumos e servios que atendam s necessidades de pobres e
excludos. A esse grupo, Andion (2007) denomina de organizaes filantrpicas. Essa tipologia de agrupamento de ONGs conforme sua caracterstica e
natureza est representada de forma resumida pela figura 1 deste estudo.
Figura 1

Principais grupos de ONGs, suas principais caractersticas e exemplos de


atuao

Histricas ou de
assessoria
Atuao junto aos
grupos populares
de base; Apoio
aos grupos
desfavorecidos;
Atuao
tradicionalmente
questionadora do
sistema capitalista
e do Estado.

Histricas e
ligadas aos novos
movimentos sociais

Mais recentes
e formadas por
tcnicos

Mais recentes
e ligadas ao
investimento
social privado

No separao
entre organizao e
movimento;

Atuao tcnica,
acima do poltico;

Atuao
apoltica;

nfase na
articulao e
parcerias;

nfase na ao
cvica e no
voluntariado;

Apoiadas
pelo Estado,
setor privado
e cooperao
internacional.

Apoiadas
pelo setor
empresarial.

Afirmao
de mltiplas
identidades coletivas
pluralidade;
Apoiadas pela
cooperao
empresarial, pelo
Estado e pelo setor
empresarial.

Filantrpicas
Atuao ligada
assistncia
aos pobres
e excludos,
vinculada ideia
de caridade;
Apoiadas pela
Igreja, pelas
prprias famlias,
pelo Estado
e pelo setor
empresarial.

Fonte: Adaptado de Andion (2007:133).

rap Rio de Janeiro 45(1):209-42, jan./fev. 2011

Avaliao de projetos sociais em ONGs da Grande Florianpolis

217

3. Avaliaes em projetos sociais


A avaliao em projetos sociais amplamente debatida e pouco aplicada em
sua essncia. Quando aplicada, limita-se a controlar investimentos financeiros
realizados ou simplesmente servir como relatrio das atividades desenvolvidas, no refletindo em efetividade para atribuir valor ou mrito da ao social.
Agrava-se ainda mais a situao ao se constatar a falta de amplo material que
ajude, de forma aprofundada e didtica, os atores sociais a desempenhar suas
funes. Esse papel da avaliao nos remete, principalmente, s predilees
metodolgicas distintas em que a mesma se assenta quando realizada. Os aspectos considerados relevantes ao se avaliar uma interveno social devem ir
alm daqueles considerados importantes sob a lgica da objetividade: economia, eficincia e eficcia.
Outros aspectos como equidade, participao, emponderamento, advocacy e impacto da interveno tornam o exerccio da avaliao mais desafiadora. Por exemplo, enquanto um pr-requisito para uma abordagem sistemtica de avaliao com foco em economia, eficincia e eficcia estabelecer
as relaes entre custo e consequncias, um pr-requisito para avaliao de
impacto a qualidade da interveno social e o nvel de emponderamento
obtido em mdio e longo prazo. Essas divergentes vises da avaliao resultaram em uma diversidade de modelos, pois os mesmos so derivados de crenas filosficas e ideolgicas; predilees metodolgicas distintas; atribuio de
valor, opes prticas do avaliador e vnculos e interesses de clientes. Quanto
s crenas filosficas e ideolgicas, Baker e Niemi (1996) sugerem que existem quatro fontes distintas em que se baseia o pensamento sobre a avaliao:
experimentao, mensurao, anlise sistmica e abordagens interpretativas
(Worthen, Sanders e Fitzpatrick, 2004:106). A experimentao baseada na
aleatorizao, meticulosa ateno unidade de anlise e testes estatsticos. A
mensurao pressupe mecanismos de medidas comportamentais que produziro nmeros que formaro a evidncia da efetividade do objeto avaliado. A
anlise sistmica busca a inter-relao de inmeras variveis objetivando a
tomada de deciso mais adequada. E, finalmente, a abordagem interpretativa
caracterizada pela utilizao da hermenutica e de teorias interpretativas

Advocacy: definido como a ao de ONGs e grupos especficos voltada luta por mudanas nas
polticas e prticas para o benefcio de determinados grupos de pessoas, ou ainda como o uso
estratgico das informaes para democratizar as relaes desiguais de poder e para melhorar a
condio daqueles que vivem na pobreza ou que so discriminados de diversas formas (Roche,
2002:231).


rap Rio de Janeiro 45(1):209-42, jan./fev. 2011

218

Jairo Jos Assumpo Lucila Maria de Souza Campos

para gerar julgamentos holsticos e de alta complexidade, por meio de metodologias alternativas de coleta e interpretao de dados (Worthen, Sanders e
Fitzpatrick, 2004).
Essas fontes filosficas e ideolgicas podem ser caracterizadas conforme
duas vertentes conceituais. Por um lado, Rebollo Cataln (1993:39) agrupouas em trs tipos de modelos: objetivista, subjetivista e crtico. Os autores
afirmam que os modelos crticos ainda no esto suficientemente desenvolvidos e conceituam-no como sendo um processo de recolha de informaes
que fomenta a reflexo crtica dos processos e conduz a tomadas de deciso
pertinentes em cada situao especfica. Logo, com conotao de papel formativo muito forte. Neste estudo, a anlise de um modelo crtico foi incorporada nos modelos subjetivistas, pois, conforme Tenrio (2004:47), as teorias
em cincias humanas so objetificantes; as teorias crticas so reflexivas [...]
e o pesquisador sempre parte do objeto que estuda, principalmente se esse
objeto social. Seguindo esta orientao, House (1983) cunhou apenas duas
categorias, incorporando o modelo crtico aos modelos subjetivistas.
Assim, os modelos caracterizados como objetivistas requerem que as
informaes avaliatrias sejam cientificamente objetivas (House, 1983; Rebollo Cataln, 1993), ou seja, que usem tcnicas de coleta e anlise de dados e
que forneam resultados gerados por testes estatsticos, assegurando com isso
o rigor cientfico e possibilitando a sua verificao e reproduo. So modelos
objetivistas de avaliao aqueles que buscam determinar de forma causal e
utilitria o que acontece com o objeto avaliado.
Na extremidade oposta s avaliaes objetivistas, esto as avaliaes
com abordagens pluralistas que se baseiam no conceito de que o valor depende do impacto da interveno sobre cada cidado, individualmente, portanto, com uma concepo subjetivista para alcanar a compreenso dos impactos ocasionados. Assim, o maior bem possvel requer que se d ateno
aos benefcios recebidos por cada indivduo (Worthen, Sanders e Fitzpatrick,
2004:109). Para House (1983:50), o critrio final do que bom e certo definido pelos sentimentos ou apreenses individuais de cada participante.
Assim, os modelos subjetivistas esto preocupados em compreender o
objeto avaliado por meio das percepes, da relevncia, da formao e das
qualificaes do avaliador. Enquanto os modelos objetivistas possuem procedimentos externalizados, os modelos subjetivistas lidam com percepes internalizadas, portanto de difcil reproduo (House, 1983). O grande debate
que se constitui entre estas duas vertentes de modelo est ligado, de um lado,
questo da reproduo dos modelos objetivistas que possibilitam a determinao factual e, de outro, experincia acumulada pelo avaliador, que possirap Rio de Janeiro 45(1):209-42, jan./fev. 2011

Avaliao de projetos sociais em ONGs da Grande Florianpolis

219

bilita compreender, de forma complexa, o objeto avaliado. Portanto, enquanto


os modelos objetivistas possuem procedimentos externalizados, os modelos
subjetivistas lidam com percepes internalizadas, de difcil reproduo.
Alm disso, conforme a crena filosfica e ideolgica dos avaliadores,
pode-se estabelecer uma relao em funo da atribuio de valores de uma
avaliao. Nesse sentido, conforme House, (1983:49), existe uma distino relacionada s concepes objetivas e subjetivas da avaliao, podendo as mesmas serem utilitarista ou intuicionista-pluralista. Uma avaliao utilitarista
est relacionada ideia de maximizar a felicidade na sociedade. Assim, sugere
que a definio de valor est atrelada constatao de que o maior bem
aquele que vai beneficiar o maior nmero de indivduos. (Worthen, Sanders e
Fitzpatrick, 2004:109), logo, com uma concepo objetivista de determinao
de valor. Por outro lado, as concepes intuicionista-pluralista se baseiam na
premissa de que existe uma pluralidade de critrios de juzos e o avaliador
no se restringe a estabelecer mdias de forma imparcial para emitir juzo
e relevncia, mas, se caracteriza como algum que compreende e descreve
diferentes valores e necessidades. S por meio do envolvimento de todos os
participantes e grupos envolvidos no processo de avaliao que esses objetivos sero alcanados.
Com relao s preferncias metodolgicas que influenciam os diversos
mtodos de avaliao, podem-se citar as abordagens quantitativas e qualitativas de coleta e anlise de dados. Na primeira, a mais usual refere-se aos
que trabalham no mbito da cincia social, cujo modo de anlise baseia-se no
racionalismo encontrado em ferramentas e conceitos modelados nas cincias
naturais de tradio positivista e cujos resultados se assentam em critrios especificados e objetivos. A segunda busca fundamentar as concluses em critrio mais subjetivistas por meio de metodologias construtivistas e participativas
(Kendall, Knapp e Forder, 2006).
Mais do que aumentar o caloroso debate entre a utilizao de um
mtodo ou de outro, de forma excludente, vamos buscar em Worthen, Sanders e Fitzpatrick (2004:118) o caminho ideal: a integrao inteligente de
ambos os mtodos [...] num nico estudo avaliatrio tem agora a aceitao
to grande que parece que o debate perdeu o sentido. [...] a maioria dos estudiosos de avaliao acha que usar ambos [...] faz com que esta (a avaliao) se torne mais completa. Portanto, uma terceira abordagem nasce ao
se conjugarem as duas anteriores. Nesse caso, o processo de avaliao busca
identificar as sensibilidades para revelar os mltiplos significados expressos pelas partes interessadas (Kendall, Knapp e Forder, 2006:427), que
associadas a critrios objetivos, como eficcia, buscam examinar de forma
rap Rio de Janeiro 45(1):209-42, jan./fev. 2011

220

Jairo Jos Assumpo Lucila Maria de Souza Campos

mais complexa como essas diferenas podem ser ligadas com os stakeholders sociais e situaes polticas. O grande desafio que se apresenta na avaliao de um projeto social justamente sistematizar uma forma de coleta
de dados que considere as duas abordagens, de forma simultnea, considerando as necessidades dos stakeholders sociais (Kendall, Knapp e Forder,
2006:427). Em termos conceituais, Schofield e Anderson (1987:8) afirmam
que a pesquisa quantitativa em geral concentra-se em testar determinadas
hipteses que so partes menores de uma perspectiva mais abrangente.
E, continuam, afirmando que essa abordagem segue rigorosamente o modelo tradicional das cincias naturais [...] enfatizando o experimento e os
mtodos estatsticos de anlise. Portanto, a padronizao, a preciso, a
objetividade e a confiabilidade da mensurao permeiam uma avaliao
com abordagem de coleta de dados quantitativa, possibilitando, em tese,
sua reproduo e generalizao.
Por outro lado, ainda conforme Schofield e Anderson (1987:8), a abordagem qualitativa enfatiza a descrio subjetiva [...] e tende a se concentrar
mais nos processos sociais do que, principal ou exclusivamente, em resultados. Nesse sentido, almeja buscar resultados mais reais, ricos e profundos
levando a significados importantes e no alcanveis em uma abordagem objetiva. Ainda, conforme os autores, a abordagem qualitativa usa uma abordagem indutiva em relao anlise dos dados extraindo seus conceitos da
massa de detalhes particulares que constituem o banco de dados (Schofield
e Anderson, 1987:8).
A avaliao de um projeto social pode ser caracterizada por trs momentos: antes (ex-ante) do incio, durante (in-itineri) e depois (ex-post) do
projeto executado. Na primeira, a avaliao ex-ante, a agenda poltica e
institucional permite escolher as melhores estratgias para a consecuo
dos objetivos do projeto. Nesse momento, as avaliaes tm papel formativo
e conceitual (preferncias, formulao e pesquisa de opinio), iro estabelecer e identificar as necessidades e o planejamento para a implementao
do projeto. J o momento in-itineri busca avaliar e monitorar o projeto em
curso. O ex-post tem papel somativo e avalia o projeto j realizado para
estabelecer decises de continuidade e alteraes, bem como estabelecer o
impacto da ao.
Finalmente, quanto ao design de uma avaliao, de uma forma geral,
um processo de avaliao sistemtico precisa que uma srie de questionamentos sejam pontuados antecipadamente. Stufflebeam (1978) assevera que
existem oito questes, que, ao serem respondidas, devem nortear um processo
avaliativo eficiente: 1) O que avaliao? 2) Para que as informaes da avarap Rio de Janeiro 45(1):209-42, jan./fev. 2011

Avaliao de projetos sociais em ONGs da Grande Florianpolis

221

liao devem servir? 3) Que perguntas de avaliao devem ser feitas? 4) Que
informaes a avaliao deve fornecer? 5) A quem os resultados da avaliao
devem servir (quem so os stakeholders)? 6) Quem deve fazer a avaliao?
7) Como a avaliao deve ser conduzida? 8) Sob quais padres (critrios) os
dados da avaliao devem ser julgados? As respostas a tais questionamentos
caracterizaro um norte consecuo do planejamento bsico de um projeto
de avaliao sistemtico.

4. Os modelos tericos de avaliao


Foi nesse cenrio de diferentes vises filosficas e ideolgicas, preferncias
metodolgicas distintas, bem como opes prticas do avaliador e vnculos
e interesses de clientes que surgiram diversos modelos de avaliao. Autores
como Gephart (1969) insistiam em sintetizar tais modelos para melhor compreend-los. Por outro lado, autores como Raizen e Rossi (1981) lutavam para
que no houvesse inibio de modelos, pois isso levaria a uma restrio ao
desenvolvimento do campo da avaliao. Justamente no cerne desse debate,
centrado em restringir os atuais modelos ou pela incapacidade de gerar um
modelo ideal, que Worthen, Sanders e Fitzpatrick (2004) buscaram classificar
as diversas abordagens em seis categorias objetivando facilitar o estudo e aplicao dos modelos existentes. Diversas formas de classificao e taxonomias
foram propostas, como por exemplo, Guba e Lincoln (1981), House (1983),
Madaus, Scriven e Stufflebean (1983); Pophan (1975); Scriven (1967, 1993),
Stake (1967, 1975) e Worthen, Sanders e Fitzpatrick (1997), cada uma delas
selecionando uma ou mais dimenses ou caractersticas consideradas adequadas ao tipo de classificao proposta. Payne (1994), por exemplo, agrupou os
modelos de avaliao em quatro abordagens: administrativa, judicial, consumidor e antropolgico.
Neste artigo, por consider-la mais completa, ser utilizada a categorizao proposta por Worthen; Sanders e Fitzpatrick (2004:125), que agruparam os modelos em abordagens, conforme caractersticas similares. Para
os autores uma avaliao pode ser centrada: 1) em objetivos (Tyler, 1971;
Provus, 1973); 2) na administrao (modelo CIPP de Stufflebeam) (Stufflebeam, 1978; Provus, 1973); 3) no consumidor (Scriven, 1993; Komoski, 1962;
4) em especialistas (Eisner, 1991); 5) nos adversrios (Owens, 1973; Levine,
1979); 6) nos participantes (Stake, 1975 Patton, 1997; Guba e Lincoln, 1981)
as quais, a seguir, sero devidamente detalhadas.
rap Rio de Janeiro 45(1):209-42, jan./fev. 2011

222

Jairo Jos Assumpo Lucila Maria de Souza Campos

4.1 Avaliaes centradas em objetivos


A caracterstica principal desses tipos de avaliaes est centrada na determinao do propsito da atividade, e a avaliao concentra-se justamente nas medidas em que esses propsitos foram atingidos. Assim, as avaliaes centradas em
objetivos se concentram na especificao de metas e objetivos e na determinao
da medida em que esses foram atingidos. Diversos autores (Metfessel e Michael,
1967; Bloom, Hastings e Madaus, 1971, Scriven, 1967) contriburam para a evoluo desses modelos a partir dos estudos e experincias de Tyler (1971).
As avaliaes centradas nesta abordagem, basicamente, buscam identificar se o que foi planejado foi atingido. Cabe ressaltar que esse tipo de avaliao tem uma sria restrio quando utilizada no campo social: normalmente,
o alcance do trabalho realizado ultrapassa os limites dos seus objetivos. Nesse
caso, podem surgir outros resultados e ocorrer mudanas nos projetos que levam a diferentes resultados, a novas perspectivas no previstas inicialmente
(Worthen, Sanders e Fitzpatrick, 2004). Assim, essa abordagem de avaliao,
quando utilizada de forma isolada, no permite olhar para esses novos contornos, em funo de suas restries para alterar metas e objetivos, perdendo,
com isso, a oportunidade de explorar outros aspectos relevantes da realidade
social. A figura 2 apresenta os detalhes especficos dos modelos centrados em
Objetivos. Atualmente, na rea social, os modelos centrados em objetivos so
utilizados como requisito para definies dos padres comportamentais, seleo e criao de situaes de teste que evocam esses padres e em termos de
compreenso para que os resultados sejam utilizados de forma construtiva. Ou
seja, hoje, podem ser utilizados com papel formativo para corrigir discrepncias
entre os objetivos almejados e os alcanados em determinada etapa do projeto.
Tm como principal contribuio conceituao de avaliao, a mensurao
do desempenho antes e depois, bem como a obrigao de definio antecipada
dos objetivos e metas. Os principais modelos que compem esta abordagem
so: modelo de Tyler (1971); modelo Metfessel e Michael (1967); modelo da
discrepncia de Provus (1973); modelo do cubo de Hammond (1973).
Figura 2

Principais caractersticas das avaliaes centradas em objetivo


Conceito

Mensurao pr e ps para definir o grau em que os objetivos foram alcanados.

Usos

Reformular metas e de deciso de continuidade. Justificar melhorias.

Principais autores

Tyler, Metfessel e Michael, Bloom, Provus, Hammond, Talmage.

Vantagens

Fcil de usar e aceitabilidade. Foco nos resultados.

Desvantagens

Foco exclusivo em resultados, reducionista e linear.

Fonte: Adaptado de Worthen, Sanders e Fitzpatrick (2004).

rap Rio de Janeiro 45(1):209-42, jan./fev. 2011

Avaliao de projetos sociais em ONGs da Grande Florianpolis

223

4.2 Avaliaes centradas na administrao


A caracterstica principal dessa abordagem ajudar as pessoas a tomar decises e, portanto, as informaes avaliatrias so parte essencial das decises inteligentes. Nesse sentido, as avaliaes centradas na administrao
tm interesse especial na identificao e no atendimento das necessidades
de informaes dos administradores. As avaliaes se sustentam na viso
gerencialista, que defende a racionalidade nos processos de tomada de
deciso e, com isso, quanto mais informaes disposio do administrador maior a possibilidade de uma deciso eficiente. Conforme Stufflebeam
(2003:5), nesse caso, a avaliao um processo de coleta de informaes teis tomada de deciso e, sendo assim, o objetivo do processo
aumentar o grau de acerto nas decises tomadas. A figura 3 apresenta os
detalhes especficos dos modelos centrados na administrao. Alguns aspectos do modelo da discrepncia de Provus, mencionado anteriormente,
como um modelo centrado em objetivos, tambm podem ser baseados no
atendimento s necessidades de informaes gerenciais e, portanto, caracterizados como modelo centrado na administrao. Da mesma forma, o
modelo criado por Patton (1997), centrado na utilizao, no foi mencionado neste estudo, por se entender que se assemelha muito aos modelos
citados como centrados na administrao.
Figura 3

Principais caractersticas das avaliaes centradas na administrao.


Conceito

Coleta de informaes teis tomada de deciso.

Usos

Subsidiar informaes teis e ajudar aos gestores dos projetos na tomada de deciso.

Principais autores

Stufflebeam, Alkim e Provus.

Vantagens

Abrangncia, abordagem sistmica e sensibilidade s necessidades.

Desvantagens

nfase na eficincia, premissas de ordem previsibilidade. Foco centrado na viso


dos lderes.

Fonte: Adaptado de Worthen, Sanders e Fitzpatrick (2004).

Os principais modelos que compem esta abordagem so: modelo CIPP


(contexto, insumos, processos e produto) de Stufflebeam (1968) e modelo de
avaliao de Alkin (1969).

rap Rio de Janeiro 45(1):209-42, jan./fev. 2011

224

Jairo Jos Assumpo Lucila Maria de Souza Campos

4.3 Avaliaes centradas nos consumidores


O objetivo principal desses modelos de avaliao o fornecimento de informaes avaliatrias sobre produtos, portanto, com papel fortemente somativo.
Ao optar pela criao de listas de verificao, os estudiosos descobriram que
a avaliao tambm poderia ser utilizada como um papel formativo, para melhorar o produto, ainda durante o processo de criao, e com isso atender de
forma mais eficiente o consumidor (Worthen, Sanders e Fitzpatrick, 2004).
Como as informaes originadas da avaliao iro possibilitar a escolha
para usos de diferentes produtos, servios e similares, esses modelos levam
em considerao a necessidade, o mercado, o desempenho e a utilidade do
objeto avaliado. Mais que um modelo especfico, as listas de verificaes so
instrumentos de fcil adaptabilidade para prover informaes diversas aos
consumidores. Diversas listas de verificao foram adaptadas e utilizadas de
forma eficiente para anlise de projetos, rgos pblicos e empresas privadas.
Basicamente, essas listas de verificao so utilizadas para dar informaes sobre os produtos e ajudar na tomada de decises sobre compras ou escolhas de
servios, pois as mesmas tm caractersticas de anlise, teste e de informaes
para subsidiar a tomada de deciso do consumidor. So muito utilizadas no
desenvolvimento, seleo e distribuio de produtos. A figura 4 deste artigo
apresenta as principais caractersticas inerentes s avaliaes centradas no
consumidor.
Figura 4

Principais caractersticas das avaliaes centradas no consumidor


Conceito

Dar informaes teis sobre o produto e escolha de servios e compras.

Usos

Subsidiar informaes teis aos gestores e consumidores do projeto.

Principais autores

Scriven, Komoski, Morriset e Stevens.

Vantagens

nfase nas necessidades do consumidor e preocupao com custo e benefcio e


utilidade.

Desvantagens

Custo e falta de financiamento. Pode suprimir a inovao e criatividade. No aberta


ao debate.

Fonte: Adaptado de Worthen, Sanders e Fitzpatrick (2004).

Os principais modelos que compem esta abordagem so as listas de verificaes propostas por Scriven (1967) e pelo Sistema de Anlise de Material
de Currculo (CMAS) criado por Morriset e Stevens em 1967.

rap Rio de Janeiro 45(1):209-42, jan./fev. 2011

Avaliao de projetos sociais em ONGs da Grande Florianpolis

225

4.4 Avaliaes centradas em especialistas


A avaliao centrada em especialistas, a mais antiga e a mais usada, depende
exclusivamente dos especialistas e da qualificao profissional dos avaliadores
para julgar a qualidade de qualquer atividade que esteja sendo avaliada. Vrios processos especficos de avaliao so variantes da abordagem centrada
em especialistas, como exames de doutoramento, pareceres especficos, painis para reviso de projetos, entre outros (Worthen, Sanders e Fitzpatrick,
2004). Em suma, esses modelos buscam oferecer julgamentos profissionais
adequados e tm como caractersticas principais o fato de se basearem em
juzos emanados dos conhecimentos e experincias profissionais buscando padres consensuais. A figura 5 apresenta as principais caractersticas dos modelos centrados em especialistas.
Figura 5

Principais caractersticas das avaliaes centradas em especialistas


Conceito

Especialistas por meio de seus conhecimentos especficos fornecem informaes necessrias para julgamento dos projetos.

Usos

Julgamentos profissionais de qualidade em projetos sociais.

Principais autores

Eisner e grupos de acreditao.

Vantagens

Cobertura ampla, eficincia e capitaliza o juzo humano.

Desvantagens

Viso superficial do contexto, uso exagerado da intuio. Confiana nas qualificaes


dos especialistas.

Fonte: Adaptado de Worthen, Sanders e Fitzpatrick (2004).

Os principais modelos que compem esta abordagem so os sistemas


formais e informais de pareceres profissionais e os pareceres ad-hoc de grupos
altamente especializados, bem como o sistema de connaisseur crtico de Eisner
(1991).

4.5 Avaliaes centradas em adversrios


Ao contrrio do cerne dos modelos de avaliao que objetivam eliminar a tendenciosidade, esse tipo de avaliao busca equilibrar as diferenas por meio
da posio antagnica entre grupos distintos, objetivando buscar o consenso
(Worthen, Sanders e Fitzpatrick, 2004). A controvrsia o foco dessa oposi-

rap Rio de Janeiro 45(1):209-42, jan./fev. 2011

226

Jairo Jos Assumpo Lucila Maria de Souza Campos

o estruturada e planejada em termos de ponto de vista (prs e contras) e


est centrada na possibilidade de ampla discusso como ponto de partida para
a busca do consenso. Assim, ao considerar-se que os avaliadores necessitam
interpretar informaes, formular concluses e determinar valor ou mrito, a
avaliao centrada em adversrio se presta a possibilitar um estudo mais complexo e participativo das questes que esto sendo avaliadas. Nesse sentido,
um modelo geral deriva para algumas adaptaes que sero motivos de anlise. A seguir, sero descritos os principais modelos centrados em adversrios.
A finalidade de modelos de avaliao centrada nos adversrios est focada em oferecer um exame equilibrado de todos os lados de questes controversas, enfatizando tanto seus pontos fortes como seus pontos fracos. Tm
como caracterstica a utilizao de metforas de formas forenses e judiciais de
audincias pblicas, enfatizando pontos de vista contrrios e suas decises so
baseadas em argumentos ouvidos durante todo o processo. Em funo dessa
construo subjetiva dos resultados de uma avaliao (com ampla discusso e
reflexo) que na figura 2, deste artigo, essa abordagem se aproxima muito
de uma avaliao intuicionista-pluralista. A figura 6 demonstra as principais
caractersticas dessa abordagem de avaliao. O principal modelo que compe
esta abordagem decorrente das adaptaes ao paradigma jurdico que se baseia na Teoria da Luta, por meio da defesa de pontos prs e contras no mesmo
estilo de julgamentos pblicos.
Figura 6

Principais caractersticas das avaliaes centradas nos adversrios.


Conceito

O juzo e o mrito emergem das controvrsias por meio da anlise dos pontos
fortes e fracos.

Usos

Oferecer exame equilibrado de todos os lados da questo.

Principais autores

Wolff, Owen, Levine e Kourilski e Baker.

Vantagens

Cobertura ampla, exame de declaraes e uso de grande variedade de informaes.

Desvantagens

Utilizao de rbitros e juzes. Custo altos e grande consumo de tempo.

Fonte: Adaptado de Worthen, Sanders e Fitzpatrick (2004).

4.6 Avaliaes centradas nos participantes


Esse tipo de avaliao responde reao dos tericos aos padres mecanicistas e insensveis de avaliaes. Em consequncia dessa reao, nasce um tipo

rap Rio de Janeiro 45(1):209-42, jan./fev. 2011

Avaliao de projetos sociais em ONGs da Grande Florianpolis

227

de abordagem de avaliao que passa a enfatizar a experincia por meio da


observao e identificao de todas as preocupaes, problemas e consequncias inerentes s aes da rea social. Em suma, uma avaliao puramente intuicionista-pluralista. Esses modelos, portanto, caracterizam-se por um
mtodo de pesquisa que est crescendo em pases em desenvolvimento, pois
focam iniciativas que envolvem a comunidade no projeto que est sendo avaliado. Esto principalmente preocupados em: 1) criar um processo mais igualitrio onde a perspectiva do avaliador determinada pelas prioridades dos
outros stakeholders, inclusive aqueles que participam diretamente do projeto;
2) prope que o processo de avaliao e seus resultados sejam pertinentes e
teis a quem se beneficia com o projeto e seus stakeholders, incluindo ambos
ativamente no processo de avaliao (W.K. Kellogg Foundation, 1998).
A primeira grande contribuio em avaliaes centradas no participante
foram os dois princpios bsicos defendidos por Stake (1975. Para o autor, a
avaliao um processo de julgamento com foco na descrio e no processamento de julgamento dos participantes (Stake,1975:9). Segundo ele, as
etapas de uma avaliao so as seguintes: contexto, justificativa e descrio
do fundamento lgico do projeto; lista de antecedentes, transaes e resultados; registrar tudo; definir os padres de julgamento; registrar os julgamentos
(Stake, 1975). As duas faces da avaliao (descrio e julgamento) so consideradas as principais atividades de um objeto avaliado. Descrever sucintamente e produzir julgamentos completos acerca do objeto avaliado ajuda o
avaliador a organizar a coleta e a interpretao dos dados. Assim, a estrutura
de duas faces de Stake fornece aos avaliadores um quadro referencial para
refletir sobre as necessidades de dados de uma avaliao (antecedncias, transaes e resultados) (Worthen, Sanders e Fitzpatrick, 2004). Outros autores
que contriburam para essa abordagem de avaliao foram: Guba e Lincoln
(1981:9) a avaliao um processo de julgamento e meio de emponderar
os participantes; Patton (1975, 1997 a avaliao deve colher o pluralismo
dos valores para ser til ao processo decisrio. Foi, porm, a partir dos dois
princpios bsicos de Stake (descrio e julgamento), que alguns modelos se
destacaram e sero descritos a seguir. Portanto, a finalidade da avaliao centrada nos participantes est em compreender e retratar as complexidades de
uma atividade, respondendo s necessidades de informaes de determinado
pblico, utilizando-se de planos de avaliao, raciocnio indutivo e de reconhecimento de mltiplas realidades. A figura 7 deste estudo sintetiza as principais
caractersticas dessa abordagem. Outros modelos, como avaliao transacional (Ripley, 1973), desenvolvente (Patton, 1997) e democrtica (MacDonald,
1974) ainda carecem de maiores detalhamentos e anlises mais profundas,
rap Rio de Janeiro 45(1):209-42, jan./fev. 2011

228

Jairo Jos Assumpo Lucila Maria de Souza Campos

pois possuem caractersticas ainda similares com as descritas anteriormente.


Finalmente, conforme Hamilton (1970:339), os modelos pluralistas de avaliao, se comparados aos modelos clssicos so mais extensivos e mais adaptveis. Por outro lado, provvel que sejam mais sensveis aos diferentes valores
dos participantes de um programa. Ao focar em valores e participao, dando
voz aos interessados, coloca-se como uma avaliao puramente intuicionistapluralista.
Figura 7

Principais caractersticas das avaliaes centradas nos participantes


Conceito

Verdades so construes sociais e a avaliao um processo interativo e de


negociao entre os atores sociais.

Usos

Compreender e relatar as complexidades do projeto social avaliado utilizandose da induo.

Principais autores

Stake, Patton, Guba e Lincoln, Ripley e MacDonald.

Vantagens

Foco na descrio e julgamento, interesse pelo contexto, pluralista e nfase


na compreenso.

Desvantagens

No diretiva, custos altos, generalizao de hipteses e risco de no concluir


o processo.

Fonte: Adaptado de Worthen, Sanders e Fitzpatrick (2004).

5. Metodologia e anlise dos dados


As entidades Grupo de Trabalho Comunitrio Catarinense (GTCC); Associao
Catarinense de Integrao do Cego (Acic); Associao Evanglica Beneficente
de Assistncia Social (Aebas); Instituto Comunitrio da Grande Florianpolis
(Icom) e finalmente o Movimento Negro Unificado (MNU) foram estudadas
considerando como acontecem seus processos avaliativos e se esses processos
so baseados em modelos que so influenciados pela natureza de sua existncia. As ONGs foram escolhidas em decorrncia da similaridade com o modelo
proposto por Andion (2007), explicitados pela figura 1 deste artigo e demonstrado de forma sinttica pela figura 8, a seguir.
Como tcnicas de coleta de dados, foram utilizadas seis fontes: 1) entrevistas em profundidade e/ou focalizadas, no estruturadas com gestores;
2) anlise de documentos; 3) registros de arquivos; 4) artefatos fsicos; 5)
observao direta (no participante) e 6) observao participante. No caso da
observao participante, utilizou-se de trs ONGs que se disponibilizaram a
rap Rio de Janeiro 45(1):209-42, jan./fev. 2011

229

Avaliao de projetos sociais em ONGs da Grande Florianpolis

dar o suporte necessrio s atividades de pesquisa, buscando integrar o pesquisador ao grupo investigado, o que possibilitou extrair percepes mais contundentes, produzindo, durante o perodo de pesquisa, reflexes a respeito
dos processos avaliativos. Nos casos das ONGs GTCC, Acic e MNU, tais experincias foram bastantes profundas, pois o pesquisador participou de reunies,
atividades e discusses dos processos avaliativos. Tais percepes e reflexes
se caracterizam como os insigths que levem a repensar o fenmeno sob investigao, evitando um afastamento entre sujeito, objeto e contexto (Merrian,
1998, apud Godoy, 2006:121). J nas entidades Icom e Aebas, a coleta de
dados ocorreu de forma documental, entrevistas com os gestores e consultas
em registros e arquivos disponibilizados pelas mesmas.
Figura 8

ONGs estudadas e principais caractersticas relacionadas tipologia de


Andion (2007)
TIPOLOGIA DE ANDION / RECONHECIMENTO NESTE ESTUDO

HISTRICAS

NOVOS
MOVIMENTOS

PRESTAO DE
SERVIOS

FUNDAES E
INSTITUTOS

FILANTRPICAS

Icom

Acic

Atuao apoltica;
nfase na ao
cvica e no
voluntarismo;
apoiada pelo setor
empresarial.

Atuao ligada
a assistncia
aos pobres
e excludos,
vinculada ideia
de caridade.

ONGS PESQUISADAS
MNU

GTCC

Aebas
CARACTERSTICAS PRINCIPAIS

Atuao junto a
grupos populares
de base e
apoio a grupos
desfavorecidos

No separao
entre organizao
e movimento.
Afirmao
de mltiplas
identidades
coletivas
pluralidade

Atuao tcnica
acima do
poltico; nfase
na articulao e
parcerias. Apoiada
pelo Estado e
iniciativa privada.

Fonte: Dados primrios.

Antes do incio da coleta de dados, foi elaborado um protocolo de pesquisa que objetivou identificar antecipadamente todos os procedimentos, instrumentos e regras gerais que deviam ser seguidos na aplicao dos instrumentos de pesquisa. A abordagem utilizada por meio das tcnicas de anlise
dos dados foi do tipo qualitativa, por meio da anlise do contedo que ocorreu
ao se categorizar os modelos de avaliao. Para Vergara (2008:18), categorizar implica em isolar elementos para depois agrupar. No caso deste estudo,

rap Rio de Janeiro 45(1):209-42, jan./fev. 2011

230

Jairo Jos Assumpo Lucila Maria de Souza Campos

foram criadas metacategorias (temas principais), as quais foram relacionadas


s categorias (temas secundrios) e representadas por frases que denotam a
utilizao de um modelo conforme os seis grupos estudados. Portanto, o critrio adotado foi lxico (Bardin, 1979:118), pois os elementos foram agrupados
em categorias temticas por meio de um ordenamento interno das oraes. As
categorias foram identificadas antecipadamente ao trabalho de campo. Portanto, caracteriza-se como uma grade fechada (Vergara, 2008:18). Assim,
na anlise dos dados, em um contexto especfico, o surgimento de alguma
palavra, documento, artefato ou expresso que se relaciona com algum dos
modelos estudados identificou uma tendncia de utilizao daquele modelo.
A anlise do contedo foi a tcnica utilizada para o tratamento dos dados.
Caracteriza-se como uma tcnica que admite tanto abordagens quantitativas
como qualitativas, podendo inclusive utilizar-se de ambas. Conforme Vergara
(2008:16), em quaisquer dos casos implica em categorizao. Na pesquisa
realizada, a tcnica utilizada teve trs etapas bsicas: a pr-anlise do contedo;
a explorao do material e o tratamento dos dados e interpretao (Vergara,
2008; Richardson, 2008). Assim, a interpretao qualitativa dos dados aconteceu por emparelhamento, pois partiu de uma associao dos resultados com o
referencial terico pesquisado para, finalmente, realizar a comparao e interpretao. E no se utilizou da repetio de palavras, ou tambm conhecida por
construo iterativa de uma explicao (Vergara, 2008). Quanto populao
e amostra, foi utilizada a amostra no probabilstica intencional em funo da
especificidade do tema abordado e da quantidade de ONGs que realizam avaliaes formais. Nesse caso, as ONGs escolhidas intencionalmente referem-se
tipologia de entidades desenvolvidas por Andion (2007) e foram entrevistadas
as gestoras dos projetos sociais dessas cinco ONGs estudadas, citadas anteriormente, que, alm de realizar algum tipo de avaliao, desenvolvem projetos
sociais de relevncia junto comunidade de atuao.
A primeira ONG estudada foi a Acic, que se caracteriza como uma entidade que nasceu com o objetivo de inserir os excludos na sociedade, com um
vnculo muito forte de caridade. Hoje se apresenta como uma entidade que
busca a insero das pessoas por meio da alfabetizao, educao e profissionalizao, desvinculando a noo de caridade e assistencialismo para assumirse como uma entidade, organizada e com objetivo de ser um canal facilitador
da educao integral. O foco de atuao a alfabetizao, educao e profissionalizao, os quais passam a permear os objetivos organizacionais, por
meio de um discurso de lutas dos direitos dos excludos, em substituio ao
foco como caridade e assistencialismo para prover insumos a esses excludos.
Em funo de suas caractersticas, a entidade se enquadra na tipologia
de Andion (2007) como uma entidade filantrpica. Nas palavras da entrevis-

rap Rio de Janeiro 45(1):209-42, jan./fev. 2011

231

Avaliao de projetos sociais em ONGs da Grande Florianpolis

tada se evidencia essa afirmativa: a nossa misso incluir as pessoas cegas


na sociedade e isso o nosso maior objetivo (Acic, 2008). Tal percepo se
coaduna com as palavras de Andion (2007), ao afirmar que so entidades
caracterizadas pela caridade, por meio de intervenes assistenciais como
forma de prover insumos e servios que atendam s necessidades de pobres e
excludos. Assim, organizaes filantrpicas possuem uma matriz discursiva
pautada pela assistncia social e filantropia que se redefine nas ltimas dcadas com a profissionalizao e a politizao (Andion, 2007:133).
Os dois principais projetos em andamento so: habilitao e reabilitao (locomoo, alfabetizao e educacional) e profissionalizao. Com relao atribuio de valor do processo avaliativo, a mesma se mostra utilitarista
em funo da caracterstica de objetividade em todos os processos, bem como
pela predominncia de abordagens de coleta de dados do tipo quali-quanti.
Essa afirmao decorre da observao do pesquisador que, ao participar das
reunies de coordenao dos projetos, identificou uma rotina de formulrios
para coleta de dados que so triangulados com os depoimentos dos professores
para uma tomada de deciso eficiente. A Acic, em funo de sua atribuio de
valor do processo avaliativo, se utiliza de modelos de avaliaes objetivistas e
com caracterstica de tomada de deciso. Os modelos centrados nos objetivos
tm como caracterstica principal a determinao da medida em que os objetivos esto sendo alcanados. A anlise dos temas (principais metacategorias
e secundrios categorias) por meio dos contedos diretos (manifestos)
em comparao com os isolados na categorizao est demonstrada de forma
sinttica por meio da figura 9 deste artigo.
Figura 9

A Acic e as principais caractersticas relacionadas avaliao

Entidade

Abordagens
predominantes
(em ordem de
relevncia)

Similaridade
com modelo

ACIC

1. Administrao

CIPP

Papel da
avaliao

Mtodo
predominante
de coleta de
dados

Avaliadores

Formativa

Quali-quanti

Internos

2. Objetivos
3. Consumidor
Fonte: Dados primrios.

A segunda ONG a ser estudada foi o GTCC, que nasceu da motivao de


diversos funcionrios da Eletrosul em ajudar os mais necessitados. Busca, por
rap Rio de Janeiro 45(1):209-42, jan./fev. 2011

232

Jairo Jos Assumpo Lucila Maria de Souza Campos

meio do envolvimento social, filantrpico e poltico, atender principalmente


s crianas em situao de vulnerabilidade ou de marginalidade, provendo-as
de atividades culturais, esportivas e de cidadania.
Nesse contexto, um trabalho de educao, conscientizao e autoestima torna-se o nico meio de se modificar essa realidade promovendo o desenvolvimento cultural e social. Assim, crianas e jovens carentes so o foco
de atuao do GTCC, partindo da seguinte convico: investir em educao
nas comunidades carentes a nica forma de evitar que as crianas cresam
sem valores, sem perspectivas de evoluo e sem condies de transformar
sua prpria realidade. Motivados por esse quadro e compartilhando da mesma viso, o Grupo de Trabalho Comunitrio Catarinense, o Grmio Recreativo, Escola de Samba Consulado e a Associao de Moradores do Caeira
(Amoca) uniram suas foras para desenvolver o Projeto Caeira 21, objeto
de pesquisa deste estudo. Em funo de suas caractersticas, a entidade se
enquadra na tipologia de Andion (2007) como novos movimentos, pois
possuem uma matriz discursiva pautada pela defesa de projetos sociais
fora da relao capital-trabalho e as transformaes sociais passam no s
pela mudana nas relaes materiais da existncia, mas por transformaes
culturais, [...] substantivas no cotidiano (Andion, 2007:133). Essa matriz
discursiva se materializa nas palavras da entrevistada: crianas do Caeira
do Saco dos Limes comeam ento todo um trabalho de valorizao do
potencial criativo [...] os seus talentos e o reconhecimento delas, desse seu
potencial e da comunidade [...]. O conceito principal do Projeto Caeira
21 reside na premissa de que a arte o meio escolhido para chegar aos
objetivos de educar, informar, prevenir e conscientizar. Por meio da arte,
quebram-se todas as barreiras, resistncias, diferenas e preconceitos, pois
quando crianas e jovens vivenciam o processo de criar, danar ou cantar,
tornam-se iguais, capazes e reconhecidos por isso. Esses valores que o projeto busca propiciar formaro a base para que crianas e jovens conquistem
seus sonhos de felicidade, sucesso, reconhecimento e cidadania. A consecuo desses objetivos, na viso dos idealizadores do projeto, ir contribuir
de maneira significativa para a reduo da violncia, misria, ignorncia e
marginalidade.
A anlise dos temas (principais metacategorias e secundrios
categorias) por meio dos contedos diretos (manifestos), em comparao com
os isolados na categorizao, est demonstrada de forma sinttica por meio da
figura 10 deste artigo.

rap Rio de Janeiro 45(1):209-42, jan./fev. 2011

233

Avaliao de projetos sociais em ONGs da Grande Florianpolis

Figura 10

O GTCC e as principais caractersticas relacionadas avaliao

Entidade

Abordagens
predominantes
(em ordem de
relevncia)

GTCC

1. Adversrios
2. Participao

Similaridade
com modelo

Papel da
avaliao

Responsividade
de Stake

Formativa
e Somativa

Mtodo
predominante
de coleta de
dados

Avaliadores

Qualitativo

Internos

Fonte: Dados primrios.

O Icom da Grande Florianpolis uma iniciativa de um grupo de profissionais, lderes comunitrios e empresrios, que buscavam uma alternativa
inovadora para promoo do desenvolvimento social local. Foi fundado em
25 de novembro de 2005, tendo como principal objetivo a articulao entre
empresrios e grupos profissionais na gesto de fundos, elaborando programas tcnicos de investimento social, identificando as organizaes a serem
apoiadas e avaliando seus resultados. Busca tambm, por meio de parcerias
internacionais, oportunidades de intercmbio e aprendizagem entre investidores sociais de diversos pases.
Tem como eixos de atuao a produo e disseminao de informaes
sobre organizaes e iniciativas sociais locais, o apoio tcnico e financeiro a
organizaes sem fins lucrativos, bem como a capacitao para o fortalecimento institucional e o estabelecimento de parcerias. Declara em sua pgina
eletrnica que a sua misso mobilizar, articular e qualificar investimentos
sociais de diversos setores da sociedade para promoo do desenvolvimento
social na regio metropolitana de Florianpolis (Icom, 2008). Em funo de
suas caractersticas, a entidade se enquadra na tipologia de Andion (2007)
como fundaes e institutos.
Essa afirmao evidencia-se pelo escopo de atuao declarada pela entrevistada: ICOM uma organizao que nasceu inspirada no conceito de
fundao comunitria, ainda no muito comum no Brasil, mas que existe em
vrios pases do mundo. Tal constatao se coaduna com as palavras de Andion (2007, p. 133), ao afirmar que so entidades mais recentes ligadas ao
investimento social privado [...] com nfase na articulao e nas parcerias e
apoiadas pelo setor empresarial. Assim, as fundaes e institutos possuem
uma matriz discursiva pautada pelo foco na complementaridade entre a ao
pblica e privada por meio de investimento social privado, a ao social das
rap Rio de Janeiro 45(1):209-42, jan./fev. 2011

234

Jairo Jos Assumpo Lucila Maria de Souza Campos

empresas e da responsabilidade social (Andion, 2007:133). Essa matriz discursiva se materializa pelo conjunto de depoimentos da entrevistada, ao afirmar que: o Icom atua em trs reas. a produo e disseminao de conhecimento sobre a realidade local, ao buscar identificar quais os focos prioritrios
para o investimento social na cidade de Florianpolis, na criao de fundos
de investimentos sociais, que do apoio tcnico e financeiro s fundaes e organizaes do terceiro setor e, finalmente, na criao de fundos especficos
em nome de empresas ou indivduos que querem fazer um investimento social
neste territrio de atuao.
Ao avaliar a sua atuao, a entidade demonstra uma predominncia
por avaliaes formativas e somativas em funo da caracterstica de gesto
dos recursos de terceiros. Com relao s avaliaes somativas, essa tendncia
fica evidenciada pelo depoimento da entrevistada: para ns, essa avaliao
(somativa) essencial, porque como a gente trabalha com investidores, que
colocam dinheiro no Icom, acreditando que o Icom vai fazer o trabalho, a gente tem que provar para eles que fizemos bem. Assim, as avaliaes somativas
ocorrem ao prestar contas aos financiadores, aos parceiros e sociedade. A
anlise dos temas (principais metacategorias e secundrios categorias) por meio dos contedos diretos (manifestos), em comparao com os
isolados na categorizao, est demonstrada de forma sinttica por meio da
figura 11 deste artigo.
Figura 11

O Icom e as principais caractersticas relacionadas avaliao

Entidade
ICOM

Abordagens
predominantes
(em ordem de
relevncia)
1. Especialistas
2. Administrao

Similaridade
com modelo

Papel da
avaliao

1. Pareceres
ad-hoc
2. CIPP

Formativa
e
Somativa

Mtodo
predominante
de coleta de
dados
Quantitativo e
qualitativo

Avaliadores
Internos

Fonte: Dados primrios.

A quarta entidade estudada foi a Aebas, que foi fundada por um grupo
de voluntrios da Primeira Igreja Presbiteriana de Florianpolis, com o objetivo inicial de construir o Hospital Evanglico de Florianpolis. O projeto
logo teve adeso de outras comunidades evanglicas da capital e foi inviabi-

rap Rio de Janeiro 45(1):209-42, jan./fev. 2011

Avaliao de projetos sociais em ONGs da Grande Florianpolis

235

lizado por questes financeiras. Mais tarde, foi substitudo pelo Ambulatrio
da Aebas, onde a populao empobrecida recebia atendimento de consultas
mdicas, clnica geral, pediatria e ginecologia, atendimento odontolgico e de
exames laboratoriais. Em 1982, a partir da convivncia com as comunidades
carentes que frequentavam o ambulatrio mdico, a direo da entidade percebeu a necessidade de um trabalho especfico e sistemtico na rea da infncia e dessa forma inaugurou o Centro de Assistncia Social (CAS) da Aebas,
que na poca passou a atender diariamente 130 crianas de trs meses a seis
anos em sua creche.
Declara que sua misso realizar e apoiar aes na rea da assistncia social, sade e educao, de forma participativa e qualificada na Regio
metropolitana de Florianpolis, visando permanentemente ao resgate e
construo da cidadania plena de todos os envolvidos em suas aes. Esta
nfase fica evidenciada pelas parcerias declarada pela entrevistada: temos um convnio com uma ONG alem KNH, [...] temos convnio com a
prefeitura de Florianpolis, com algumas empresas e tambm campanhas
e promoes que a gente vai fazendo para arrecadar recursos para o CAS
(Aebas, 2008).
Na viso de Andion, os prestadores de servios possuem uma matriz discursiva pautada pela nfase na profissionalizao e na resoluo
de problemas socioeconmicos (Andion, 2007:133). Por outro lado, essa
tendncia de matriz discursiva fica mais explicitada na preocupao dos
gestores da entidade, ao inserir na sua pesquisa coleta de informao a
respeito dos interesses de cursos profissionalizantes nas comunidades atendidas, como forma de embasar aes a serem previstas no planejamento de
2009. Portanto, essa associao que nasceu com objetivos de caridade, voluntarismo e assistencialismo, principalmente na rea da sade, com foco
em pessoas de todas as idades e que esto em situao de no acesso a tais
servios, hoje se apresenta como uma entidade que busca a insero das
crianas e jovens por meio da educao complementar, sade (hbitos e
higiene) e assistncia (profissionalizao, cultura e cidadania) como forma
de preveno para situaes de vulnerabilidade. Essa mudana de foco deveu-se principalmente exigncia do principal financiador. A anlise dos
temas (principais metacategorias e secundrios -categorias) por
meio dos contedos diretos (manifestos), em comparao com os isolados
na categorizao, est demonstrada de forma sinttica por meio da figura
12 do presente artigo.

rap Rio de Janeiro 45(1):209-42, jan./fev. 2011

236

Jairo Jos Assumpo Lucila Maria de Souza Campos

Figura 12

A Aebas e as principais caractersticas relacionadas avaliao

Entidade
AEBAS

Abordagens
predominantes
(em ordem de
relevncia)

Similaridade
com
modelo

1. Objetivos
2. Administrao

Tyler
Alkin (UCLA)

Papel da
avaliao
Formativa
e
Somativa

Mtodo
predominante
de coleta de
dados

Avaliadores

Quantitativo

Internos

Fonte: Dados primrios.

A ltima ONG estudada foi o MNU, que se apresenta como uma organizao poltica de combate ao racismo e atua desde 1978. Nesse perodo,
tem cumprido papel importante na luta por questes como liberdade e emancipao do povo negro no Brasil. Sua data de criao 7 de julho de 1978
fruto de denncia da violncia policial e consequente morte, por tortura,
do jovem negro Robson Silveira da Luz, e da discriminao de jovens atletas
negros pela diretoria do Clube Tiet na capital paulista. Tais fatos originam,
posteriormente, um Ato Pblico de protesto que aconteceu na cidade de So
Paulo, quebrando um silncio poltico de luta de combate ao racismo que
durava mais de 40 anos. Caracteriza-se como um movimento autnomo e independente, que transformou a data de 20 de novembro como o dia nacional
de luta contra o racismo. Em manifesto nacional, o MNU, em 1979, props a
transformao do dia 20 de novembro no Dia Nacional da Conscincia Negra.
Em suma, o Movimento Negro Unido funciona como um agente de combate
aos excessos que limitam as liberdades e a emancipao do povo negro, com
forte atuao ideolgica, e seu discurso reside na luta para melhorar a vida
das pessoas negras deste pas. No possui qualquer fonte de recurso regular e
seus projetos e campanhas so realizados, principalmente em parcerias com
entidades ligadas aos estudos de questes sociais (ncleos de estudos ligados
s Universidades) e rgos governamentais que atuam em campos como a
reforma agrria, direitos das mulheres, entre outros.
Em funo dessas caractersticas, a entidade se enquadra na tipologia
de Andion (2007) como histricas ou de assessoria. Essa afirmao fica
evidenciada pelo escopo de atuao declarada pela entrevistada: porque o
princpio do MNU organize os negros onde eles estiverem, para lutar a favor de seus direitos, e continua ao afirmar que a bandeira de luta do MNU
reparaes. Reparaes para a populao negra, pelo trabalho escravo de
rap Rio de Janeiro 45(1):209-42, jan./fev. 2011

237

Avaliao de projetos sociais em ONGs da Grande Florianpolis

seus ancestrais, por toda excluso [...] a sociedade brasileira tem uma dvida
com a populao negra. Essa declarao coincide com as palavras de Andion
(2007), ao afirmar que so entidades que atuam junto aos grupos populares
de base (no meio rural e urbano) e que sua legitimidade se refere ao apoio
aos grupos desfavorecidos. Ainda nas palavras de Andion, tais organizaes
possuem uma atuao anti-institucional, questionadora do sistema capitalista
e da ao do Estado (Andion, 2007:133). Para consecuo de seus objetivos,
o MNU possui um quadro de militantes que atuam por meio de um discurso
ideolgico e combativo. Ao ser arguida sobre o nmero de associados, a entrevistada de pronto respondeu: no! no existem associados, todos so militantes. A anlise dos temas (principais metacategorias e secundrios
categorias) por meio dos contedos diretos (manifestos), em comparao
com os isolados na categorizao, est demonstrada de forma sinttica por
meio da figura 13 deste artigo.
Figura 13

O MNU e as principais caractersticas relacionadas avaliao

Entidade
MNU

Abordagens
predominantes
(em ordem de
relevncia)
1. Adversrios
2. Participao

Similaridade com
modelo

Papel da
avaliao

Mtodo
predominante
de coleta de
dados

1. Empoderante

Formativa

Qualitativo

Avaliadores
Internos

Fonte: Dados primrios.

6. Consideraes finais
Foram reconhecidos neste estudo, a partir da tipologia de Andion (2007), cinco grupos de ONGs: histricas, novos movimentos, prestao de servios,
fundaes e institutos e filantrpicas. As ONGs estudadas foram, por convenincia, escolhidas conforme suas caractersticas coincidentes com a tipologia
utilizada. Assim, um primeiro cenrio que emerge ao analisar os processos
avaliativos e os focos de atuao de tais ONGs se caracteriza pela existncia de
uma tendncia de que as organizaes que atuam apoiadas pela cooperao
privada, pelo Estado ou organismos internacionais, e cujos focos de atuao
expressem valores tcnicos como profissionalizao, sade, educao e gesto, tendem a utilizar modelos centrados em objetivos e administrao, em
rap Rio de Janeiro 45(1):209-42, jan./fev. 2011

238

Jairo Jos Assumpo Lucila Maria de Souza Campos

funo das necessidades de se estabelecerem indicadores slidos de eficincia


e eficcia da interveno social. Nesse caso, as entidades caracterizadas neste
estudo como novos movimentos, prestao de servios e fundaes e institutos
tendem a avaliar seus projetos atribuindo valores utilitaristas, e as informaes geradas tm papel formativo para corrigir os processos durante a sua execuo (atuar) e somativo para julgar e informar, possibilitando a reutilizao
dos recursos e, consequentemente, a replicao da interveno.
Por outro lado, um segundo cenrio se evidencia por meio das organizaes que atuam apoiadas por grupos populares consistentes, cujo discurso expressem valores mais subjetivos como insero social, preveno e luta
de apoio aos excludos, e que se afirmam por meio de mltiplas identidades coletivas e pela pluralidade de ao, as quais tendem a utilizar modelos
centrados na participao, utilizando mecanismos indutivos para gerar critrios de sustentabilidade, satisfao dos beneficirios e equidade. Portanto, as
entidades caracterizadas, neste estudo, como novos movimentos e histricas
tendem a avaliar seus projetos e intervenes atribuindo valores intuicionistas-pluralistas com papel formativo, por meio das discusses acerca das aes,
as quais geram informaes que possibilitaram o julgamento da interveno
social. Nesse caso, compreende e descreve diferentes valores e necessidades,
por meio do envolvimento de todos os participantes e grupos envolvidos.
Assim, identificado um padro de utilizao de modelos de avaliaes,
cabe s organizaes que avaliam seus projetos sociais, com tendncias unilaterais, rever seus processos, de forma a ampliar a anlise das intervenes
objetivando gerar informaes mais consistentes para possibilitar um julgamento adequado. Assim, amplia-se o antigo debate em torno da utilizao de
um modelo ou de outro, de forma excludente, para uma prtica que Worthen,
Sanders e Fitzpatrick (2004:118) chamaram de caminho ideal: a integrao
inteligente de ambos os mtodos [...] num nico estudo avaliatrio tem agora
a aceitao to grande que parece que o debate perdeu o sentido. [...] a maioria dos estudiosos de avaliao acha que usar ambos [...] faz com que esta (a
avaliao) se torne mais completa.
Diante do exposto nos itens anteriores, e voltando questo norteadora deste estudo, conclui-se que os modelos avaliativos analisados nas cinco
ONGs da Grande Florianpolis so influenciados pela natureza do foco de
atuao, em decorrncia de que tais fatores ensejam valores mais objetivos
em alguns casos e mais subjetivos em outros. Assim, quando os valores que
norteiam as aes das entidades so mais tcnicos, decorrentes at de uma
profissionalizao das mesmas, os modelos avaliativos tendem para processos
que gerem informaes e julgamentos utilitaristas. Por outro lado, quando os
valores migram para elementos mais subjetivos, por meio de focos de atuao

rap Rio de Janeiro 45(1):209-42, jan./fev. 2011

Avaliao de projetos sociais em ONGs da Grande Florianpolis

239

que envolvam os atores sociais nos processos decisrios e de execuo, a tendncia migra para modelos intuicionistas-pluralistas, como forma de ampliar
o envolvimento de todos os atores sociais, muitas vezes decorrentes do exguo
aporte de recursos e da dependncia de voluntrios, para equilibrar as necessidades prementes consecuo dos seus objetivos.

Referncias
ALKIN, M.C. Evaluation theory development. Evaluation comment. Chicago: University of Chicago Press, 1969. v. 2, p. 2-7.
ALVES, M.A. Terceiro setor: as origens do conceito. In: ENANPAD, XXVII, 2002,
Salvador. Anais... Salvador: Enanpad, 2002. (GPG 837)
ANDION, M.C.M. Atuao das ONGs nas dinmicas de desenvolvimento territorial
sustentvel no meio rural de Santa Catarina: os casos da Apaco, do centro Vianei
de educao popular e da Agreco. Tese (doutorado em sociedade e meio ambiente)
Universidade Federal de Santa Catarina, Florianpolis, 2007.
ANHEIER, H.K.; SIBEL, W. The nonprofit sector in Germany. Manchester: Manchester
University Press, 2001.
BAKER, E.L.; NIEMI, D. School and program evaluation. In Handbook of education psychology. New York: Macmillan, 1996. Disponvel em: <http://books.
google.com/books?hl=pt-BR&lr=&id=tNMTKjUjuHEC&oi=fnd&pg=PA15&dq=
%22Handbook+of+education+psychology%22&ots=24EomkfNyo&sig=cOhbFEBDj-WNeRP-GcMIYLLs3tI#PPA16,M1>. Acesso em: 5 jan. 2008.
BARDIN. L. Anlise do contedo. Lisboa: Edies 70, 1979.
BLOOM, B.S., HASTINGS, J.T.; MADAUS, G.F. Handbook on formative and summative evaluation of student learning. New York: McGraw-Hill, 1971.
BRASIL. Cdigo civil. Decreto-lei no 10.406, de 10 de janeiro de 2002. Art. 44-69.
So Paulo: Europa, 2003. CD-ROM.
_____. Cdigo civil. Decreto-lei no 10.825, de 22 de dezembro de 2003. Art. 44.
Disponvel em: <www010.dataprev.gov.br/sislex/paginas/11/2002/10406.htm>.
Acesso em: 25 abr. 2008.
CLELAND, D.I.; IRELAND, R.I. Gerncia de projetos. Rio de Janeiro: Reichmann &
Affonso, 2000.
DELLAGNELO, Lucia. Fundaes comunitrias. Revista Alliance, So Paulo, mar.
2006.

rap Rio de Janeiro 45(1):209-42, jan./fev. 2011

240

Jairo Jos Assumpo Lucila Maria de Souza Campos

EISNER, E.W. The use of qualitative forms de evaluation for improving education
practice. Chicago: Educational evaluation and Policy Analyses, 1991.
GEPHART, W.J. The eight general research methodologies: a facet analysis of the
research process. In.: Phi Delta Kappa Research Service Center. Bloomington, 1969.
GUBA, E.G.; LINCOLN, Yvonna S. Effective evaluation. San Francisco: Jossey-bass,
1981.
HAMILTON, D. Making sense of curriculum evaluation: continuities and discontinuities in an educational idea. In. SCHULMAN, L. Review of researche in education.
Itaska: Peacock, 1970. v. 5.
HAMMOND, R.L. Evaluation at the local level. In. WORTHEN, B.R.; SANDERS, J.R.
Education evaluation: theory and practice. Belmont: Wadsworth, 1973.
HOUAISS, A. Dicionrio eletrnico da lngua portuguesa. So Paulo: Objetiva, 2001.
1.0. CD-ROM.
HOUSE, E.R. (Ed.). Philosofy of evaluation New Directions for Program Evaluation,
San Francisco, n. 19, 1983.
_____; GLASS, G.V. Justice in evaluation. Beverly Hills: Sage, 1978.
KENDAL, J.; KNAPP, M.; FORDER, J. Social care and the nonprofit sector in the
western developed world. In: POWELL, W.W.; ESTEINBERG, R. (Ed.). The nonprofit sector: a research handbook. 2. ed. Yale: Yale University Press New Haven &
London, 2006. p. 415-431.
KOMOSKI, K.P. Teaching machines: the American behavioral scientist. Newbury
Park: Sage, 1962.
LEVINE, M.; ROSENBERG, N. An adversary model of fact finding and decision making
for program evaluation: theoretical considerations. New York: Behavioral Publications, 1979. v. 2.
MADAUS, G.F; SCRIVEN, M.; STUFFLEBEAM, D.L. Evaluation models: viewpoints
on educational and human services evaluation. Boston: Kluwer-Nijhoff, 1983.
MARX, K. Formaes econmicas pr-capitalistas. 5. ed. Rio de Janeiro: Paz e Terra,
1986.
MACDONALD, J.B. An evaluation of evaluation. Urban Review, London, n. 7, p.
3-14, 1974.
METFESSEL, N.S.; MICHAEL, W.B. A paradgma involving multiple criterion measures for the evaluation of the effectiveness of school programs. Education and
Psychological Measurement, Stanford, v. 27, p. 195-213, 1967.

rap Rio de Janeiro 45(1):209-42, jan./fev. 2011

Avaliao de projetos sociais em ONGs da Grande Florianpolis

241

MONTAO, Carlos. Terceiro setor e questo social: crtica ao padro emergente de


interveno social. 4. ed. So Paulo: Cortez, 2007.
OWENS, T.R. Education evaluation by adversary proceeding. In: HOUSE, E.R. (Ed.).
School evaluation: the politics of program evaluation. Newbury Park: Sage, 1973.
PATTON, M.Q. Alternative evaluation research paradigm. Grand Forks: North Dakota
Study Group on Evaluation, 1975.
_____. Utilization focused evaluation: the new century text. Thousand Oaks: Sage,
1997.
PAYNE, D.A. Designing educational project and program evaluations: a practical
overview based on research and experience. Boston: Kluwer Academic Publishers,
1994.
POPHAN, W.J. Education evaluation. Englewood Cliffs: Prentice-Hall, 1975.
PROVUS, M. Discrepancy evaluation. Berkeley: McCutchan Publishing Corporation,
1973.
RAIZEN, S.A.; ROSSI, P.H. Program evaluation in education: when? how? to what
ends? Washington: National Academy Press, 1981.
REBOLLO CATALN, M.A. Modelos de evaluacin: concepto y tipos. In: COLS
BRAVO, M.P.; REBOLLO CATALN, M.A. Evaluacin de programas. Sevilha: Kronos, 1993.
RICHARDSON, R.J. Pesquisa social: mtodos e tcnicas. 3. ed. So Paulo: Atlas,
2008.
RIPLEY, R.M. Studies in transactional evaluation. Berkeley: MacCutchan, 1973.
ROCHE, C. Avaliao de impacto dos trabalhos de ONGs: aprendendo a valorizar as
mudanas. 2. ed. So Paulo: Cortez/Abong, 2002.
SALAMON, L.M. International the nonprofit sector in comparative perspective. In:
POWELL, W.W.; ESTEINBERG, R. The nonprofit sector: a research handbook. 2. ed.
Yale: Yale University Press New Haven & London, 2006. p. 89-114.
_____; ANHEIER, H.K. Defining the nonprofit sector: a cross-national analysis.
Manchester: Manchester University Press, 1997.
SCHOFIELD, J.W.; ANDERSON, K.M. Combining quantitative and qualitative methods in research on ethnic identity and intergroup relations. Educational, Management
and Administration Society, Los Angeles, p. 121-127, 1987.
SCRIVEN, M. The methodology of evaluation. In: STAKE, R.E. Curriculum evaluation. Chicago: Rand McNally, 1967.
rap Rio de Janeiro 45(1):209-42, jan./fev. 2011

242

Jairo Jos Assumpo Lucila Maria de Souza Campos

_____. Hard-won lessons in program evaluation. New Directions for Program Evaluation, New York, n. 58, p. 5-48, Summer 1993.
STAKE, R.E. The countenance of educational evaluation. Teachers College Record,
New York, n. 68, p. 523-540, 1967.
_____. Evaluation the arts in education: a responsive approach. Columbus: Merril,
1975.
STUFFLEBEAM, D.L. Evaluation as enlightenment for decision making. Columbus:
Ohio State University Evaluation Center, 1968.
_____. Meta evaluation: an overview. In: Evaluation and the Health Profession, v.1,
n. 1, p. 17-43, Spring 1978.
_____. The CIPP model for evaluation. In: Annual conference of the Oregon
program evaluators network (OPEN), 2003, Oregon. Anais 2003. p. 1-68.
disponvel em: <www.wmich.edu/evalctr/pubs/CIPP-ModelOregon10-03.pdf>.
Acesso em: 3 jan. 2008.
TENRIO, F.G. (Org.). Responsabilidade social empresarial: teoria e prtica. Rio de
Janeiro: FGV, 2004.
TYLER, R.W. Basic principles of curriculum and curriculum and instruction. Chicago:
University of Chicago Press, 1971.
UNITED NATIONS. Handbook of National Accounting: handbook on non-profit institutions in the system of national accounts. New York: United Nations Publication,
2003. Disponvel em: <www.jhu.edu/ccss/unhandbook/docs/Front&Chapters.
pdf>. Acesso em: 29 abr. 2008.
VERGARA, S.C. Mtodos de pesquisa em administrao. 3. ed. So Paulo: Atlas,
2008.
_____; FERREIRA, V.C.P. A representao social de ONGs segundo formadores de
opinies no municpio do Rio de Janeiro. Revista de Administrao Pblica (RAP),
p. 1137-1159, set./out. 2005.
WORTHEN, B.R.; SANDERS, J.R.; FITZPATRICK, J.L. Program evaluation: alternative, approaches and practical guidelines. New York: Longman, 1997.
_____. Avaliao de programas: concepes prticas. So Paulo: Edusp, 2004.
W.K. KELLOGG FOUNDATION. Evaluation Handbook: philosophy and expectations.
Michigan: Battle Creek, 1998. Disponvel em: <www.wkkf.org/Pubs/Tools/Evaluation/Pub770.pdf>. Acesso em: 7 jan. 2008.

rap Rio de Janeiro 45(1):209-42, jan./fev. 2011

Você também pode gostar