Você está na página 1de 26

_________________________________________________________________

A TRIANGULAO EM DEBATE: consideraes sobre o


modelo minayano de avaliao por triangulao de mtodos

Wildoberto Batista Gurgel*

Resumo: Anlise conceitual da triangulao de mtodos e, por extenso, da avaliao de


polticas pblicas e programas sociais por triangulao de mtodos. Introduz-se a questo
da triangulao de mtodos no horizonte das pesquisas qualitativas. Examinam-se as
concepes, os fundamentos, os procedimentos e as tcnicas mais comuns nesse tipo
de proposta avaliativa. Limita-se a uma anlise das propostas mais completas e diretas de
avaliao de polticas pblicas e programas sociais, em especial a elaborada por Minayo
et al. Considera-se, finalmente, o alcance desses modelos, quer enquanto alternativas
dentro das crises metodolgicas contemporneas, quer enquanto proposta vivel de
avaliao de polticas pblicas e programas sociais, quer enquanto um desafio ao
conhecimento.
Palavras-chave: Metodologia. Avaliao. Triangulao. Bricolagem. Interdisciplinaridade.

*
Mestre em filosofia pela UFPB, Doutorando em Poltica Pblicas pela UFMA e professor
do Departamento de Filosofia da UFMA. E-mail: ayalagurgel@yahoo.com.br

Cincias Humanas em Revista - So Lus, V. 5, n.1, julho 2007 43


Wildoberto Batista Gurgel
_________________________________________________________________
1. Introduo

Se a modernidade trouxe consigo, por meio das discusses cartesianas, j


em 1637, o desejo de um mtodo que, por excelncia, pudesse bem conduzir a
razo tanto na busca do conhecimento quanto na da conduta moral (DESCAR-
TES, 2000), trouxe tambm, a sua anttese: a crtica na crena metodolgica. Tal
crtica faz parte da prpria histria da epistemologia moderna, diluda em vrias
pocas e vertentes por meio de autores tais como Hume (Investigao sobre o
entendimento humano, 1748), Kant (Crtica da razo pura, 1781), Marx (In-
troduo contribuio para a crtica da economia poltica, 1859), Weber
(Sobre a objetividade do conhecimento das cincias sociais, 1904), e Bourdieu
(Sociologia das formas simblicas, 1970), entre outros. Isto fez tambm com
que muitas posturas oscilassem entre uma ditadura metodolgica a la Descartes
(Discurso do Mtodo, 1637), Comte (Curso de filosofia positiva, 1842), Stuart
Mill (Sistema de Lgica, 1856) ou Durkheim (As regras do mtodo sociolgi-
co, 1895) at a uma anarquia metodolgica a la Santayana (Ceticismo e f
animal, 1923), Popper (Conhecimento objetivo, 1972) ou Feyerabend (Con-
tra o mtodo, 1975). Nesse cenrio, passou-se a falar, de acordo com Kuhn
(1962, p.148-151) em crise de paradigmas, ou, mais especificamente, nas pa-
lavras de Denzin & Lincoln (2006), em crises no modelo das pesquisas qualita-
tivas, uma vez que s esse modelo coloca abertamente a dupla dimenso
cartesiana do mtodo: a cincia e a moral. No entanto, o sonho cartesiano pelo
monoplio de um mtodo que tudo resolva tem cedido, paulatinamente, lugar s
inspiraes metodolgicas mais anarquistas, nas quais prevalece a mxima
nietzscheana (2002, p.92, 108) de que no h fenmenos morais, mas s inter-
pretaes morais dos fenmenos. Essa cesso, apesar de estar na gnese das
crises metodolgicas antigas e atuais, no acontece sem que haja um conflito de
foras ideolgicas entre os defensores de um modelo e outro. Assim, metodologias
mais abertas so interpretadas como modelos fechados, como acontece com
aquilo que Quiroga (1991) chama de invaso positivista no marxismo, e
metodologias mais fechadas so quebradas para que sirvam a propsitos mais
dinmicos, como fizeram Bourdieu (2005) e Minayo (2006), por exemplo.
Essa ltima referida por vrios autores por meio de eufemismos, tais
como multiparadigmas (NELSON; TREICHLER; GROSSBERG, 1992),
multiplicidades de mtodos (FLICK, 1998), bricolagem ou montagem
(COOK, 1981), combinao de teorias e mtodos (SAMAJA, 1995),
performance (DENZIN; LINCOLN, 2006), interdisciplinaridade (MINAYO
et al, 2005) e triangulao de mtodos (DENZIN, 1970; MINAYO;
SANCHES, 1993; FLICK, 1998; MINAYO et al, 2005; MINAYO, 2006;
DENZIN; LINCOLN, 2006) entre outros. O que se percebe disto que o pes-
quisador qualitativo contemporneo opera com uma diversidade de materiais
envolvidos, dentre os quais se destacam: estudo de caso, experincia pessoal,
introspeco, histria de vida, entrevista, artefatos, produes culturais, textos
44 Cincias Humanas em Revista - So Lus, V. 5, n.1, julho 2007
A triangulao em debate
_________________________________________________________________
observacionais, textos histricos, textos interativos e textos visuais. Tais materi-
ais, no entanto, s fazem sentido de acordo com Denzin & Lincoln (2006, p.17)
enquanto expresses de momentos e significados rotineiros e problemticos na
vida dos indivduos. Ou seja, ainda de acordo com esses autores (2006, p.19),
esse pesquisador atua como um confeccionador de colchas ou um improvisador
no jazz, cuja ao edita e rene pedaos de realidade, um processo que gera e
traz uma unidade psicolgica e emocional para uma experincia interpretativa.
Desse modo, o lugar da triangulao de mtodos tem sido o da pesquisa qua-
litativa. H at mesmo quem a considere como a essncia desse tipo de pes-
quisa (Flick, por exemplo), ou pelo menos uma parte dessa essncia (Samaja
um exemplo), ou uma dimenso pragmtica dessa essncia (Denzin ou
Minayo ilustram essa abordagem).
Atualmente, o lugar no qual a triangulao de mtodos mais ganha
destaque o da avaliao de polticas pblicas e programas sociais. Ou, como
atesta Minayo (2006, p.362), a triangulao de mtodos particularmente reco-
mendada para estudos de avaliao. Cabe, portanto, examinar, o que se enten-
de por pesquisa qualitativa em geral e porque sob esse conceito cai a temtica da
triangulao de mtodos, bem como, compreender qual o significado (ou os
significados) de uma proposta metodolgica que se queira ser uma avaliao
por triangulao de mtodos, em termo de concepes, fundamentos, procedi-
mentos e tcnicas.

2. A pesquisa qualitativa em geral e o lugar da triangulao de mtodos

Denzin & Lincoln (2006, p.15) mostram que desde a dcada de 1920 a
Escola de Chicago j determinara (...) a importncia da investigao qualitativa
para o estudo da vida de grupos humanos. Tal importncia foi assumida e disse-
minada em curto perodo de tempo por meio das mais diferentes disciplinas das
cincias sociais e comportamentais. No entanto, no h uma unicidade de vozes
sobre o que essa investigao qualitativa nem como faz-la, o que dificulta e
enriquece a sua definio conceitual. Assim, autores como Denzin & Lincoln
(2006), diante dessas dificuldades, e conscientes da necessidade da triangulao
de mtodos, decidiram criar no uma definio, mas um esquema conceitual
que desse conta genrica e inicialmente do que se compreenda por isso. Esse
esquema nos remete pesquisa qualitativa como um processo multicultural
e dentro de um campo histrico complexo, com mltiplos significados de acordo
com os diversos momentos histricos:

(...) a pesquisa qualitativa uma atividade situada que localiza o observador no


mundo. Consiste em um conjunto de prticas materiais e interpretativas que do
visibilidade ao mundo. Essas prticas transformam o mundo em uma srie de
representaes, incluindo as notas de campo, as entrevistas, as conversas, as
fotografias, as gravaes e os lembretes. Nesse nvel, a pesquisa qualitativa

Cincias Humanas em Revista - So Lus, V. 5, n.1, julho 2007 45


Wildoberto Batista Gurgel
_________________________________________________________________
envolve uma abordagem naturalista, interpretativa, para mundo, o que significa
que seus pesquisadores estudam as coisas em seus cenrios naturais, tentando
entender, ou interpretar, os fenmenos em termos dos significados que as
pessoas a eles conferem (DENZIN; LINCOLN, 2006, p.17).

Tal definio deve ser tratada e assumida aqui como ela mesmo tem-se
pretendido: genrica e inicial. Devido a essas propriedades, ela no d conta
de todas as realidades que caem sob o conceito de pesquisa qualitativa, mas
suficiente para abrir o debate sobre a questo da triangulao de mtodos, que
comeou com Denzin (1970) justamente indagando qual a proposta metodolgica
da pesquisa qualitativa?
Atualmente, uma das respostas possveis essa questo, e que passou a
fazer parte desse debate, fora formulada por Nelson & Treichler & Grossberg
(1992, p.4). Para elas, a pesquisa qualitativa um campo interdisciplinar,
transdisciplinar e, s vezes, contradisciplinar, que atravessa as humanidades, as
cincias sociais e as cincias fsicas. Isso significa que inexiste a proposta
metodolgica das pesquisas qualitativas, mas existem diversas propostas
metodolgicas que caem sob o conceito de qualitativa. Ora, a soma destas
premissas faz justamente com que a metodologia das pesquisas qualitativas
seja muitas coisas ao mesmo tempo. E, em razo disso, o foco dessas pesquisas
multiparadigmtico, tencionando entre uma sensibilidade geral, interpretativa,
ps-experimental, ps-moderna, feminista e crtica, por um lado; e concepes
da experincia humana e de sua anlise mais restritas definio positivista,
ps-positivista, humanista e naturalista; por outro.
Justamente por isto, Samaja (1995) chama a ateno para uma questo
particular que nos interessa quando se fala em interdisciplinaridade e
multiparadigmas. A saber, que a combinao de teorias e mtodos sempre
desigual, fazendo com que na prtica possa existir a supremacia de uma discipli-
na sobre as outras. O que significa dizer que a triangulao de mtodos no
uma proposta unssona, pois, nem todos que a evocam ou a praticam usam o
mesmo significado subsumido sob esse conceito. Nem toda triangulao de
mtodos ocorre da mesma forma. Ao contrrio, como preconizam Deslandes
& Assis (2002), a integrao entre quantitativo e qualitativo pode ser reali-
zada de vrias formas, dentre as quais elas destacam a integrao por predom-
nio, justaposio ou por dilogo, que dependem da construo do desenho
da pesquisa e dos sujeitos envolvidos nesse processo.
A primeira, predomnio, marcada pela prioridade de uma das aborda-
gens metodolgicas, em geral, a quantitativa nas pesquisas de sade e a qualita-
tiva nas pesquisas sociais, de modo que se fala em abordagem primria e em
abordagem suplementar. A outra, justaposio, marcada pela ausncia de
prioridade de uma das abordagens metodolgicas, havendo uma integrao en-
tre ambas. Nesta situao, as abordagens so justapostas naquilo em que con-
cordam e se ignoram as diferenas e particularidades de cada uma. Interessa ao

46 Cincias Humanas em Revista - So Lus, V. 5, n.1, julho 2007


A triangulao em debate
_________________________________________________________________
pesquisador somente os elementos em comum fornecidos por essa unio. E, a
ltima, dilogo, marcada pela integrao entre as abordagens, desde o dese-
nho da pesquisa e construo do objeto at a confeco do relatrio final.
As tenses que existem entre essas abordagens no eliminam nem dimi-
nuem a capacidade cientfica e crtica dessas pesquisas, ao contrrio, enrique-
cem-na e a definem como tal, pois, no h como preferir ou preterir uma prtica
metodolgica em relao a outra dentro da triangulao de mtodos, uma vez
que ela no pertence, nas palavras de Bourdieu (2005, p.183-202), a uma nica
rea do saber. Apesar disso, ainda existem posturas restritivas que defendem
a existncia apenas da pesquisa qualitativa, e nunca quantitativa. Ou seja,
como defendem Nelson & Treichler & Grossberg (1992, p.4), que as mais diver-
sas prticas metodolgicas geram apenas a possibilidade de importantes insights
e conhecimentos para construirem a explicao qualitativa. No entanto, a
maioria das posturas epistemolgicas atuais so mais dialticas e defendem que
no se pode afirmar a existncia de uma pesquisa cujo corpo ou conjunto de
prticas metodolgicas seja exclusivamente qualitativo, bem como, nas pala-
vras de Minayo et al (2005) no se pode afirmar que existam tcnicas exclusi-
vas da pesquisa quantitativa. H ainda outras postura, digamos, mais
integracionistas, como as de Denzin & Lincoln (2006, p.20-21), que defendem a
bricolagem, na qual os pesquisadores qualitativos se utilizam de muitas prti-
cas metodolgicas, oriundas das mais diversas reas do saber. Descartemos a
primeira postura, por sua radicalidade, e consideremos as duas ltimas, por seu
esprito mais dialtico.
Foram raciocnios desses dois ltimos tipos que levaram Flick (1998) a
afirmar que inerente pesquisa qualitativa, em razo do seu foco, uma
multiplicidade de mtodos. O que no significa s-la uma simples combinao
de mltiplas prticas metodolgicas, materiais empricos, perspectivas e obser-
vadores em um nico estudo. Na tica de Flick (1998, p.231), essa combinao
necessria, no sentido de que da sua prpria essncia, em virtude do rigor,
do flego, da complexidade, da riqueza e da profundidade que o conhecimento
das realidades pesquisadas exigem. Assim, para esse autor (1998, p.230), a
triangulao de mtodos no uma ferramenta metodolgica ou uma estrat-
gia de validao, , na verdade, uma alternativa para a validao, uma vez que a
realidade objetiva nunca pode ser plenamente captada. Mas, digamos que a pos-
tura de Flick uma postura essencialista, bastante forte a favor da triangulao
de mtodos, e que nem todos que so a favor da triangulao de mtodos tm
essa postura. So os casos, por exemplo, de Denzin (1970) de Minayo & Sanches
(1993), de Samaja (1995), de Minayo et al. (2005) e de Denzin & Lincoln (2006)
que, apesar de defenderem o carter ontolgico da triangulao de mtodos,
relativizaram-no ao acrescentar-lhe uma dimenso pragmtica e outra
epistemolgica.
A primeira dimenso decorre de uma necessidade prtica do pesquisador
quando na anlise dos dados produzidos pelos vrios instrumentos, em vrias

Cincias Humanas em Revista - So Lus, V. 5, n.1, julho 2007 47


Wildoberto Batista Gurgel
_________________________________________________________________
perspectivas. Pois, o trabalho solitrio do antigo pesquisador cede lugar ao traba-
lho em equipe, no qual a interdisciplinaridade oferece mais oportunidades de
compreenso que a anlise unidisciplinar. claro que, como lembram Minayo et
al. (2005, p.32) e Minayo (2006, p.365), essa interdisciplinaridade depende da
existncia da capacidade de abertura e dilogo das pessoas que compem a
equipe. Que, segundo Minayo et al. (2005, p.46) est em dois nveis: no nvel da
habilidade de lidar com teorias e mtodos diferentes, ou mais especificamente,
de um profundo respeito aos campos disciplinares, bem como da relativizao
da viso fragmentada de cada um deles. Essa primeira tese parece advir do
trabalho de Denzin (1970) que enfatiza a insuficincia de um nico mtodo para
dar conta das demandas das realidades pesquisadas. No entanto, Minayo et al.
(2005, p.46), acrescentam um segundo nvel, quando mescla a questo terico
metodolgica com a capacidade de lidar com pessoas diferentes, ou a crena
na capacidade dialgica dos pesquisadores frente a propostas tericas e
metodolgicas diferentes e com sujeitos que atuam no mundo da vida.
A segunda dimenso decorre do desejo de superar as dicotomias entre o
que foi atribudo ao qualitativo e ao quantitativo. Essa dupla natureza com-
pe uma nica e mesma realidade, a da pesquisa cientfica, que, no entendimento
de Samaja (1995), dialtica, e como tal, opera por triangulao de mtodos.
Minayo (2005; 2006) tambm pensa nessa direo quando remete a Kant as
bases filosficas da sua proposta de triangulao de mtodos, uma vez que as
idias dele fundamentariam a possibilidade de articulao de estudos de magni-
tude e de compreenso de forma complementar. Isto significa, nas palavras de
Minayo (2006, p.364), que tem-se buscado uma superao dialtica sobre o
(...) objetivismo puro, em funo da riqueza de conhecimento que pode ser
agregada com a valorizao do significado e da intencionalidade dos atos, das
relaes e das estruturas sociais. No entanto, Minayo et al. (2005, p.95) no
acreditam que por meio desse tipo de superao, os termos de uma proposio
que foram superados por outros com maior poder de explicao, desapaream;
mas, ao contrrio, so subsumidos na nova formulao explicativa. Na sua tica
(MINAYO et al., 2005, p.31), a superao dialtica, rene, portanto, na mes-
ma tarefa investigativa, dados subjetivos e dados objetivos, no qual o poder de
explicao de cada um no desaparece, mas subsumido na explicao
triangulada.
Posto dessa forma, a triangulao de mtodos coerente com o que,
nas palavras de Denzin (1970), aparece como uma opo pela compreenso
em profundidade do fenmeno no lugar de uma opo pelo conhecimento ob-
jetivo inalcanvel. tambm, nas palavras de Denzin & Lincoln (2006) uma
opo terminolgica para o antigo termo bricolagem com o qual os metodlogos
classificam, ainda, essa multiplicidade de prticas metodolgicas combinadas.
Mas , sobretudo, como quer Richardson (1998), um instrumento de iluminao
da realidade sob vrios ngulos, observada como uma forma cristalina. a ex-
posio simultnea de realidades mltiplas, refratadas.

48 Cincias Humanas em Revista - So Lus, V. 5, n.1, julho 2007


A triangulao em debate
_________________________________________________________________
Como toda proposta metodolgica, a triangulao de mtodos tambm
precisa ser testada. O campo no qual ela vem sendo constantemente desafiada
o da avaliao de polticas e programas sociais, por meio de uma avaliao
por triangulao de mtodos, que passaremos a examinar.

3. A avaliao por triangulao de mtodos: concepo, fundamentos,


procedimentos e tcnicas

Examinar uma proposta metodolgica que se pretende uma avaliao


no deixa de ser, em certo sentido, tambm uma avaliao da avaliao, ou
uma meta-avaliao, entendida, conforme o estudo de Silva e Silva (2001,
p.61) como uma avaliao do desenho da pesquisa avaliativa, procedimentos e
tcnicas utilizadas. O que precisa de alguns esclarecimentos prvios.
O primeiro deles diz respeito natureza das avaliaes. Aceita-se aqui a
distino das avaliaes em trs tipos-ideais, apresentada por Silva e Silva (2001,
p.80-85): a avaliao poltica da poltica, a avaliao de processo e a avali-
ao de impacto. O primeiro tipo um modelo de avaliao centrado na fase
de formulao da poltica ou planejamento do programa. O segundo est mais
associado ao processo de implementao de uma dada poltica, buscando, sobre-
tudo, aferir a eficcia de um programa. E, o terceiro, analisa as efetivas mu-
danas quantitativas e qualitativas ocorridas em uma realidade especfica que foi
alvo da implementao de um programa.
O segundo esclarecimento diz respeito proposio de que nem todas as
avaliaes, no importa de quais tipos, tm a mesma validade cientfica. preci-
so considerar a existncia de avaliaes mais profundas at aquilo que Arretche
(2001a, p.46) chama de avaliaes ingnuas. Ou ento, considerar o movi-
mento, de acordo com Silva e Silva (2001, p.59-62), que vai de avaliaes ver-
dadeiras a pseudo-avaliaes, passando por quase-avaliao, avaliao
centrada nos objetivos, avaliao compreensiva etc. Nesses casos, as avali-
aes devem ser consideradas de acordo com a sua capacidade crtica de fazer
e sustentar juzos de valor aplicveis realidade investigada, e no simplesmente
realizar uma pesquisa sobre polticas e programas sociais.
Para o terceiro esclarecimento, nem todas as avaliaes avaliam as mes-
mas coisas, nem do mesmo modo, nem no mesmo interstcio de tempo. Algumas
avaliaes, na tica de Arretche (2001b, p.32-36), esto centradas em critrios
como eficincia, eficcia e efetividade, outras ainda, conforme Silva e
Silva (2001, p.54-55), esto mais relacionadas ao tempo, como as avaliaes
ex-ante e ex-post, ou ento retrospectiva, prospectiva, formativa,
contnua, integrativa.
Em suma, a pesquisa avaliativa uma tarefa constituda no s por diver-
sos sujeitos, como para diversos fins e por diversos meios. E, para cada modelo
tipolgico permitem-se diversos cruzamentos, de modo que as classificaes
que fazemos dos modelos de pesquisa avaliativa so, em ltima anlise, a viso

Cincias Humanas em Revista - So Lus, V. 5, n.1, julho 2007 49


Wildoberto Batista Gurgel
_________________________________________________________________
de uma escola de avaliao (no nosso caso, a do Programa de Ps-Graduao
em Polticas Pblicas da UFMA) sobre esses modelos.

3.1 Concepes fundamentais da avaliao por triangulao de mtodos

Em The research act in sociology, Denzin (1970, p.297-313) traz do


interacionismo simblico para o campo da avaliao de programas sociais, o
conceito de triangulation, para significar, entre outros sentidos, o de uma
combinao e cruzamento de mltiplos pontos de vista, a tarefa conjunta de
pesquisadores com formao diferenciada, a viso de vrios informantes e o
emprego de uma variedade de tcnicas de coletas de dados que acompanham o
trabalho de investigao na pesquisa qualitativa. Essa ser uma das concepes
dominantes nos discursos sobre triangulao de mtodos, bem como uma das
que vai influenciar fortemente as propostas de avaliao por triangulao de
mtodos mais conhecidas no Brasil, tais como as de Minayo, Landim, Deslandes,
Victora e Tanaka.
Antes da publicao de The research act in sociology, Campbell &
Fiske (1959, p.81-104) oscilavam entre o uso de dois termos para designar o
mesmo sentido que tomaria o termo triangulao: convergent and discriminant
validation. Mas, j em 1973 com a reedio de The research act in sociology,
e mais tarde, em 1979, com Jick, o termo triangulation ser preferido nas
pesquisas sociais. A importncia do trabalho de Jick (1979, p.602) consiste em,
principalmente, pensar numa forma prtica e simples de fazer triangulao de
mtodos. Pensa-a como o trabalho de articular teorias, estratgias, tcnicas e
instrumentos das abordagens quantitativas e qualitativas, bem como estabe-
lecer ligaes entre descobertas obtidas por fontes diversificadas. O que difere
sutilmente daquela proposta apresentada por Denzin (1970), uma vez que deixa
de fora o elemento humano e se atm mais triangulao somente dos mtodos.
Diz-se que a sua preocupao mais epistemolgica, sem considerar os ele-
mentos psicolgicos, que j apareceram tanto em Campbell & Fiske (1959) quanto
em Denzin (1970).
No mesmo sentido que Jick (1979), Flick (FLICK, 1998, p.229-231) pen-
sa a triangulao de mtodos como uma estratgia que acrescenta rigor, fle-
go, complexidade, riqueza e profundidade a qualquer investigao. Essa estrat-
gia decorrente de uma carncia do isolamento metodolgico para a captao
da realidade, bem como de uma natureza das prprias pesquisas qualitativas. No
entanto, como j se disse antes, ela no uma estratgia de validao, mas uma
alternativa validao. Desse modo, a noo elaborada por Flick (1998) retoma
tambm alguns princpios daquela elaborada por Denzin (1970), principalmente
os de que a triangulao de mtodos uma noo aberta. Isto , no h aquilo
que Kant (2001, p.49-51) chamou de estrutura conceitual sinttica que desig-
ne o termo triangulao de mtodos, mas h usos que dele fazemos para re-
presentar uma multiplicidade combinada de tcnicas, com fins de encontrar re-

50 Cincias Humanas em Revista - So Lus, V. 5, n.1, julho 2007


A triangulao em debate
_________________________________________________________________
sultados mais complexos e aproximativos da realidade sem os quais no seria
possvel. O que significa dizer que a proposta de Flick em coerncia com a de
Denzin enfatiza que cada mtodo isolado no possui elementos suficientes para
responder a todas as questes que as investigaes concretas suscitam. A
triangulao de mtodos , portanto, um instrumento que permite iluminar a
realidade sob vrios ngulos, como um prisma, demonstrando maior claridade
terica e aprofundamento da interdisciplinaridade, interativa e intersubjetiva.
Noutras palavras, a triangulao de mtodos uma bricolagem, e,
conseqentemente, a avaliao por triangulao de mtodos uma avaliao
por bricolagem. Por bricolagem, de acordo com Becker (apud DENZIN;
LINCOLN, 2006, p.18), se entende a opo em pesquisa do emprego de quais-
quer estratgias, mtodos ou materiais de um determinado ofcio que estejam,
legal e eticamente, acessveis ao pesquisador. Inclusive, em havendo necessida-
de de que novas ferramentas ou tcnicas sejam inventadas ou reunidas, assim o
pesquisador o far. Desse modo, s faz sentido pensar o significado de avalia-
o associado triangulao de mtodos se esse for o de uma ao criativa,
responsvel e em profundidade. justamente isso que Minayo et al. (2005,
p.24-25) procuram fazer quando creditam avaliao por triangulao de m-
todos o predicado atributivo de ter algumas qualidades da investigao
avaliativa, que se ope avaliao normativa. Sendo que, por investigao
avaliativa compreendem aquele tipo de avaliao que pretende analisar a
pertinncia, os fundamentos tericos, a produtividade, os efeitos e o rendimento
de uma interveno, assim como as relaes existentes entre a interveno e o
contexto no qual se situa. Tal creditao deve-se crena de que a avaliao
um processo em que se integram avaliadores e avaliados em busca do compro-
metimento e do aperfeioamento dos indivduos, grupos, programas e institui-
es. No entanto, no se pode fechar uma relao de identidade entre todos os
atributos da investigao avaliativa com os da avaliao por triangulao de
mtodos, como tambm no se pode afirmar que a avaliao por triangulao
de mtodos seja uma avaliao participativa. Quanto primeira, de acordo
com Minayo et al. (2005, p.28), esta lhe acrescenta elementos como a observa-
o e a anlise da dinmica visvel e subjacente dos atores sociais envolvidos no
processo e suas representaes, tanto em relao ao sob julgamento como
no interior do prprio processo de avaliao. Quanto outra, esta se lhe dife-
rencia por no poder ser estritamente identificada com auto-avaliao ou ava-
liao interna ou com procedimentos participativos no interior dos processos
avaliativos, que so realidades inerentes avaliao participativa.
Com esses modelos, a proposta de avaliao por triangulao de mto-
dos se relaciona de forma integracional. Isto , ela adota os elementos da ava-
liao participativa, assim como os da investigao avaliativa, mas supera-os
em amplitude e complexidade ao conjugar, nas palavras de Minayo et al. (2005,
p.28), a presena do avaliador externo; as abordagens quantitativas e qualitati-
vas e, de forma relevante, a anlise do contexto, da histria, das relaes, das

Cincias Humanas em Revista - So Lus, V. 5, n.1, julho 2007 51


Wildoberto Batista Gurgel
_________________________________________________________________
representaes e a participao. Dessa compreenso saiu uma das propostas
de avaliao por triangulao de mtodos, justamente aquela elaborada por
Minayo et al. (2005, p.29), que veio a se tornar uma das propostas mais citadas
no contexto brasileiro da pesquisa avaliativa. A saber:

Pode-se compreender avaliao por triangulao de mtodos como expresso


de uma dinmica de investigao e de trabalho que integra a anlise das
estruturas, dos processos e dos resultados, a compreenso das relaes
envolvidas na implementao das aes e a viso que os atores diferenciados
constroem sobre todo o projeto: seu desenvolvimento, as relaes hierrquicas
e tcnicas, fazendo dele um constructo especfico.
Alm da integrao objetiva e subjetiva no processo de avaliao, essa proposta
inclui os atores do projeto e do programa no apenas como objetos de anlise,
mas, principalmente, como sujeitos de auto-avaliao.

Pode-se inferir, a partir dessa concepo, que a avaliao por triangulao


de mtodos no valoriza apenas os constitutivos da pesquisa qualitativa, mas
valoriza igualmente alguns constitutivos da pesquisa quantitativa, como a
quantificao, por exemplo. Por quantificao Minayo (2006, p.367) com-
preende a ao de indicao e a parte da qualidade dos fenmenos, dos
processos e dos sujeitos sociais, marcados por estruturas, relaes e subjetivida-
de, culturalmente especficas de classes, grupos e segmentos profissionais, g-
nero, etnia e idade. Bem como, pode-se inferir ainda que, por ser compreendida
por Minayo et al. (2005, p.29), como expresso de uma dinmica de investiga-
o e de trabalho e como, at certo ponto, uma investigao avaliativa, a
avaliao por triangulao de mtodos, na verdade, uma tcnica e uma es-
tratgia investigativa (MINAYO et al., 2005, p.19). Isto colocaria essa proposta
no mesmo nvel conceitual das propostas de Jick (1979) e Flick (1998), principal-
mente quando Minayo et al. (2005, p.71) dizem que a triangulao no um
mtodo em si. uma estratgia de pesquisa que se apia em mtodos cientficos
testados e consagrados, servindo e adequando-se a determinadas realidades,
com fundamentos interdisciplinares. E, em sendo isso verdadeiro, o conceito
ltimo de avaliao por triangulao de mtodos o de ser, no sentido genri-
co, um processo sistemtico de fazer perguntas sobre o mrito e a relevncia
de determinado assunto, proposta ou programa (MINAYO et al., 2005, p.29), e
no sentido especfico, o de fazer uma anlise combinatria dos constituintes da
pesquisa qualitativa e quantitativa. Uma investigao avaliativa hbrida, portanto.
Mas, parece haver um paradoxo nessa definio. Isso porque, na prtica
avaliativa, a avaliao por triangulao de mtodos no pensada como uma
avaliao para qualquer fim. Ao contrrio, nos passos de Penna Firme, Minayo
et al. (2005, p.29) propem que o processo de avaliao de programas e proje-
tos sociais geralmente tem, como sentido mais nobre, fortalecer o movimento de
transformao da sociedade em prol da cidadania e dos direitos humanos. Des-
se modo, no se pode afirmar que ela seja apenas uma tcnica ou uma estra-
52 Cincias Humanas em Revista - So Lus, V. 5, n.1, julho 2007
A triangulao em debate
_________________________________________________________________
tgia investigativa, como afirmaram Jick (1979) e Flick (1998), mas deve-se
dizer que uma dinmica, como afirma Minayo et al. (2005 p.29), e como tal,
faz parte de um processo scio-poltico. E, em no sendo uma mera tcnica ou
uma estratgia investigativa, a avaliao por triangulao de mtodos deve
destacar quatro dimenses: utilidade, viabilidade, tica e preciso tcnica.
a) Utilidade. Trata-se de uma dimenso pragmtico-objetiva da pesquisa,
no sentido dado por Minayo et al. (2005, p.19) de uma meta a ser
alcanada e de uma essncia da atividade avaliativa, pois jamais se
deve empreender uma avaliao intil. Que , por sua vez, trata de
evidenciar a eficincia, a eficcia e a efetividade na orientao das
propostas de interveno social, no atendimento aos destinatrios e
nos efeitos multiplicadores que elas possam apresentar (MINAYO
et al., 2005, p.20);
b) Viabilidade. Trata-se de uma dimenso que calcula a pertinncia da
poltica ou do programa do ponto de vista poltico, prtico e financeiro.
Isto , imagina-se que a viabilidade de uma poltica ou de um programa
esteja associada eficincia, eficcia e efetividade das suas
propostas, menos do que s necessidades sociais. Mas, sem a devida
equao entre as ofertas polticas e as necessidades sociais, a
avaliao poltica da poltica pode ficar preterida por essa proposta
metodolgica. E, ao ser preterida, mais difcil ser atender plenamente
o objetivo de uma avaliao, tal como a prpria Minayo et al. (2005,
p.20), o concebem, ou seja, o de compreender o que contribui para o
xito dos programas, projetos e servios; o que possibilita seu alcance
e questiona seus limites;
c) tica. Trata-se da dimenso axiolgica, que envolve tanto os valores
morais da avaliao quanto os polticos. Afinal, avaliar no
simplesmente julgar, mas julgar a partir de determinado lugar social.
Por isso, Minayo et al. (2005, p.20) dizem que a avaliao por
triangulao de mtodos atua diretamente na orientao das
propostas de interveno social, no atendimento aos destinatrios e
nos efeitos multiplicadores que elas possam apresentar. Nesse
sentido, a avaliao por triangulao de mtodos possui um trip
axiolgico a ser observado: as propostas, os destinatrios e as
conseqncias dessa ao proposta. Com isso, pode-se dizer que,
pelo menos tal como Minayo et al. (2005) propem, existe um
compromisso entre essa proposta metodolgica e a tica
conseqencialista de Singer (2002), o que pode ser decorrente de
uma outra proximidade: a da experincia originria da avaliao por
triangulao de mtodos com o campo das pesquisas em sade. E
essa, por duas vertentes: a da tica feminina e a da biotica. A
primeira ligada s pesquisas de Denzin (1970) e de Denzin & Lincoln
(2006); a outra, ligada s pesquisas de Minayo e consolidao dos

Cincias Humanas em Revista - So Lus, V. 5, n.1, julho 2007 53


Wildoberto Batista Gurgel
_________________________________________________________________
tratados internacionais e resolues nacionais sobre a tica em pesquisa
envolvendo seres humanos. Em ambas, h uma opo pelo sujeito da
pesquisa como o foco axiolgico a ser considerado, donde se pode
postular que a proposta metodolgica de avaliao por triangulao
de mtodos preconizada por Minayo et al. (2005, p.19), est calcada
numa tica que ressalta o respeito aos valores dos interessados.
d) Preciso tcnica. Pelo fato de ser tecnicamente adequada, a
avaliao por triangulao de mtodos, nas palavras de Minayo et
al. (2005, p.20) permite o acompanhamento do desenrolar de uma
proposta e subsidia a correo de rumos e a re-orientao de
estratgias de ao. Nesse sentido, essa proposta se assemelha
bastante prtica de assessoria e monitoramento (assessment and
monitoring) das polticas pblicas e programas sociais, tal como se
encontra na teoria de Donabedian (1980).
Em suma, pode-se dizer que a sntese metodolgica do modelo proposto
por Minayo et al. (2005, p.20), est alicerada em trs valores da ps-
modernidade: a tica conseqencialista, a tcnica e a responsabilidade
social. O primeiro est associado revoluo tica de Singer (2002, p.9-24);
o segundo, revoluo tecnolgica, da qual fala Santos (2006, p.24-26); e, o
terceiro, reforma neoliberal, da qual falam autores como Jameson (2006,
p.27-90) e Antunes (1995). A insero dessa proposta no contexto da ps-
modernidade nos remete a duas questes j levantadas anteriormente: a da
crise contempornea das cincias e a do lugar que as pesquisas avaliativas ocu-
pam no contexto de reestruturao do capital. Remete-nos, portanto, pergunta
pelos seus fundamentos.

3.2 Fundamentos da avaliao por triangulao de mtodos

A fundamentao da proposta de avaliao por triangulao de mto-


dos plural e atravessa diversas reas do saber, passando por questes de
ordem histrica, social, poltica, epistemolgica, moral, psicolgica e econmica.
Desse modo, no se pode afirmar que seu fundamento seja essa ou aquela teoria
ou prtica isoladamente. O que se apresenta a seguir apenas um esboo e um
esforo de trazer fala algumas possibilidades de triangular fundamentos
explicativos para essa proposta de avaliao de polticas e programas sociais.

a) Fundamentos contextuais: novos paradigmas cientficos

A avaliao por triangulao de mtodos , na fase atual de desenvol-


vimento da pesquisa qualitativa, um dos seus principais terrenos. Um terreno que
Denzin & Lincoln (2006, p.37) denominam de crtico. Crtico porque o
ponto de encontro da teoria, do mtodo, da prxis, da ao e das polticas. Ou
seja, um campo conflituoso. Mas, tais conflitos so parte integrante e alimentadora

54 Cincias Humanas em Revista - So Lus, V. 5, n.1, julho 2007


A triangulao em debate
_________________________________________________________________
das crises nas quais se encontram as epistemologias contemporneas, sejam
elas no nvel da representao, da legitimao ou da prxis das discipli-
nas humanas.
A crise de representao acontece porque a noo de objetividade,
como captao direta da experincia vivida, questionada, desde Weber (1993,
p.107-154), pela crena de que tal experincia no existe per si. Ela assumida,
como propusera Bourdieu (2005, p.183-201; 295-361), na qualidade de uma cri-
ao no contexto social descrito/escrito pelo pesquisador. Isto , a representa-
o s tem existncia no para si, como uma obra literria criada pelo prprio
pesquisador. Seus personagens so atores de/em um mundo criado para que
suas aes faam sentido.
A crise de legitimao est associada tanto ao sentido de objetivida-
de quanto aos de validao, capacidade de generalizao e confiabilidade,
que por sua vez, de acordo com Denzin & Lincoln (2006, p.31-32), so clssicos
avaliadores do status cientfico de uma rea do saber. Essa crise leva o
epistemlogo a redesenhar o modelo de sustentabilidade cientfica para as pes-
quisas qualitativas sem que passem por tais critrios. A primeira parte desse
modelo, na tica de Demo (1995, p.20-21), deve atender a certas condies
internas (coerncia, consistncia, originalidade e objetivao). A segunda, a
condies externas, que correspondem dimenso crtica da prxis
(intersubjetividade, comparao crtica, divulgao, reconhecimento generaliza-
do e relacionamento com outras esferas do conhecimento).
A avaliao por triangulao de mtodos possui, portanto, uma dimen-
so epistemolgica que concorre para a criao de alternativas s crises no
modelo das pesquisas qualitativas. No entanto, essa no a nica realidade
motivacional dessa abordagem. H outras dimenses dentro desse territrio.
Pois, como sugere Minayo et al. (2005, p.21), no perodo atual tambm existe
uma proliferao de atividades avaliativas, de modo que se diz at que a avali-
ao de polticas sociais passou a ser intensamente valorizada. O que, na tica
dessa autora, decorrente de mudanas profundas no paradigma das relaes
sociais de produo, cujas caractersticas so o acelerado crescimento do fluxo
de informaes, de economia de escala e de focalizao de aes - conhecido
tambm, nas palavras de Antunes (1995), como reestruturao produtiva do
capital, ou, nas palavras de Jameson (2006), como ps-modernismo. Desse
modo, a avaliao de programas e polticas , ela mesma, um acontecimento
poltico. E, dizer isto o mesmo que dizer, nas palavras de Gomes (2001, p.17-
35) que ela tem dupla serventia. Por um lado, a preocupao com as avaliaes
somente um desafio social porque, nas palavras de Minayo et al. (2005,
p.21) as decises de investimento so muito complexas, difusas e marcadas por
fortes componentes culturais e polticos, exigindo um desenho de instrumentos
que valorizem toda essa gama de intervenientes. E, por outro lado, numa pers-
pectiva de cidadania, as avaliaes podem ser, nas palavras de Silva e Silva
(2001, p.47), um instrumento eficaz para controle social das polticas sociais.

Cincias Humanas em Revista - So Lus, V. 5, n.1, julho 2007 55


Wildoberto Batista Gurgel
_________________________________________________________________
Sendo isso verdadeiro, o que motivaria algum a escolher essa proposta e
no outra? Na tica de Minayo et al. (2005, p.71), essa proposta ou abordagem
terica deve ser escolhida quando contribuir para aumentar o conhecimento do
assunto e atender aos objetivos que se deseja alcanar. Deve haver algo, na
prtica, que faa a diferena a favor dessa proposta, do contrrio, no h nenhu-
ma sentido em preferi-la.

b) Fundamentos pragmticos: capacidade dialgica e dialtica de trabalho em equipe

Enquanto uma investigao avaliativa, a avaliao por triangulao de


mtodos tem duas condies imprescindveis (MINAYO et al, 2005, p.32-
33), que as interpreto como: uma de ordem pragmtica (os elementos subjetivos)
e outra de ordem epistemolgica (seus fundamentos cientficos).
A primeira est ligada, digamos, ao esprito de equipe, de pessoas dis-
postas emocional e mentalmente ao dilogo e a experimentar a possibilidade de
complementao entre diferentes mtodos e disciplinas (MINAYO et al., 2005,
p.32; MINAYO, 2006, p.365). Ou ento, quando no mnimo duas pessoas, com
abordagens diferentes (quantitativa versus qualitativa), cada uma defen-
dendo o seu ponto de vista sejam capazes de relativizarem-no, uma vez que so
crentes de que s quando os mesmos so utilizados dentro dos limites de suas
especificidades que podem dar uma contribuio efetiva para o conhecimento
da realidade (MINAYO; SANCHES, 1993, p.239).
O que pode dar unidade a esse esprito de equipe o objeto, como
terceiro termo em torno do qual aprofundam-se as reflexes em busca de
compreend-lo e explic-lo em suas mltiplas dimenses (MINAYO et al.,
2005, p.32). Por isso, postula-se que avanos importantes na rea de conheci-
mento podem ocorrer por meio da triangulao de mtodos quando uma equi-
pe de pesquisadores aceita o desafio de um trabalho cooperativo (MINAYO,
2006, p.372).
Na prtica isso significa, como j foi mencionado anteriormente, a articu-
lao dialtica entre trs princpios: 1) Respeito aos campos disciplinares; 2)
Relativismo do conhecimento isolado; 3) Capacidade dialgica (MINAYO, 2006,
p.372; MINAYO et al., 2005, p.46). No entanto, no apenas a subjetividade
dos pesquisadores que deve ser considerada. A proposta inclui igualmente uma
ateno aos atores contactados em campo, que devem ser tratados no ape-
nas como objetos de anlise, mas, principalmente, como sujeitos de auto-avalia-
o, uma vez que so introduzidos na construo do objeto de estudo (MINAYO,
2006,. p.361-362).
Se a primeira condio est ligada ao esprito de equipe e subjetivi-
dade dos atores contactados em campo, a segunda est ligada competncia
individual, isto , competncia disciplinar de cada componente do grupo
(MINAYO et al., 2005, p.31). Pois, essa competncia individual que permi-
te melhor conhecer o objeto, por meio dos referenciais terico-metodolgicos

56 Cincias Humanas em Revista - So Lus, V. 5, n.1, julho 2007


A triangulao em debate
_________________________________________________________________
mais adequados e competentes. preciso reconhecer as diferenas e peculiari-
dades de cada abordagem cientfica:

As abordagens quantitativas e qualitativas exigem teorias e mtodos prprios e


se prestam a fins de natureza diferenciada: as primeiras visam a dimensionar e a
quantificar os dados de processo ou de resultado. E as segundas so apropriadas
para aprofundar a histria; captar a dinmica relacional de cunho hierrquico,
entre pares ou com a populao; compreender as representaes e os smbolos
e dar ateno, tambm, aos sinais evasivos que no podem ser entendidos por
meios formais (MINAYO, 2006, p.369).

Esse conhecimento fundamental para delimitar o que importante e


como importante considerar de cada rea cientfica e de cada abordagem
metodolgica. Pois, no se trata de uma simples compilao de mtodos, mas de
um processo de integrao no qual se respeita no s as naturezas
metodolgicas quanto a do objeto que se investiga:

Desejamos reafirmar que, no processo de integrao, os mtodos tm suas


prprias identidades, e devem permanecer assim, desde o momento da
idealizao do projeto at a ocasio de expor o relatrio final. Ocorre de os
estudos que articulam as duas abordagens poder perder em sofisticao e
detalhamento desses mtodos adotados, motivo pelo qual concordamos quando
autores da rea escrevem ser importante, mais que integrar, certificar-se da
contribuio dessa integrao para o objeto investigado, bem como da clareza
sobre que tipo de anlise ela possibilita construir (LANDIM et al., 2006, p.54).

Isso tudo junto leva Minayo a preconizar a proposta de avaliao por


triangulao de mtodos como uma forma de trabalho dialtica ou uma postu-
ra dialtica (MINAYO, 2006, p.360) e dialgica (MINAYO et al. 2005, p.33),
que permite a integrao dos contrrios e a distino entre eles.

c) Fundamentos tericos: teoria geral dos sistemas, sociologia compreensiva,


dialtica, teoria da auto-organizao e da complexidade

Apesar de evocar em muitas passagens o horizonte filosfico kantiano e a


teoria comunicativa habermasiana (MINAYO et al., 2005, p.30-32), a estruturao
conceitual da triangulao de mtodos levantada por Minayo et al. (2005) no
fundamentada diretamente sobre o pensamento desses autores. Seja porque no
o trabalho ou a inteno deles se deterem sobre esses fundamentos filosficos, ou,
como tem sido exposto, trata-se apenas de uma proposta sem grande teorizao,
uma vez que busca apenas integrar as vantagens da avaliao tradicional com a
abordagem qualitativa e os elementos dos processos participativos (MINAYO,
2006, p.364). Desse modo, Kant e Habermas funcionam apenas como um hori-
zonte crtico no qual a proposta pode se espelhar, mas no servem para fundamen-
tar o seu arcabouo terico, a ser procurado em outro lugar.
Cincias Humanas em Revista - So Lus, V. 5, n.1, julho 2007 57
Wildoberto Batista Gurgel
_________________________________________________________________
Com isso, mediante o conceito trabalhado em Minayo et al, (2005, p.29)
e repetido em Minayo (2006, p.361-362), apresentado aqui na seo 3.1, pode-se
dizer que a proposta de avaliao por triangulao de mtodos de Minayo et
al. (2005), recupera, na verdade, algumas das teses clssicas da avaliao de
polticas pblicas e programas sociais. A primeira delas a teoria assessment
and monitoring de Donabedian (1980), cuja grande contribuio a confec-
o de um quadro conceitual para a avaliao de qualidade em sade, a partir
dos conceitos de estrutura, processo e resultado. Como esse quadro
corresponde s noes da Teoria Geral de Sistemas (input-process-output),
deve-se concluir que o primeiro elemento terico-metodolgico adotado na
triangulao a la Minayo et al. (2005) a Teoria Geral de Sistemas de
Donabedian. Tais elementos advm, provavelmente, da concepo que se tem
sobre qual deva ser a misso institucional de uma avaliao de programas.
No caso, como tal misso consiste no alcance de uma economia interna da
atuao e numa criao de uma capacidade tcnica adequada e de qualidade
(MINAYO et al., 2005, p.20), perfeitamente compreensvel porque, nesse
primeiro momento, a presente proposta seja a de uma avaliao sistmica.
J para dar conta dos dados subjetivos, a proposta evoca os princpios
da sociologia compreensiva que buscam construir os tipos de relaes das
aes e das vises envolvidas no processo de implementao das polticas ou
dos programas, pensado como um construto especfico (MINAYO et al., 2005,
p.29; MINAYO, 2006, p.361). Isto provavelmente advm da crena de que a
avaliao no apenas um evento tcnico, mas tambm ideolgico. E, ideolgi-
co no sentido de ser um processo de aprendizagem que pode subsidiar pessoas,
organizaes e grupos sociais em escolhas mais consistentes em relao aos
rumos de suas iniciativas (MINAYO et al., 2005, p.20). Portanto, como uma
ferramenta que procura responder aos interesses das instituies, de seus
gestores e de seus tcnicos (MINAYO et al., 2005, p.19).
A relao entre as duas teorias (a sistmica e a compreensiva) seria
possvel por meio de uma articulao dialtica que respeita o que h de especfi-
co em cada uma delas, bem como, as qualidades comuns entre ambas. Ou, entre
os aspectos mais positivos e os mais compreensivos da avaliao em geral. Com
isso, acredita-se ser possvel dar conta da compreenso dos dados objetivos
(indicadores, distribuio de freqncia e outros), que so inseparveis e
interdependentes dos dados subjetivos (significados, intencionalidade, interao,
participao) (MINAYO et al., 2005, p.19). Mas, no s com dialtica que se
faz uma avaliao por triangulao de mtodos. Entre suas bases
epistemolgicas se encontram tambm referncias s teorias da auto-organiza-
o e da complexidade de Morin (MINAYO et al., 2005, p.33; MINAYO,
2006, p.366), em especial, aos princpios da causalidade complexa, da organi-
zao recursiva e do discurso complexo. O que, em poucas palavras, signifi-
ca que o primeiro desses princpios uma oposio viso de linearidade entre
causa-efeito e enfatiza dimenses complexas, incalculveis interaes e inter-

58 Cincias Humanas em Revista - So Lus, V. 5, n.1, julho 2007


A triangulao em debate
_________________________________________________________________
retro-aes que os fenmenos possuem (MINAYO et al., 2005, p.33;
MINAYO, 2006, p.366). O segundo, complemento do primeiro, tambm co-
nhecido como princpio da autoproduo e da auto-organizao, cuja mxi-
ma a de que as coisas tendem a uma organizao, seja por interferncias
internas ou externas. Isto nos obriga a pensar o papel do observador e do obje-
to; da racionalidade e da emoo; da natureza e da cultura; da ordem e da
desordem; do uno e do mltiplo; da cincia e do senso comum; do pensamento e
da ao (MINAYO, 2006, p.366). O terceiro, comporta a associao entre
conceitos e noes complementares e concorrentes, buscando entender seus
diferentes nveis de desenvolvimento terico e prtico no interior das reas disci-
plinares (MINAYO et al., 2005, p.34; MINAYO, 2006, p.367).
Mas, como tudo isso pode ser posto em prtica?

3.3 Procedimentos e tcnicas da avaliao por triangulao de mtodos

Os procedimentos e tcnicas da avaliao por triangulao de mtodos


decorrem de uma slida confiana na fora de cada mtodo isolado, bem como,
na vontade de misturar, inverter e explorar as diferentes combinaes pertinen-
tes entre esses mtodos. Ou, como lembra Minayo (2006, p.371), o trabalho com
a triangulao de mtodos prev que as operaes ou etapas metodolgicas
sejam realizadas separadamente, para em seguida serem trianguladas. Cada etapa
deve ser valorizada ao mximo possvel em sua singularidade, pois dessa valori-
zao depende, num processo de encadeamento, o sucesso da avaliao como
um todo (MINAYO et al., 2005, p.43). O que significa que esse raciocnio est
na linha do de Denzin & Lincoln (2006, p.127) que do um carter de jogo a
essas combinaes. Mas, um jogo cujo objetivo deve ser sempre o de, em
mesclando os dados, obter as mesmas contradies entre os mtodos que iriam
prestar as mais poderosas informaes poltica.
Na proposta de Minayo et al. (2005, p.34), a prtica do modelo de ava-
liao por triangulao de mtodos est assentada em uma perspectiva ex-
ante, de acompanhamento e ex-post. Em termos prticos isso significa uma
anlise diagnstica situacional inicial; uma avaliao da implantao e da
implementao e, ao final, uma apreciao dos resultados. Percebe-se que nessa
proposta so valorizados os elementos associados ao processo e aos resultados,
bem como as tendncias, uma vez que os efeitos das intervenes sociais no
findam quando ela cessa. Bem como, que as trs perspectivas interagem entre
si, numa dinmica de cooperao que se faz por etapas (MINAYO, 2006,
p.367) ou passos prticos (MINAYO et al., 2005, p.36). Essas etapas podem
ser distinguidas, apenas didaticamente, em oito passos (MINAYO et al., 2005,
p.36): (1) formulao do objeto ou da pergunta referencial que vai guiar todo o
processo; (2) elaborao dos indicadores; (3) escolha da bibliografia de refern-
cia e das fontes de informao; (4) construo dos instrumentos para a coleta
primria e secundria das informaes; (5) organizao e realizao do trabalho

Cincias Humanas em Revista - So Lus, V. 5, n.1, julho 2007 59


Wildoberto Batista Gurgel
_________________________________________________________________
de campo; (6) anlise das informaes coletadas; (7) elaborao do informe
final; e, (8) entrega, devoluo e discusso com todos os atores interessados na
avaliao, visando implementao de mudanas.
O primeiro passo, formulao do objeto ou da pergunta referencial que
vai guiar todo o processo, compreende sinteticamente o trabalho de planeja-
mento ou primeira definio que orientar o trabalho posterior (MINAYO et
al., 2005, p.37). Ou o que ela chama de base-line, que consiste em reconhecer
o estado do problema em relao ao qual ocorrer a avaliao (base-line) no
incio do projeto (MINAYO et al., 2005, p.34). Isso, supondo que h uma arti-
culao dialgica entre os investigadores, agentes sociais e patrocinadores, na
qual possa ser definida a proposta de avaliao e esclarecidos cada um de seus
passos. Desse modo, devem ser observados (MINAYO et al., 2005, p.37-39):
(a) a identificao do programa que ser avaliado, os envolvidos em sua
implementao, o desenho da poltica e do programa, seu contexto, pblico-alvo,
etc; (b) os representantes dos gestores e executores, bem como os
implementadores, em especial, procurando identificar o grau de conhecimento e
de sintonia e consenso com a proposta; (c) a viso e os objetivos dos patrocina-
dores; (d) os mecanismos de interao dos clientes, participantes ou destinatri-
os; (e) os tipos de perguntas a serem feitas, optando por perguntas bsicas aos
diferentes participantes; (f) a adeso ou rejeio dos grupos avaliao, ou
partes da avaliao; (g) a discusso sobre a pergunta central a ser formulada, os
tipos de estratgia disponveis e que se recomendam e se h a necessidade de
incorporao de vrios tipos de tcnicas, que ficam a merc da complexidade
das metas, dos objetivos do programa e dos recursos destinados avaliao; e,
(h) o motivo pelo qual a avaliao foi demandada.
O segundo passo, elaborao dos indicadores, a mediao entre o que se
pergunta e quais instrumentos sero utilizados (MINAYO, 2006, p.368). Ou, a snte-
se entre o pensamento e a realidade (MINAYO et al. p.41), ou ainda, a representa-
o de um procedimento (MINAYO et al. p.41). Dado essa importncia, Minayo et
al. (2005, p.41) sugerem que os indicadores sejam construdos em conjunto, reunindo
toda a equipe e os grupos a serem avaliados. Nesse momento, podero ser alinhados
os conceitos no sentido de que se tornem unidades construdas coletivamente e sob
vrios ngulos de considerao. Pois, tais indicadores devem ter duas propriedades:
a de ser observvel e a de permitir criar procedimentos para observ-los. Isto
porque eles devem ser contextuais, relacionais e de medio da ao em si (absolu-
tos), e mais ainda, devem permitir medidas quantitativas ou qualitativas,
heuristicamente teis para a interveno.
O terceiro passo, escolha da bibliografia de referncia e das fontes de
informao, consiste na definio das fontes de informao, de tal forma
que cada indicador selecionado possa ser conhecido teoricamente e na sua ex-
presso concreta (MINAYO et al. p.41). Por fontes de informao, Minayo
et al. (2005, p.41) entendem tanto os atores sociais, quanto os documentos
instituidores e histricos, os de convnio, os instrumentos operacionais, os

60 Cincias Humanas em Revista - So Lus, V. 5, n.1, julho 2007


A triangulao em debate
_________________________________________________________________
relatrios de avaliao interna, de prestao de contas, de publicidade, entre
outros. Por atores sociais so compreendidos os formuladores institucionais,
gestores, tcnicos, populao atendida e financiadores. Ainda so
consideradas fontes de informao as leituras bibliogrficas ou reviso de lite-
ratura, cuja maior importncia consiste no apuramento do referencial terico-
conceitual e metodolgico. Isto , aprimorar o desenho da pesquisa. Com isso,
fecha-se um trip que envolve os agentes, os textos e a literatura.
O quarto passo, construo dos instrumentos para a coleta primria e
secundria das informaes (MINAYO et al. p.37), ou a definio e a elabo-
rao dos instrumentos de investigao (MINAYO et al. p.42), devem consi-
derar a cobertura do objeto em estudo no que se refere ao grupo-alvo atingido;
implementao das aes previstas; ao ambiente organizacional e ao
envolvimento dos atores (MINAYO, 2006, p.369-370). O que, s vezes, pede
instrumentos dedicados a cada uma dessas consideraes especficas, bem como,
no caso dos atores, a cada grupo de atores especficos. Isso significa que a
avaliao por triangulao de mtodos funciona, na prtica, por meio de
subprojetos, pois, uma vez que cada grupo um objeto diferente, os objetivos, os
indicadores e os instrumentos de pesquisa emprica devem ser elaborados de
forma diferenciada e especfica. Cada abordagem metodolgica (quantitativa e
qualitativa) exigem teoria e mtodos prprios e se prestam a fins de natureza
diferenciada (MINAYO et al., 2005, p.42).
O quinto passo, organizao e realizao do trabalho de campo
(MINAYO et al. p.37), ou momento do trabalho de campo (MINAYO et al.
p.42-43), uma situao peculiar na qual os pesquisadores ou trabalhadores
de campo ou investigadores de campo se encontram face a face com a rea-
lidade a ser avaliada. Esse passo exige algumas preparaes prvias ou ante-
cedentes: (a) bons conceitos, indicadores e instrumentos, bem conhecidos pelos
pesquisadores; (b) treinamento prvio; (c) existncia de uma coordenao ou
assessoria da pesquisa; experincia, formao, sensibilidade e capacidade de
mediar conflitos. Estas ltimas, alm de antecedentes, so virtudes impor-
tantes na pesquisa de campo, pois, existe sempre a possibilidade de a avaliao
ter uma repercusso negativa nos participantes da pesquisa. Minayo et ali. acre-
ditam que, dado as peculiaridades da pesquisa avaliativa, muitos participantes
se crem julgados e confrontados com os possveis resultados.
O sexto passo, anlise das informaes coletadas, consiste na orde-
nao dos dados, na sua classificao e na anlise propriamente dita (MINAYO
et al. p.43), cujo objetivo verificar a relao entre objetivos e resultados, e
tambm, analisar o uso dos insumos previstos, dimensionar as metas que foram
previamente estabelecidas para cada etapa ou passo, e ainda, os efeitos e im-
pactos, tanto os quantitativos quanto os qualitativos resultantes da poltica ou
do programa avaliado.
Denzin & Lincoln (2006, p.127) mostram que apesar da crena comum
de que a triangulao de mtodos seja uma prtica metodolgica que combina

Cincias Humanas em Revista - So Lus, V. 5, n.1, julho 2007 61


Wildoberto Batista Gurgel
_________________________________________________________________
dados obtidos da pesquisa quantitativa e da qualitativa, ela pode ocorrer tambm
em cada uma dessas pesquisas, isoladamente. o caso, por exemplo, do que
ocorre durante a anlise quantitativa dos dados, quando mltiplos itens dentro
da mesma escala medem o mesmo constructo, ou quando duas escalas diferen-
tes unem-se para medir o mesmo constructo. Essa postura tambm assumida
por Minayo et al. (2005) no que consiste na idia de que se deve realizar cada
passo separadamente e, dentro de cada passo, em cada operao (aplicao
de questionrio, tabulao, digitalizao, separao do material em diferentes
modalidades, etc). No entanto, assim como Minayo et al. (2005), Denzin &
Lincoln (2006) no defendem uma separao estanque. Isso apenas um mo-
mento da triangulao, que deve respeitar as individualidades (vcio e virtudes)
de cada abordagem metodolgica e de cada mtodo dentro de uma mesma abor-
dagem. Minayo et al. (2005, p.43-44) explicam esse movimento:

Trabalhando-se com triangulao de mtodos, est previsto que as operaes


j mencionadas sejam realizadas, primeiro, separadamente. Os que utilizam
questionrios de acordo com o desenho e o modelo adotados passam a tabular,
a digitar, a categorizar, a produzir estatsticas simples e cruzamentos, chegando,
aos poucos, a anlises capazes de transformar, em nmeros, indicadores de
processos e de resultados.
Quem faz anlise qualitativa passa a separar as diferentes modalidades dos
instrumentos aplicados e dos materiais histricos e institucionais recolhidos.
Em uma dinmica de leitura que vai do campo para as categorias analticas e
vice-versa, estabelece as bases compreensivas da unidade reflexiva, que o
objeto ou a pergunta inicial.

Nessa tica, a triangulao de mtodos tem tambm a funo de acres-


centar novos dados aos dados anteriores, como uma confirmao do que se
conseguiu com as tcnicas de um determinado tipo de pesquisa isolada. o
caso, por exemplo, da entrevista. Ela, sozinha, tem condies de fornecer certas
informaes sobre determinados eventos. E, ela combinada com outras obser-
vaes, tem condies de construir um edifcio confirmatrio (DENZIN;
LINCOLN, 2006, p.127), ou, nas palavras de Minayo et al. (2005, p.44), um
informe nico, que deve conter no informaes justapostas, mas o intercmbio
de teorias e mtodos a favor do esclarecimento e do aprofundamento dos vrios
aspectos da realidade.
O stimo passo, elaborao do informe final, corresponde, no movi-
mento dialtico, ao momento da sntese, construda coletivamente. E como tal
no pode ser compreendido como um somatrio de resultados disciplinares
(MINAYO, 2006, p.372). Ao contrrio, no informe final podem estar contidos
captulos das mais diferentes naturezas: podero existir captulos mais histri-
cos, outros de base mais estatstica, outros que do nfase elaborao de
significados, mas cada um vem iluminado pela contribuio dos outros
(MINAYO, 2006, p.372). Bem como, ele mesmo, pode ser de diferentes nature-

62 Cincias Humanas em Revista - So Lus, V. 5, n.1, julho 2007


A triangulao em debate
_________________________________________________________________
zas, dependendo do pblico ao qual ele dirigido (MINAYO et al., 2005, p.44-
45). Em suma, um relatrio deve conter: os objetivos, os fundamentos terico-
metodolgicos, a contextualizao e a histria da interveno sob avaliao, a
descrio dos processos avaliados sob a perspectiva de todos os atores, a anli-
se da gesto e da logstica da proposta, os resultados e as concluses.
O oitavo e ltimo passo, entrega, devoluo e discusso com todos os
atores interessados na avaliao, visando implementao de mudanas, trata
diretamente da comunicao dos resultados. Silva e Silva (2001, p.71) chega a
ser insistente sobre a importncia da comunicao dos resultados de uma pes-
quisa. No s uma prestao de contas, chega a ser algo fundamental para
a prpria prtica da pesquisa avaliativa:
Defende-se, nessas reflexes, que a publicizao de resultados de avaliaes,
para os beneficirios e para a sociedade de modo geral, constitui aspecto
fundamental para que sua aplicao extrapole o mbito tcnico, concebendo a
publicizao, assim, como instrumento de controle social e de presso por
direitos sociais.

Esse aspecto tico reforado tambm no modelo proposto de avalia-


o por triangulao de mtodos. Minayo et al. (2005, p.45) do destaque a
esse ponto, preconizando uma prevalncia dele sobre os interesses corporativos,
ou como uma garantia de preservar um dilogo franco sobre os limites da inter-
veno social, sobre seus aspectos crticos e tambm suas potencialidades. So
tambm questes ticas consideradas, ao lado da omisso da publicidade dos
resultados, a negociao de informaes que poderiam mudar resultados
indesejados para a instituio os para os envolvidos. Alm disso, essa proposta
chama a ateno para o fato de que a avaliao de polticas e programas no
um produto neutro nem seus resultados podem ser considerados fechados, pois
a simples existncia de uma avaliao pode gerar mudanas entre os
implementadores. Nesse sentido, parece haver uma concordncia com as crti-
cas de Arretche (2001a), em especial, quando ela diz que uma poltica no pode
ser simplesmente avaliada a partir do seu desenho. Ao contrrio, deve-se levar
em considerao tambm o processo de implementao dessa poltica, a com-
preenso que os agentes implementadores tm dela e quais so os seus interes-
ses particulares.

4. Consideraes finais

Pode-se fazer algumas inferncias acerca da avaliao por triangulao


de mtodos a partir das anlises que foram aqui consideradas. Pretende-se
trazer trs delas luz, como questes abertas para dar seqncia ao debate.
A primeira delas que, apesar de estar no bojo das crises que as cincias
modernas enfrentam e, em alguns autores, ser apresentada at mesmo como
uma alternativa nessas crises, o modelo de avaliao por triangulao de mto-
Cincias Humanas em Revista - So Lus, V. 5, n.1, julho 2007 63
Wildoberto Batista Gurgel
_________________________________________________________________
dos no de todo isento s afeces cartesianas. H, por exemplo, no modelo
de Denzin & Lincoln (2006, p.37) a permanncia de um esprito experimental na
triangulao. Para esse modelo possvel, ainda que na pesquisa qualitativa,
(...) isolar populaes-alvo, mostrar os efeitos imediatos de certos programas
sobre esses grupos e isolar restries que agem contra as mudanas polticas
nesses cenrios. Isso o mesmo que dizer ser possvel, por meio de uma com-
binao de mtodos, recuperar o antigo sonho cartesiano de um mtodo que d
conta de toda a realidade, o que Demo (1995) chamou de ditadura do mtodo,
Adorno & Horkheimer (apud MINAYO et al., 2005, p.99) de mito do mtodo
ou fetichismo do mtodo, e Landim et al. (2006) de magia dos mtodos e
iluso da transparncia. Em suma, trata-se de uma situao na qual, segundo
Landim (2006 p.54) o pesquisador se esquece do essencial, em prol da supre-
macia do mtodo e quando ele acredita poder apreender as significaes dos
atores sociais, mas apenas consegue a projeo da prpria subjetividade.
Se for verdade o que Garnelo (2006, p.1115) falou sobre ser a avaliao
por triangulao de mtodos uma forma de superar a mtua excluso entre as
filosofias materialistas e subjetivistas, que desde Descartes assombram a razo
ocidental, definitivamente ela no conhecia ou no se referia ao modelo propos-
to por Denzin & Lincoln (2006, p.37). E isso no importa se ela compreende, tal
como Minayo et al. (2005, p.95) a superao como uma superao dialtica,
isto , que as oposies so subsumidas, no desaparecem.
A segunda diz respeito ao carter no formal do modelo aqui exposto.
Isto , a avaliao por triangulao de mtodos no pode ser uma estrutura
formal que sirva para toda e qualquer realidade, pois dependendo da realidade
pesquisada, h elementos metodolgicos a serem mais considerados do que ou-
tros. Denzin & Lincoln (2006, p.127) mostram como em pesquisas envolvendo
realidades psicolgicas ou sociolgicas, h uma tendncia de ressaltar os ele-
mentos metodolgicos da pesquisa qualitativa mais do que os da quantitativa.
Por sua vez, podemos complementar, em pesquisas mais demogrficas ou
epidemiolgicas, h uma tendncia de ressaltar os elementos metodolgicos da
pesquisa quantitativa.
A terceira e ltima observao, conforme j anunciada, a de que o
modelo de avaliao por triangulao de mtodos, pelo menos tal como foi
elaborada por Minayo, no se prope ser uma avaliao poltica da poltica.
Pois, apesar de ter manifestado preocupao com a base-line da pesquisa
avaliativa, essa no forte o suficiente para assegurar o status de avaliao
poltica da poltica a esse modelo. Se se observar o proferimento a primeira
etapa da pesquisa avaliativa visa a reconhecer o estado do problema em relao
ao qual ocorrer a avaliao (base-line) no incio do projeto (MINAYO et al.,
2005, p.34), a concluso obviamente ser que a preocupao com a base-line
remete, no mximo, noo de uma avaliao ex-ante. O mesmo ocorre ao
observar a noo que Minayo et al. (2005, p.38) tm de descrio completa do
programa ou da poltica. A saber: descrever completamente o programa ou a

64 Cincias Humanas em Revista - So Lus, V. 5, n.1, julho 2007


A triangulao em debate
_________________________________________________________________
poltica consiste em descrever seus desdobramentos, sua filosofia de interven-
o, sua forma de gerenciamento; o status de seus agentes; o perfil da popula-
o-alvo, seu tamanho e foco, dentre outras caractersticas. No creio que
essa descrio completa possa se tratar de uma avaliao da poltica. Trata-
se, na verdade, nas palavras da prpria Minayo et al. (2005, p.34), de uma
anlise diagnstica situacional inicial. Ou, de que os parmetros da avaliao
so os indicadores estabelecidos para o contedo da interveno e os procedi-
mentos estabelecidos para a implantao.
Fazer uma avaliao poltica da poltica, como estratgia metodolgica,
de acordo com o que Arretche (2001a) preconiza sobre a avaliao de progra-
mas sociais, uma reflexo que conduz crtica do prprio programa ou da
poltica que se avalia. Ou ainda, de acordo com Silva e Silva (2001, p.21), uma
reflexo sobre a prpria tarefa avaliativa no sentido de que no basta concordar
com a importncia dos processos avaliativos, mas se questionar sobre o potenci-
al da avaliao como instrumento para tornar visvel a intensidade das demandas
no campo das polticas sociais em nossa sociedade. Logo, a avaliao poltica
da poltica , por natureza, uma ferramenta de controle social da populao
sobre as aes de interesse pblico. Isso porque, ainda na tica de Silva e
Silva (2001, p.18), esse modelo de avaliao tem uma perspectiva poltica que
deve ser resgatada no sentido de contribuir para garantir a efetivao e
universalizao dos direitos de cidadania. O que significa dizer que essa avali-
ao feita numa perspectiva de cidadania.
Ora, avaliar numa perspectiva de cidadania ou fazer uma avaliao
poltica da poltica remete emisso de um julgamento em relao concepo
e desenho da poltica ou programa num contexto poltico contemporneo;
pertinncia do programa em face da realidade que se pretende modificar, bem
como coerncia interna de seus elementos constitutivos e consiste em analisar
e elucidar os princpios de ordem poltica, econmica e scio-cultural que funda-
mentam determinado modelo de interveno social. No se quer, de acordo com
Silva e Silva (2001, p.28-29), simplesmente, estabelecer uma medida para verifi-
car se houve ou no desvio entre o esperado e o realizado. O foco central deste
tipo de avaliao , portanto, a formulao da poltica ou o planejamento do
programa quanto s suas finalidades, propostas e vicissitudes. Prende-se a dois
aspectos de fundamental importncia: o primeiro corresponde ao objetivo de
avaliar antecipadamente a potencialidade de sucesso de um programa. O segun-
do, quanto as suas dimenses: diagnstico da situao problema que ensejou a
formulao do programa; o referencial tico-poltico que fundamenta o progra-
ma e a engenharia do mesmo. Assim, apesar de proferimentos que parecem
anunciar um carter meta-avaliativo, do tipo pretende analisar a pertinncia,
os fundamentos tericos, a produtividade, os efeitos e o rendimento de uma in-
terveno, assim como as relaes existentes entre a interveno e o contexto
no qual se situa (MINAYO et al., 2005, p.25), o modelo se prope a apenas ser
uma Avaliao Diagnstica Bsica (MINAYO et al., 2005, p.34). No se

Cincias Humanas em Revista - So Lus, V. 5, n.1, julho 2007 65


Wildoberto Batista Gurgel
_________________________________________________________________
props ser, at ento, um modelo de avaliao centrado na fase de formulao
da poltica ou planejamento do programa.
Essa, certamente, foi apenas uma viso sobre a proposta de avaliao
de triangulao de mtodos mais adotada nas discusses brasileiras sobre o
assunto. H pontos comuns com outras interpretaes desse modelo como tam-
bm h pontos totalmente dissonantes. Isso bvio. O que se pretendeu, como
preconizado desde o incio, foi submet-lo a uma certa concepo de anlise de
polticas pblicas e verificar suas concepes, fundamentos, procedimentos e
tcnicas, bem como o seu alcance na proposta de um modelo (incompleto) de
avaliao.

TRIANGULATION IN DISCUSSION: considerations about the minayano model of


evaluation by triangulation of methods
Abstract: Conceptual analysis of the triangulation of methods and, by extension, of the
evaluation of public policies and social programs for triangulation of methods. The
question of the triangulation of methods is introduced in the frame of qualitative
researches. The more common conceptions, foundations, protocols and techniques in
this type of evaluational proposal are examined. It is limited to an analysis of most direct
and complete proposals of evaluation of public policies and social programs, specially
those elaborated by Minayo et al. Finally, the reach of those models is considered, either
as alternatives within contemporary methodologycal crisis, either as viable proposal of
evaluation of public policies and social programs, or as a challenge to knowledge.
Key-words: Methodology. Evaluation. Triangulation. Bricolage. Interdisciplinarity.

LA TRIANGULACIN EN DEBATE: consideraciones sobre el modelo minayano de


la evaluacin por triangulacin de mtodos
Resumen: Anlisis conceptual de la triangulacin de mtodos y, por extensin, de la
evaluacin de polticas pblicas y programas sociales por la triangulacin de mtodos.
Se introduce la cuestin de la triangulacin de mtodos en el horizonte de las
investigaciones cualitativas. Se examinan las concepciones, los fundamentos, los
procedimientos y las tcnicas ms comunes en ese tipo de propuesta evaluativa. Se limita
a un anlisis de las propuestas ms completas y directas de evaluacin de polticas
pblicas y programas sociales, en especial la elaborada por Minayo y otros. Se considera,
finalmente, el alcance de esos modelos, sean encuanto alternativas dentro de las crisis
metodolgicas contemporneas, sea encuanto propuesta viable de evaluacin de polticas
pblicas y programas sociales, sea encuanto un desafo al conocimiento.
Palabras-claves: Metodologa. Evaluacin. Triangulacin. Bricolaje. Interdisciplinariedad.

Referncias:
ANTUNES, Ricardo. Adeus ao trabalho. So Paulo: Cortez, 1995
ARRETCHE, Marta Teresa da Silva. Uma contribuio para fazermos avaliaes
menos ingnuas. BARREIRA, Maria Ceclia Roxo Nobre; CARVALHO, Maria
do Carmo (orgs) Tendncias e perspectivas na avaliao de polticas e
programas sociais. So Paulo: IEE/PUC, 2001(a), p.45-56.

66 Cincias Humanas em Revista - So Lus, V. 5, n.1, julho 2007


A triangulao em debate
_________________________________________________________________
______ Tendncias no estudo sobre avaliao. RICO, Elizabeth Melo (org).
Avaliao de polticas sociais: uma questo em debate. 3a ed. So Paulo:
Cortez, 2001(b), p.29-39.
BOURDIEU, Pierre. A economia das trocas simblicas [org/trad. Sergio
Miceli] 6a ed. So Paulo: Perspectiva, 2005 (Coleo Estudos, 20).
CAMPBELL, Donald T; FISKE, Donald W. Convergent and discriminant
validation by the multitrait-multimethod matrix. Psychological Bulletin. Chicago:
University of Chicago. v.56, 1959, p.81-104.
COOK, David A. A history of narrative film. New York: WW Norton, 1981.
DEMO, Pedro. Metodologia cientfica em cincias sociais. 3a ed. So Paulo:
Atlas, 1995.
DONABEDIAN, Avedis. Explorations in Quality Assessment and
Monitoring. Ann Arbor: Health Administration Press, 1980. Volume I.
DENZIN, Norman. (ed.) The research act in sociology: a theoretical
introduction to sociological method. New York: McGraw-Hill, 1970.
DENZIN, Norman K; LINCOLN, Yvonna S. O planejamento da pesquisa
qualitativa: Teorias e abordagens [trad. Sandra Regina Netz] 2a ed. Porto Alegre:
Artmed, 2006.
DESCARTES, Ren. Discurso do mtodo: regras para a direo do esprito
[trad. Pietro Nassetti] So Paulo: Martin Claret, 2000.
DESLANDES, Suely Ferreira; ASSIS, Simone Gonalves de. Abordagens
quantitativa e qualitativa em sade: o dilogo das diferenas. MINAYO, Maria
Ceclia de Souza; DESLANDES, Suely Ferreira (orgs). Caminhos do
pensamento: epistemologia e mtodo, Rio de Janeiro: Fiocruz, 2002. (Criana,
Mulher, Sade). p.195-219.
FLICK, Uwe. An introduction to qualitative research: Theory, method and
applications. London: Sage, 1998.
GARNELO, Luiza. Avaliao por triangulao de mtodos: abordagem de
programas sociais. Caderno de Sade Pblica. Rio de Janeiro, v.22, n.5, maio
2006, p.1115-1118 (Resenhas Book Reviews).
GOMES, Maria de Ftima Cabral marques. Avaliao de polticas sociais e
cidadania: pela ultrapassagem do modelo funcionalista clssico. SILVA E SILVA,
Maria Ozanira da (org). Avaliao de polticas e programas sociais: teoria e
prtica. So Paulo: Veras Editora, 2001, p.17-35.
JAMESON, Fredric. Ps-Modernismo: a lgica cultural do capitalismo tardio
[trad. Maria Elisa Cevasco]. 2a ed. So Paulo: tica, 2006.
JICK, Todd D. Mixing qualitative and quantitative methods: triangulation in action.
Administrative Science Quarterly. v.24, n.4, december 1979, p.602-611.
KANT, Immanuel. Crtica da razo pura [trad. Alex Marins]. So Paulo: Martin
Claret, 2001. Srie Ouro, 3.
KUHN, Thomas Samuel. The structure of scientific revolutions. Chicago:
University Chicago Press. 1962.

Cincias Humanas em Revista - So Lus, V. 5, n.1, julho 2007 67


Wildoberto Batista Gurgel
_________________________________________________________________
LANDIM, Ftima Luna Pinheiro; LOURINHO, Ldia Andrade; LIRA, Roberta
Cavalcante Muniz; SANTOS, Zlia Maria Souza Arajo. Uma reflexo sobre as
abordagens em pesquisa com nfase na integrao qualitativo-quantitativa.
Revista Brasileira em Promoo da Sade, Fortaleza: Unifor, v.19, n.1, 2006,
p.53-58.
MINAYO, Maria Ceclia de Souza; SANCHES, Odcio. Quantitativo-Qualitativo:
oposio ou complementaridade? Cadernos de Sade Pblica. Rio de Janeiro,
v.IX, n.3, 1993, p.239-262
MINAYO, Maria Ceclia de Souza; ASSIS, Simone Gonalves de; SOUZA,
Edinilsa Ramos de. (orgs) Avaliao por triangulao de mtodos: Abordagem
de programas sociais. Rio de Janeiro: Editora Fiocruz, 2005.
MINAYO, Maria Ceclia de Souza. O desafio do conhecimento: Pesquisa
qualitativa em sade. 9a ed. revista e aprimorada. So Paulo: Ed. Hucitec, 2006.
NELSON, Carry; TREICHLER, Paula; GROSSBERG, Lawrence. Cultural
studies. New York: Routledge, 1992.
NIETZSCHE, Friedrich W. Para alm do bem e do mal: preldio a uma filosofia
do futuro. [trad. Alex Marins] So Paulo: Martin Claret, 2002.
QUIROGA, Consuelo. Invaso positivista no marxismo: manifestaes no
ensino da metodologia no servio social. So Paulo: Cortez Editora, 1991.
RICHARDSON, Laurel. Meta-jeopardy. Qualitative inquiry. Sage publications,
v.4, n.4, 1998, p.464-468.
SAMAJA, Juan. Epistemologa y metodologa: elementos para una teora de
la investigacin cientfica. Buenos Aires: Eudeba, 1995.
SANTOS, Milton. Por uma outra globalizao: do pensamento nico
conscincia universal. Rio de Janeiro: Record, 2006.
SILVA E SILVA, Maria Ozanira da (org). Avaliao de polticas e programas
sociais: teoria e prtica. So Paulo: Veras, 2001.
SINGER, Peter. tica prtica [trad. Jefferson Luiz Camargo]. So Paulo:
Martins Fontes, 2002.
WEBER, Max. A objetividade do conhecimento na cincia social e na cincia
poltica. ______ Metodologia das cincias sociais [ed. Johannes
Winckelmann; trad. Augustin Wernet] 2a ed. So Paulo: Cortez Editora, 1993,
parte 1.

68 Cincias Humanas em Revista - So Lus, V. 5, n.1, julho 2007