Investigaes em Ensino de Cincias V6(1), pp.

7-28, 2001

COMO AVALIAR UM PROJETO DE PESQUISA EM EDUCAO EM CINCIAS 1? (How to evaluate a research project in science education?)

Alberto Villani 2 [avillani@if.usp.br] Jesuina Lopes de Almeida Pacca3 [jesuina@if.usp.br] Instituto de Fsica, Universidade de So Paulo. Caixa Postal 66318, 05389-970, So Paulo, SP, Brasil Resumo Neste trabalho pretendemos iniciar o debate sobre esse tema to importante, uma vez que todos ns fazemos parte da comunidade cientfica que faz projetos e que os avalia. Pretendemos mostrar que os critrios comumente utilizados para julgar um trabalho de pesquisa no so necessriamente os mais importantes para julgar um projeto de pesquisa e suas perspectivas. Neste caso trataremos de buscar indcios que apontem para uma boa fundamentao e um procedimento adequado presentes em um projeto de pesquisa, que possam mostrar boas perspectivas de sucesso. Focalizaremos os pontos que consideramos fundamentais num trabalho de pesquisa, tentando problematizar as dificuldades que podem ser encontradas, tanto luz da reflexo metodolgica tradicional bem como de uma abordagem mais moderna. Concluiremos esboando as caractersticas gerais de um trabalho de pesquisa que consideramos confivel, bem como tecendo recomendaes para a ao de crticos /assessores. Palavras Chaves: Projeto, Critrios de Avaliao, rbitros, Valor de um Projeto

Abstract In the article we intend to start a debate about such an important question since we are all part of the scientific community that prepares and evaluates projects. That is, we intend to show that the criteria commonly used for evaluating a research work are not necessarily the most important to judge a research project and its perspectives. Consequently we will try to search clues that may indicate the presence of good argument and an adequate procedure in research projects, which may anticipate good chances of success. We focus on points that we consider fundamental in a research, and discuss difficulties that may arise based both on a traditional methodological and a more modern framework. We conclude with an outline of general characteristics for a research project, which we consider reliable, and weave some recommendations for referees/advisors Key-Words: Research Project, Evaluation Criteria, Referees, Project Value

1 Em 1994 apresentamos no IV EPEF um trabalho de reflexo sobre o significado da fundamentao terica de um projeto de

pesquisa. De l para c, nosso trabalho de pesquisa continuou, com publicaes e projetos, de algum modo avanando, modificando-se e submetendo-se avaliao pela comunidade, que tambm mudou. Essa a nossa perspectiva atual. 2 Com auxlio parcial do CNPQ 3 Com auxlio parcial do CNPQ

Investigaes em Ensino de Cincias V6(1), pp. 7-28, 2001

Introduo O trabalho de um pesquisador no se limita produo de um texto para publicao ou de um projeto para apresentar comunidade e receber auxlio para sua execuo. Ele muito mais do que isso. uma reflexo constante sobre problemas que o envolvem no mbito profissional, uma reelaborao contnua de hipteses e concluses, sem espao e tempo definidos, onde os elementos que se integram nessa organizao no tm sempre origem certa nem natureza semelhante. Um artigo se produz quando o pesquisador considera que tem uma resposta importante para questes significativas no mbito de uma comunidade envolvida com o tema. O contedo do texto deve tornar plausvel a resposta no que concerne aos procedimentos que a geraram; ao mesmo tempo deve ser vlida e significativa no contexto dos problemas especficos de uma rea de pesquisa. Um projeto se produz quase sempre quando se deseja submeter o trabalho de pesquisa obteno de financiamento, necessrio para dar continuidade ao trabalho de pesquisa do pesquisador ou de um grupo, ou aprovao de uma banca, necessrio para que a pesquisa possa obter reconhecimentos institucionais, como um mestrado ou doutorado. O contedo do texto deve fornecer indcios de que a pesquisa proposta merece apoio e o pesquisador tem condies para realiz-la. Quando precisamos avaliar um trabalho de pesquisa, independentemente de nossas preferncias tericas, os critrios que utilizamos tm, em geral, alguma convergncia. Qual a fundamentao do trabalho? a questo que comumente se coloca nessas ocasies. De certo modo, j existe um roteiro a nos guiar nessa avaliao: H uma descrio detalhada do problema a ser resolvido? O novo conhecimento produzido est em evidncia? Sua localizao no mbito da produo bibliogrfica clara? Os referenciais tericos que fundamentam o trabalho so reconhecidos? A metodologia utilizada confivel ? A anlise dos dados rigorosa? Esses mesmos critrios so exigidos na exposio de seminrios, na defesa de teses, na apresentao de trabalhos em congressos. As instituies de fomento pesquisa ou as bancas parecem seguir aquele mesmo roteiro quando analisam Projetos para a concesso de recursos ou seleo de candidatos, indicando que o consenso quanto aos critrios estabelecidos para a avaliao de um trabalho finalizado, se estende tambm avaliao de projetos de pesquisas a serem realizadas. Vamos restringir nossa discusso area de Educao em Cincias, na qual estamos atuando h quase trinta anos. A avaliao de um projeto no nos parece to simples, nem o consenso sobre o seu valor se mostra to tranquilo porque implicitamente deve responder questo: o que constitui um trabalho de pesquisa confivel, ou seja, capaz de produzir conhecimentos novos e, possivelmente, relevantes? Consequentemente o problema do avaliador de um projeto descobrir indcios de que o projeto de pesquisa ser conduzido de maneira a produzir conhecimentos novos e relevantes. Como diz Astolfi (1999): Todo saber autntico e vivo comporta seu halo de bruma e suas zonas obscuras, o que nos levaria a dedicar um verdadeiro elogio imperfeio(p.25) Pretendemos iniciar o debate sobre o tema, para ns to importante, uma vez que todos nos fazemos parte da comunidade cientfica que faz projetos e que os avalia. Pretendemos aqui mostrar que os critrios utilizados para julgar um trabalho terminado no so necessrios (e talvez nem importantes) para julgar um projeto de pesquisa e suas perspectivas. De certo modo

Investigaes em Ensino de Cincias V6(1), pp. 7-28, 2001

estaremos subvertendo uma ordem estabelecida ao afirmar, parafraseando Astolfi (1999), que pesquisar arriscar-se a errar e o nico que no se engana o que no faz nada. Neste caso trataremos de buscar indcios que apontem para uma boa fundamentao e um procedimento adequado, presentes em um projeto de pesquisa que possa ser considerado bem organizado e com boas perspectivas de sucesso. Focalizaremos os pontos que consideramos fundamentais num trabalho de pesquisa, tentando problematizar as dificuldades que podem ser encontradas, a partir de uma reflexo metodolgica tradicional ou ento de uma abordagem mais moderna como, por exemplo, a psicanaltica. Concluiremos esboando as caractersticas gerais de um trabalho de pesquisa confivel e os indcios que num projeto apontam para elas, bem como as caractersticas importantes na ao de crticos /assessores. Nossas consideraes no se colocam em competio com textos tradicionais como os de Barbier (1996), Erickson (1989), Alves-Mazzotti & Gewandsznajder (1998), Cohen & Manion (1996); pelo contrrio constituem uma maneira especfica de olhar para eles. Focalizando os pontos fundamentais A questo da pesquisa, a reviso bibliogrfica, a fundamentao da pesquisa, a confiabilidade da metodologia e a anlise dos dados so os pontos que focalizaremos e problematizaremos. As Perguntas Certas Costuma-se dizer que um bom comeo constitui metade do trabalho feito, e que o bom comeo da pesquisa est nas perguntas certas . Uma vez de posse das perguntas certas a fase angustiante da pesquisa praticamente acabou, porque virou organizao e seleo dos dados de maneira a conseguir aquelas respostas. As perguntas certas so aquelas que podem ser efetivamente respondidas dentro do assunto pesquisado. Ou seja, conseguidas as perguntas certas, a obteno das respostas desejadas se aproxima mais da soluo de um exerccio de fim de captulo do que da produo de uma obra de arte. Ser que simples obter perguntas certas? Ser que razovel exigir que um projeto de pesquisa tenha as perguntas totalmente delineadas desde o comeo? Dedicaremos bastante espao para esse ponto, explicitando as vrias situaes que temos encontrado na elaborao e na anlise de projetos, pois nos parece que o ponto mais fundamental nas divergncias que existem entre os vrios pesquisadores. a) A situao mais favorvel, quanto formulao de perguntas chaves, se verifica quando o pesquisador pode desfrutar das informaes de trabalhos anteriores, que, de alguma maneira, j tinham delineado problemas interessantes a serem pesquisados e indcios de possveis solues. *Por exemplo:um projeto de mestrado (Franzoni, 1998) visava pesquisar se ao se ministrar novamente a disciplina de Prtica de Ensino de Biologia em condies semelhantes s de uma experincia anterior, a modificao do tema a ser trabalhado pelos futuros professores no Estgio Supervisionado poderia ter consequncias no seu envolvimento efetivo nas atividades didticas e na aprendizagem. Mais especificamente, se a introduo de um tema
9

Investigaes em Ensino de Cincias V6(1), pp. 7-28, 2001

prximo do cotidiano (na caso o conhecimento sobre o lixo e suas consequncias) poderia propiciar um novo tipo de relao entre os licenciandos, a professora responsvel pela disciplina, os alunos do Estgio e a responsabilidade com o conhecimento utilizado . Nesse caso, efetivamente tinha sentido colocar no projeto um conjunto de perguntas certas, que a teoria e os referenciais utilizados deveriam especificar e lapidar a fim de que pudesse ser obtido um avano no conhecimento, pois na pesquisa anterior, j haviam sido apontados critrios para avaliar mudanas no envolvimentos dos licenciandos e a partir deles era possvel formular novas perguntas. b) Uma outra situao favorvel promoo de uma pesquisa com perguntas certas desde o incio pode ser a revisitao de um trabalho anterior a partir de novos referenciais. Os resultados encontrados podem ser analisados numa tica terica nova que permita articular um aprofundamento a partir do levantamento de novas perguntas, mais precisas e mais refinadas, capazes de sustentar um projeto de pesquisa bem definido, orientar a metodologia de pesquisa e definir os dados a serem analisados. * Numa pesquisa realizada vinte anos atrs ( Kishinami et al.,1983) sobre as relaes institucionais num curso bsico de Fsica na Universidade de So Paulo chegou-se concluso de que os professores responsveis pelas disciplinas tericas iniciais de Fsica, apesar de terem orientaes diferentes, utilizarem estratgias e proporem atividades diferentes e at estarem numa certa competio entre eles quanto influncia sobre os alunos, de fato promoviam a instaurao de um saber implcito bastante semelhante. Nesse caso, existiria um Saber Privilegiado (a Fsica) cujo acesso era reservado aos pesquisadores e em relao ao qual os alunos deveriam sofrer um processo de Iniciao, que envolvia esforos e o abandono de hbitos anteriores; tal iniciao teria como mediador fundamental o professor que podia realizar essa tarefa por desfrutar de uma relao privilegiada com a pesquisa e com o Saber desejado. Recentemente, revisitando esse resultados com um olhar oriundo da pesquisa em psicanlise foi possvel formular outras perguntas. Qual seria o mecanismo de captura do imaginrio e do simblico dos alunos, capaz de alien-los no desejo do professor? Como atividades e orientaes explcitas diferentes puderam produzir efeitos implcitos e inconscientes semelhantes? Qual a importncia da linguagem e dos significantes que marcavam o discurso dos professores? Mesmo sem ter investido muito tempo na elaborao dessa pesquisa, parece claro que para tentar responder a essas perguntas a re-analise das falas de professores e alunos seria um passo necessrio a ser realizado, dividindo o olhar simultaneamente para as caractersticas individuais e para a homogenizao dos efeitos inconscientes. Mais uma vez a presena simultnea de um olhar terico e de resultados efetivos permite a formulao de perguntas precisas e, de alguma maneira, capazes de orientar na seleo dos dados a serem revisitados. c) Uma outra possibilidade de Projeto com perguntas iniciais claramente definidas pode ser encontrado nas situaes nas quais existem prazos definidos, que exigem uma certa urgncia. Nesse caso a tendncia estruturar logicamente o projeto, com a suposio implcita de que o contexto especfico do projeto no introduzir complicaes. o caso, por exemplo, de estratgias de ensino que prometem resultados interessantes com os alunos, at tendo algum indcio favorvel a respeito; muitas vezes o projeto quer testar em escala maior a viabilidade das idias propostas, sem prever a possibilidade de resistncias por parte dos professores ou multiplicadores que iro utilizar tais estratgias.
10

Investigaes em Ensino de Cincias V6(1), pp. 7-28, 2001

* Uma situao desse tipo ocorreu num projeto de pesquisa sobre formao de professores em servio. O projeto foi estruturado como uma pesquisa-ao (Barbier, 1996; Thiollent, 1988), prevendo-se a participao dos professores de acordo com os requisitos dessa modalidade de pesquisa. Os assessores da instituio financiadora elogiaram bastante a iniciativa, apesar de termos algumas dvidas sobre a possibilidade de transferir completamente para essa nova situao os resultados de projetos anteriores realizados com pequeno nmero de professores. De fato, aconteceu que no incio os professores queriam simplesmente aprimorar seu conhecimento e melhorar sua relao como os alunos e foi muito difcil convencer os assessores de que a pesquisa-ao somente poderia ser uma meta final e no um ponto de partida da pesquisa. Provavelmente, se o projeto tivesse sido apresentado como de fato foi desenvolvido dificilmente teria recebido financiamento. s vezes o pesquisador est consciente de que o trabalho no est definido e, provavelmente, ir se desenrolar de maneira diferente do apresentado; ou seja, ele sabe que as perguntas certas iro aparecer somente aps um certo tempo e um grande esforo. Entretanto ele estrutura o projeto como se j tivesse encontrado o caminho das pedras. Uma boa dose de ambiguidade nos detalhes especficos e de articulao na apresentao geral pode permitir que, no final do trabalho, o pesquisador possa conseguir, de algum modo inteligente, ligar aquilo que foi produzido com aquilo que foi apresentado no projeto formal e satisfazer as exigncias da instituio que o aprovou. Uma variante dessa situao se verifica quando o pesquisador acabou de ter uma idia que lhe parece brilhante e no quer perder a chance de p -la em prtica, mesmo se ainda no teve tempo para avaliar totalmente sua real importncia e, sobretudo, suas implicaes. Ele se pergunta se deveria procurar amadurecer o projeto, eventualmernte esperando uma prxima oportunidade que talvez nunca aparea, ou se no seria melhor ir ajustando o projeto durante o caminho. Nesse caso o pesquisador est precisando dialogar com algum que desconfie das idias brilhantes e queira "ver" quanto e em que contextos realmente elas funcionam. Esse papel de diabo poderia e deveria ser feito pelos assessores que analisam o projeto, cuja funo no somente selecionar, mas sobretudo promover avanos. Nos primeiros trabalhos sobre concepes alternativas, no incio da dcada de 80, tnhamos a convico de que seria possvel estruturar as idias dos alunos numa espcie de teoria bastante coerente e articulada. Infelizmente nenhum assessor que avaliou nossos projetos da poca questionou essa nossa convico e tivemos que renunciar a essa idia com muito sacrifcio, com o acmulo das evidncias nas entrevistas com os alunos. Esse trabalho de assessoria efetiva requer esforo e tempo, pois envolve elaborar questes que tenham em conta o contexto muitas vezes somente esboado. Infelizmente, caso no acontea esse esforo de mediao, o pesquisador muitas vezes acaba encontrando unicamente aquilo que confirma suas prprias idias. d) Uma situao mais delicada ocorre quando um pesquisador, em geral bastante novato, atravs de um levantamento bibliogrfico, chega concluso de que os problemas interessantes que sobraram foram os citados no final dos trabalhos. Fez um esforo para simplificar e adaptar as perguntas ao seu meio e est satisfeito pelo resultado. De um lado sente-se apoiado na terra firme dos autores consagrados pela comunidade; de outro lado sabe que ningum poder questionar perguntas que se encontram na literatura ou rejeitar problemas levantados por
11

Investigaes em Ensino de Cincias V6(1), pp. 7-28, 2001

trabalhos importantes. Em geral, a tarefa principal para algum que avalia esse tipo de projetos mostrar que os problemas que sobraram na literatura so exatamente os de difcil resposta, por algum detalhe que complica demasiadamente seu equacionamento concreto. Por isso essa situao exige um trabalho suplementar de assessoria que auxilie a elaborao de novas perguntas, mais facilmente solveis com os instrumentos a disposio. * No final de um Curso Personalizado, por ns coordenado, para alunos do primeiro ano de Fsica na Universidade, pensvamos que no ano seguinte, podendo contar com uma programao mais adiantada e mais detalhada, teriamos resultados ainda mais satisfatrios do que os obtidos at ento. Nessa perspectiva, ramos confortados pela teoria comportamentalista e pelos resultados da literatura da poca, que apontavam na organizao acurada o segredo do sucesso desse tipo de cursos. Entretanto, o resultado efetivo da programao mais definida e mais articulada em seus detalhes, realizada no ano seguinte, foi uma queda grande na motivao e no envolvimento dos alunos: tudo estava to bem definido que no sobrava nada para o aluno fazer a no ser obedecer ao planejamento. Consequentemente, vrias das questes iniciais da pesquisa tiveram que ser reformuladas, apesar do resultado ter permanecido um enigma, em relao ao qual tinhmos somente idias intuitivas e grosseiras. Infelizmente, ningum na poca nos alertou sobre essa possibilidade e por isso tivemos que esperar dominar a perspectiva construtivista e, mais recentemente, psicanaltica para entender melhor esse resultado. e) Mesmo nos casos nos quais a pesquisa comea de maneira tradicional, com as perguntas iniciais bem definidas e a metodologia delineada e fundamentada, ningum garante que o desenvolvimento seguir o roteiro pre-estabelecido, se o pesquisador for sensvel aos dados que aparecem. Outras perguntas podem tomar o lugar das primeiras e apontar para resultados mais interessantes. Esse foi o caso de uma pesquisa recente sobre a relao dos alunos com o processo de tomada de dados no laboratrio didtico de fsica. * A pesquisa baseou-se no referencial da mudana conceitual (Posner et al., 1982; Duit et al., 1992), iniciando com um levantamento, ainda no explorado na literatura, das concepes dos estudantes a respeito dessa fase do laboratrio e, em particular, do papel das flutuaes das medidas. Os resultados desse levantamento e sua estruturao foram apresentados na ANPED (Barolli et al., 1996). Entretanto, no ano seguinte outros resultados completamente diferentes foram apresentado no mesmo Congresso: contribuies da psicanlise para a interpretao do laboratrio didtico (Barolli & Villani, 1997). O ponto fundamental que num determinado momento da pesquisa as questes iniciais foram invertidas . O que parecia interessante no era mais detetar e interpretar as idias comuns dos alunos sobre a tomada de dados, mas, ao contrrio, o clima e o comportamento diferentes dos vrios grupos de alunos, apesar de compartilharem de muitas idias alternativas. Para esse tipo de problema o referencial das concepes alternativas e da mudana conceitual era insatisfatrio e por isso outro foi procurado e utilizado. f) Finalmente, uma situao bastante comum nas pesquisas em nossa rea a de se defrontar com fenmenos complexos para cuja explicao o pesquisador no tem a disposio uma teoria articulada e perguntas certas. Digamos que a pesquisa est na fase exploratria e os dados significativos ainda no foram selecionados. As perguntas ainda so genricas e o pesquisador espera ser surpreendido por eventos que estimulem sua intuio. Nessas condies

12

Investigaes em Ensino de Cincias V6(1), pp. 7-28, 2001

o melhor seria deixar-se conduzir por uma ateno flutuante at que perguntas mais especficas pudessem ser levantadas. Uma variante feliz dessa situao aparece quando os resultados de uma experincia surpreendem positivamente e apontam para a presena de uma resposta concreta que vai alm das perguntas esboada ou levantadas no incio. De alguma maneira o pesquisador precisa encontrar a pergunta que d conta dessa resposta implcita e a valorize. Em outras palavras, o pesquisador precisa definir os problemas e os contextos tericos que permitem interpretar os resultados, como respostas a problemas que a comunidade julga interessantes e novos. * Por exemplo, a estratgia didtica de uma professora, baseada numa perspectiva construtivista, numa disciplina de Prtica de Ensino, teve efeitos surpreendentes e efetivamente acima das expectativas da professora, quanto ao tipo de aprendizagem da turma de licenciandos (Freitas, 1998). Os pesquisadores que analisaram os dados referentes a essa experincia encontraram-se com uma soluo efetiva em termos de estratgia e de conduo didtica, que estava procura de sua questo e de seus referenciais (Villani & Freitas, 1998). As perguntas ento surgiram: Que mecanismos operaram durante a experincia desencadeando um envolvimento to singular dos licenciandos? Que contexto foi decisivo para que os licenciandos optassem por um caminho autnomo? Que estratgia efetiva foi utilizada e quais os seus elementos mais significativos? Que teorias explicariam esses resultados? Que detalhes constituiriam indicadores confiveis? Essas e outras perguntas podiam ser levantadas para tentar uma interpretao; o ponto fundamental era encontrar aquelas que podiam ser respondidas e que dariam conta do resultado surpreendente. Diante de todas essas circunstncias possveis, como elaborar um projeto? Nos casos em que perguntas claras no esto disponveis, como convencer os eventuais assessores de que as perguntas somente viro em seguida, no momento oportuno ainda mal definido? Se as perguntas podem mudar no meio da pesquisa, porque insistir tanto na sua formulao inicial? Mais em geral, qual um bom incio de pesquisa? Qual uma boa pergunta inicial: ser que elas no tm funes diferentes? Que relao tm as perguntas com a literatura existente sobre o tema pesquisado? O que fazer com as snteses da bibliografia? A Reviso Bibliogrfica Parece ser consenso que uma boa pesquisa bibliogrfica deve sugerir problemas a investigar. De um lado, ela evitar gastar um tempo enorme com uma pesquisa que poderia terminar com a surpresa desagradvel de encontrar resultados que j esto publicados. De outro lado, ela dar a garantia de se realizar um trabalho atualizado, escolhendo um problema especfico que contribua diretamente para o aumento do conhecimento j existente. Alm disso sustenta-se que dessa maneira o pesquisador entrar em contato com os problemas em aberto, normalmente j sugeridos pelos prprios autores, permitindo que uma reflexo sobre esses problemas possa orientar novas pesquisas com as perguntas certas. Dessa maneira a escolha do problema seria mais racional e adequada. A nossa dvida a respeito da garantia de sucesso deste procedimento em parte prtica e em parte terica. De um lado j vimos muitos projetos, formulados de acordo com a melhor ortodoxia, esvanecerem-se sem nenhum resultado importante. Vrias vezes participamos de bancas de qualificao nas quais a parte mais importante do projeto era uma reviso da literatura sobre o tema, porm, a formulao do problema de pesquisa no parecia oferecer
13

Investigaes em Ensino de Cincias V6(1), pp. 7-28, 2001

indcios de que o trabalho futuro viesse a ser interessante. Vimos tambm pesquisas, realizadas a partir de uma reviso bibliogrfica no muito aprofundada, que acabaram ao final interessantes. * Por exemplo, para citar um trabalho ligado ao nosso grupo, a pesquisa sobre o uso do mtodo Cloze (subtrao sistemtica de palavras, substitudas por brancos num texto a ser aprendido) na compreenso de conceitos de Fsica (Scala, 1980), foi elaborada a partir de um curso de ps-graduao sobre leitura e mtodos matemagnicos para o aumento da compreenso. A literatura sobre os resultados da utilizao desse mtodo era imensa (Wilson e Koran,1975); a maioria dos trabalhos parecia indicar que o mtodo Cloze auxiliava na compreenso do texto, pois forava o aprendiz a produzir uma teoria sobre o mesmo. Assim foi feito um experimento com textos de Fsica (sobre o efeito fotoelctrico e o efeito Compton), avaliando a aprendizagem dos estudantes atravs da resoluo de questes e problemas envolvendo os efeitos acima . O resultado foi exatamente o oposto do esperado: o mtodo Cloze atrapalhava sistematicamente a compreenso do texto dificultando a resoluo de problemas, mesmo aps serem fornecidas aos estudantes as palavras que faltavam. A divergncia entre tais resultados e os da literatura ficou um mistrio para os elaboradores da pesquisa com pouco trnsito nessas metodologias, at descobrirem uma teoria (Gibson & Levin, 1975) que classificava as leituras de adultos segundo sua finalidade intelectual, sugerindo que mecanismos diferentes seriam utilizados pelo leitor dependendo dos casos. Assim, estava claro que mtodos que serviam para auxiliar adolescentes na leitura e memorizao de um texto, no serviam para estudantes de primeiro ano de faculdade aprenderem o contedo de um texto a ponto de aplic-lo para resolver problemas de Fsica (Villani et al., 1982). O resultado da pesquisa era interessante na medida que dava um suporte experimental explcito para a tese de Levin, mas essa pesquisa certamente no teria sido elaborada se os autores, a partir da anlise mais completa da literatura, j suspeitassem do resultado. Estamos cientes de que o exemplo interessante, mas representa um caso extremo de trabalho realizado a partir de pouca competncia inicial de seus idealizadores na rea escolhida. Nossa experincia parece sugerir que em geral as coisas no so to simples. * Durante um Congresso na Espanha sobre pesquisas em Ensino de Cincias assistimos uma apresentao de L. Viennot sobre os modos de raciocnios espontneos em Fsica, caractersticos no somente de estudantes mas tambm de docentes e at profissionais da rea; a autora insistia principalmente em apresentar exemplos do "raciocnio linear causal" ( uma linearizao que despreza o efeito de feedback) e do "raciocnio monoconceitual" (uma simplificao que despreza a dependncia de mais variveis). Tnhamos acabado de escrever um trabalho sobre as concepes alternativas referentes as colises em fsica (Villani & Pacca, 1990) e de publicar um outro sobre as concepes alternativas referentes velocidade da luz e sua invarincia (Villani e Pacca, 1987), ambos com estudantes de ps-graduao. Estvamos procurando algo que unificasse os resultados encontrados para os diferentes contedos e a palestra sobre modos de raciocnio resolveu nosso problema: nossos estudantes enfrentavam as questes apresentadas utilizando exatamente os mesmos modos de raciocnio descobertos pela pesquisadora francesa, independentemente do contedo ser Eletromagnetismo, Termodinmica, Mecnica ou Relatividade (Villani & Pacca, 1990b). Certamente, se tivssemos projetado nossa pesquisa a partir da concepo de modos de raciocnio no pensamento dos estudantes, nunca teramos conseguido os dados e as informaes
14

Investigaes em Ensino de Cincias V6(1), pp. 7-28, 2001

coletados nos dois trabalhos, inicialmente independentes um do outro. Entretanto, a elaborao destes dados produziu uma estruturao to preparada para incorporar as idias de Viennot, que sua simples apresentao numa palestra desencadeou um processo de reinterpretao bem mais sofisticado do que seria possvel a partir das idias gerais fornecidas pela literatura. A imerso dos pesquisadores no contexto de um problema concreto aguou a sensibilidade para as novas informaes. Ter um problema . Certamente estas constataes, que no devem ser exclusivas de nossa experincia, no so uma razo suficiente para negar o valor de uma boa pesquisa bibliogrfica; mas so uma razo para no lhe atribuir um peso demasiado grande na hora de julgar um projeto de tese ou de pesquisa. Para um pesquisador, que efeito prtico mais relevante tem uma reviso bibliogrfica dos trabalhos sobre um determinado tema? Diretamente detectar os problemas em aberto; indiretamente descartar os trabalhos que j foram realizados. Porm, quando ao final de uma pesquisa bibliogrfica chegamos a um conjunto de resultados novos a serem investigados, bem difcil escolher os mais significativos, pois faltam os parmetros e os critrios para isso. Ao contrrio, quando se analisa uma pesquisa semelhante a alguma outra que j realizamos, quase sempre se encontram resultados passveis de comparao. Nesse caso as diferenas devem ser exploradas, pois certamente no devem representar trivialidades de pouco valor, porque outros no conseguiram v -las, mesmo tendo oportunidade para isso. A imerso no contexto. Em geral, em nossa opinio, o resultado significativo nasce mais facilmente do confronto entre posies e resultados parcialmente semelhantes com os que produzimos, do que da explorao de caminhos desenhados a partir dos resultados da literatura, produzidos por outros pesquisadores. Em outras palavras, uma viso no muito aprofundada da literatura, nos parece suficiente para garantir que, de um lado, o problema enfrentado no seja to obsoleto excluindo toda e qualquer novidade e, de outro lado, no seja to novo capaz de excluir a possibilidade de que outros faam algo semelhante. Muitas vezes os resultados importantes iro aparecer aps o confronto com trabalhos pelo menos parcialmente semelhantes. Outras razes sugerem um cuidado com o crdito exagerado atribudo literatura, pelo menos no incio de um projeto de pesquisa. Os relatos de pesquisa normalmente selecionam as informaes a serem divulgadas (por razes bvias); sobretudo desprezam as armadilhas e as estradas sem sada encontradas durante a pesquisa. Por isso os problemas abertos, formulados no final dos trabalhos, so problemas ideais, que no levam em conta as dificuldades encontradas. Eles so bem mais difceis de serem enfrentados do que possa aparecer aps a leitura de quem no participou da pesquisa. De fato, se fossem simples, os prprios autores j os teriam desenvolvidos e resolvidos de uma vez. Enfim uma pesquisa genuna somente pode brotar a partir daquilo que o pesquisador conhece bem, no a partir do que os outros conhecem bem. O problema interessante e significativo deve estar no campo de pensamento do pesquisador que vive num contexto j problematizado e explorado continuamente. Seu trabalho formular objetivamente questes ao mesmo tempo que pesquisa as suas respostas.

15

Investigaes em Ensino de Cincias V6(1), pp. 7-28, 2001

A anlise crtica e a viso independente, qualidades necessrias para produzir resultados diferentes e novos, somente podem ser alcanadas se as pessoas enfrentarem os dados e os experimentos com suas prprias foras, mesmo que um pouco desprotegidas e um pouco ingnuas em relao s ltimas novidades na rea. Quando um pesquisador est muito preocupado em ser fiel viso dominante, certamente vai encontrar respaldo e confirmaes em relao a esta, mas dificilmente tem potencial para acompanhar todas as pequenas sugestes que os prprios dados oferecem, como tambm as crticas e sugestes externas, perdendo oportunidades autnticas para alcanar pequenos mas realmente novos resultados. Muitas vezes a soluo para problemas novos e essenciais est em contextos diferentes que o pesquisador encontra no seu cotidiano; as relaes entre fatos ou procedimentos que parecem estanques primeira vista podem ser elaboradas pelo pesquisador atento que vive continuamente o problema aberto. * Uma exemplo interessante destas situaes aconteceu durante as entrevistas com estudantes sobre experimentos com colises (Orquiza, 1994). Quando os estudantes olhavam os experimentos para encontrarem confirmaes de suas idias tericas, elaboradas espontaneamente ou aprendidas em parte na escola, no conseguiam levar a srio e refletir livremente sobre o que acontecia na realidade. Entretanto, quando a familiaridade com os experimentos lhes permitia assumir os dados procura de genunas explicaes, sua capacidade de elaborar, confrontar, modificar e reorganizar suas idias aumentava enormemente, assim como sua possibilidade de aproveitar sugestes externas adequadas aos dados. Um pesquisador frente aos seus experimentos como um estudante com suas idias alternativas: as teorias sempre so inadequadas realidade e precisam ser modificadas para resolverem os novos problemas sugeridos pelos dados. Se o pesquisador estiver familiarizado com os dados, ou seja, se ele tiver participado pessoalmente da sua elaborao, estando a par do que eles representam e podem oferecer, estar pronto para aproveitar originalmente todas as novas idias e teorias da literatura; caso contrrio somente conseguir encontrar nos seus dados o que outros j encontraram, perdendo a chance de dar um passo frente no conhecimento. Enfim, parece at que um pouco de ignorncia da bibliografia importante durante alguma fase da pesquisa, para que o pesquisador construa uma idia prpria sobre o assunto, a qual ser sucessivamente confrontada com outras de 'experts' do campo. No parece ser simples acaso que estudantes de ps-graduao cheguem a concluses pessoais sobre um assunto, com certa originalidade com relao s encontradas na literatura, quando no esto ainda muito influenciados por ela; nestes casos verificamos tambm um autntico e proveitoso confronto com a bibliografia. De certo modo, a pesquisa bibliogrfica significativa nem seria a primeira etapa do trabalho do pesquisador.

A Fundamentao da Pesquisa A nosso ver a melhor fundamentao de uma pesquisa consiste em ter apoio num contexto problemtico onde possam situar-se as perguntas certas. A vivncia e a reflexo sobre esse contexto com a determinao de compreend-lo melhor parece gerar guias para absorver informaes que esto prximas, num processo em que refletir sobre o contexto leva a vislumbrar as questes mais objetivas.

16

Investigaes em Ensino de Cincias V6(1), pp. 7-28, 2001

A situao mais favorvel, em nossa opinio, acontece quando este guia a prpria cultura do pesquisador, que representa a sntese de sua experincia no campo. Ele pesquisa o assunto h muito tempo, conhece o que foi produzido e o valor de cada produo; quase instintivamente percebe quando um dado interessante e significativo, mesmo que no consiga construir imediatamente o contexto que valoriza tal informao. Assim ele pode at gastar horas e dias pensando em como encaixar uma pea que no parece bem arrumada, porque ele intui que a pea importante. A experincia passada e a competncia adquirida lhe permitem insistir na ateno a um detalhe, atitude desaconselhada para um novato ou para um pesquisador que no domina o assunto. Assim, nos parece bem singular e apontando no sentido contrrio, o comentrio feito por um assessor : o pesquisador est h muito tempo pesquisando o assunto e portanto seria bom para ele mesmo mudar de tema. Como se existisse um limite para aprofundar o conhecimento sobre um assunto! Igualmente, parece fazer pouco sentido a avaliao negativa de um plano de pesquisa, onde o assessor diz que " o autor faz referncia quase exclusivamente a seus trabalhos " . Se um trabalho vem tendo sucesso e artigos cientficos so aceitos para publicao, seu autor deveria merecer toda a confiana e ter a continuidade de sua pesquisa garantida. Dificilmente um trabalho costuma ser publicado se no for corroborado por uma boa bibliografia! De outro lado, se um pesquisador est continuando uma pesquisa, na qual j obteve resultados significativos, geralmente sabe o que est fazendo! Outro tipo de fundamentao pode ser apoio para a pesquisa de um autor, que j construiu uma espcie de saber terico ou geral sobre o assunto. A familiaridade com os trabalhos anteriores permite ao pesquisador separar rapidamente aquilo que tem chance de poder ser organizado, mediante concordncia ou discordncia com os princpios tericos; esse tipo de trabalho poder levar ampliao do campo de significao das teorias utilizadas ou fornecer infomaes sobre suas limitaes. O nico perigo deste tipo de fundamentao a excessiva confiana nos guias escolhidos, o que leva inevitavelmente a encontrar praticamente aquilo que j foi encontrado. A diferena entre o uso inteligente e criativo de uma teoria e o seu uso fechado facilmente perceptvel confrontando, por exemplo, os trabalhos dos pesquisadores do grupo de Genebra (Piaget, 1973) para classificar as atuaes de crianas mediante os nveis piagetianos e algumas tentativas 'tupiniquns' anlogas da dcada de oitenta. Um exemplo mais complexo de utilizao de teorias ou modelos guias, para nos referirmos principalmente a trabalhos por nos mesmos desenvolvidos, a tese de doutoramento elaborada por Pacca (1983): um guia era a teoria de Piaget referente as estruturas cognitivas; outro guia era o modelo de concepes alternativas de Viennot (Viennot, 1979), que tinha acabado de ministrar um curso na Universidade de So Paulo. O conhecimento especfico da pesquisadora em relao anlise de provas didticas permitiu uma utilizao significativa das sugestes tericas de ambos os referenciais, resultando numa ampliao do campo de aplicao da teoria piagetiana, mediante a distino entre estruturas cognitivas e causalidade. Uma terceira situao, a nosso ver suficientemente fundamentada, ocorre quando o pesquisador tem conhecimento pouco mais do que superficial sobre um determinado guia terico, mas conhecimentos profundos no campo dos dados, desde que seja possvel contar com uma assessoria competente. A presena do assessor essencial, mesmo que suas intervenes no sejam muito numerosas: elas garantem que a teoria guia seja bem interpretada e que os resultados sejam comensurveis com os obtidos pelos especialistas. * Um exemplo interessante foi o trabalho produzido pelo nosso grupo, que na poca incluia outros pesquisadores, sobre a anlise institucional de um curso Bsico de Fsica e levou a dissertao de mestrado de Kishinami (1983). A bibliografia consultada, durante um
17

Investigaes em Ensino de Cincias V6(1), pp. 7-28, 2001

curso de ps-graduao sobre Anlise Institucional, foi bem limitada,no inci, porm, a anlise das entrevistas foi conduzida mediante a metodologia de Anlise de Contedo com a qual os pesquisadores tinham muita familiaridade. Houve em seguida um esforo em complementar a fundamentao terica e a anlise da bibliografia aps concluir a anlise dos dados. A banca examinadora, que envolvia dois especialistas na rea de sociologia, julgou que existia ainda uma lacuna terica e bibliogrfica, do ponto de vista da anlise sociolgica, entretanto a criatividade na elaborao dos dados experimentais, em boa parte devida experincia metodolgica e familiaridade com o objeto de estudo, permitiu alcanar resultados muito interessantes, que j citamos anteriormente, sobre as relaes pedaggicas entre professores e estudantes do primeiro ano de um curso de graduao em Fsica . De um lado a assessoria externa permitiu que o trabalho tivesse sentido na rea sociolgica, alm de pedaggica, e de outro lado incentivou o grupo a no esperar iniciar o trabalho somente aps ter alcanado um conhecimento completo da literatura; provavelmente neste caso nunca se teria conseguido nem apresentar o projeto! * Uma situao semelhante, mais recente, foi a explorao de analogias entre as mudanas durante um processo de psicanlise e de aprendizagem. Apesar dos autores no serem especialistas em psicanlise, puderam elaborar uma srie de concluses sobre o papel do professor (Pacca & Villani, 1997; Villani, 1999) no acompanhamento e nas intervenes para promover a aprendizagem de seus alunos. Em nossa opinio, para que as analogias entre campos ou especialidades diferentes se tornem frutferas, no necessrio o conhecimento aprofundado de ambas, competncia que pode ser adquirida somente aps longos anos de trabalho em cada rea. Basta que pelo menos uma delas seja bem dominada e que ncleos especficos da outra tambm o sejam. Sero esses ncleos os que fornecero as analogias frutferas para a outra rea. Os casos citados anteriormente, apesar de singulares, no so muito frequentes pelos riscos que envolvem; o mais comum um processo interativo entre pesquisa e fundamentao terica, que permite, ao final do trabalho, chegar a uma mediao satisfatria entre a intuio daquilo que plausvel e a justificao terica com base na literatura da rea. Nesta altura a pesquisa torna-se apresentvel mediante o esquema clssico (exigido nos projetos !): objetivo do trabalho - bibliografia significativa - metodologia adequada - dados fundamentais e concluses. Finalmente, uma quarta fundamentao interessante e muitas vezes proveitosa fornecida pela atitude que chamamos de "vira-lata" (Villani & Pacca, 1994). Estamos nos referindo ao pesquisador que no tem muita experincia no campo, no dispe de um conhecimento terico prova de bibliografia atualizada, tambm no dispe do privilgio de assessores disponveis, entretanto quer pesquisar um assunto e, sobretudo, quer obter informaes novas, para ele e, possivelmente, para os outros. Qualquer idia para ele pode ser boa, at prova em contrrio. Assim vai testando com pacincia, descartando o que no parece funcionar, procurando e ouvindo crticas, voltando atrs, quase tentativa e erro. Se ele conseguir manter esta atitude, no comeo os resultados sero pequenos, mas o prprio processo de seleo ir refinar sua maneira de proceder e simultaneamente aumentar sua bagagem cognitiva. O segredo de seu crescimento sua vontade de sobreviver "virando as latas". Em nosso pas, que dispe de poucos recursos tericos e experimentais no campo da pesquisa, tentar competir com os pases desenvolvidos muito difcil: o resultado mais comum descobrir que uma idia interessante j foi aproveitada anteriormente em situaes mais favorveis. Ento parece mais
18

Investigaes em Ensino de Cincias V6(1), pp. 7-28, 2001

eficiente procurar problemas mais locais, sobre os quais dispomos de informaes privilegiadas, utilizando dos recursos tericos disponveis, at que nossa prpria experincia nos fornea, aos poucos, as diretrizes e as referncias que, em cada caso, so mais promissoras. Ento, j viramos pesquisadores experimentados.

Uma Metodologia Confivel O sonho de qualquer cientista isolar as variveis relevantes, eliminando todas as interferncias. um sonho nos dois sentidos: ele resolve todos os problemas de aceitao por parte da comunidade cientfica, porque o resultado aparece de maneira clara e evidente, e ele utpico, porque na prtica nunca pode ser alcanado totalmente, sobretudo nas pesquisas educacionais. Quem no fez uma entrevista, preparando um roteiro com os pontos essenciais a serem abordados e esperando que o entrevistado, naturalmente, passasse de um para o outro sem soluo de continuidade? Quem no colocou um estudante frente a um experimento esperando que, naturalmente, ele fizesse previses, as justificasse, realizasse o experimento e comentasse os resultados comparando-o com suas expectativas? (Ludke & Andr, 1986). Esta seria uma situao de mnima interferncia externa e de informaes objetivas e isentas de qualquer expectativa. Para ser sinceros, j nos aconteceu uma situao deste tipo: para obter informaes sobre a prtica didtica e as relaes pedaggicas dos professores de um determinado curso com seus estudantes, tnhamos preparado uma dezena de temas que considervamos essenciais, que iam desde as aulas ministradas e os experimentos analisados at s avaliaes e os encontros com os estudantes fora de aula. Na entrevista com um professor iniciamos pedindo que ele falasse um pouco de sua rotina escolar e ele falou, sem interrupo, por 55 minutos (somente fez uma pausa de algums segundos na hora de trocar a fita do gravador), abordando todos os temas que haviamos selecionado (e at mais alguns). Sorte nossa obter todas as informaes prontas sem nenhuma interferncia ou sugesto por parte dos entrevistadores? Ser que realmente a situao ideal? Ser que devemos tender a aproximarmos o mais possvel desta prtica e lamentar a perda de tempo gasta em entrevistas que se assemelham mais a extrao de minrio da terra? Nossa opinio atualmente mais prudente com respeito a essa "sorte"! Certamente no se pode negar o valor da informao que chega j estruturada naturalmente, sem interferncias; entretanto ela representa somente a parte mais consciente e elaborada do conjunto de conhecimentos, crenas, hipteses, enfoques, tipos de raciocnio, valores, que influenciam a prtica da pessoa entrevistada. As contradies, as tenses, os problemas no resolvidos, as dvidas ainda no formuladas, os conflitos incipientes dificilmente vm a tona sem que o entrevistador faa uma pergunta inesperada ou ponha o entrevistado numa situao nova e, de alguma forma, perturbadora. Um caso bem famoso de perturbao constitudo pelo uso dos problemas tipo "armadilha" que os pesquisadores costumavam inventar para fazer aparecer as concepes alternativas dos estudantes. Os famosos problemas do "malabarista" (Viennot, 1979) e do "foguete" (Clement, 1981), tiveram sucesso exatamente porque colocavam o estudante fora do seu ambiente escolarizado, no qual muitas vezes ele j tinha elaborado uma sntese (mais ou menos parcial). Vrios pesquisadores criticaram os trabalhos iniciais nesta rea, alegando que se estava "induzindo" os estudantes a responderem de uma maneira errada; de fato os crticos no estavam percebendo que dessa forma estava-se tendo acesso a uma tendncia e a um modo de pensar do estudante que influenciava sua aprendizagem e que s apareceria frente as armadilhas", capazes de criar determinadas circunstncias.

19

Investigaes em Ensino de Cincias V6(1), pp. 7-28, 2001

O que diferencia uma pesquisa bem sucedida de uma trivial no o grau de interferncia que o pesquisador tem, mas quanto essa interferncia atinge e revela o desconhecido. Atualmente bastante valorizada a assim chamada pesquisa-ao, pelo tipo de informaes que permite atingir e que de outra forma no seriam disponveis. * Um estudante de doutoramento que queria pesquisar o currculo real efetivamente realizado numa escola pblica, encontrou uma forma interessante para permanecer e obter informaes na escola sem ser um corpo estranho: ofereceu por mais de dois anos sua assessoria graciosa para os professores, ajudando-os em tudo o que ele pudesse e tivesse competncia. Ele obteve informaes referentes a situaes pessoais e coletivas que lhe foram veiculada graas a confiana e ao carinho que ele conquistou com sua atitude e disponibilidade (Ferrao, 2000). Nenhuma entrevista ou questionrio, por mais hbil ele tivesse sido como entrevistador, teria fornecido informaes to precisas e, s vezes, to esclarecedoras para o entendimento das aes e do comportamento de alunos e professores. De fato a novidade de sua metodologia de coleta de dados foi ir alm da observao participante, na qual o pesquisador participa da vida e das situaes pesquisadas para obter informaes sobre as mesmas. Ele fez da assessoria sua funo na escola, renunciando dessa forma a orientar sua ao pelas exigncias diretas da pesquisa; em compensao a prpria assessoria o ps em contato com os problemas da escola e com informaes que indiretamente se tornaram acessveis por causa de sua funo e disponibilidade. Em resumo, s vezes difcil prever a-priori qual ser a maneira mais adequada de obter seus dados e um planejamento rigoroso pode se tornar um impecilho se ele impedir de perceber e explorar as condies locais e o contexto da pesquisa. Muitas vezes importante renunciar a algum tipo de controle para ter chances de conseguir informaes que no podem ser obtidas diretamente; sobretudo se essas informaes so fundamentais para elaborar um quadro mais realista sobre a situao pesquisada e sua possvel evoluo. O problema que, s vezes, no to simples fazer aceitar essa ambiguidade metodolgica pelas assessorias que julgam os projetos. A anlise dos dados As tendncias mais recentes na pesquisa educacional apontam para o uso crescente de tecnologias mais refinadas de produo de dados experimentais, substituindo, quando possvel, observaes sistemticas e gravaes em audio, por gravaes em vdeo, s vezes de mltiplos pontos de vista. Obtem-se sem dvida dados mais completos e mais confiveis, mas tambm mais complicados de analisar. Ser que devemos trabalhar com todos os aspectos interessantes dos dados? Ser que para sermos objetivos e rigorosos no podemos deixar nada de lado? Existem pesquisadores sustentando que uma sntese fidedigna deve envolver todos os aspectos interessantes e, no caso de no consegu-la, o comportamento mais adequado consiste em parar na descrio dos dados obtidos e dos aspectos analisados e ser generoso nas anlises estatsticas. Nossa opinio j foi expressa h alguns anos atrs (Pacca & Villani, 1990), e ainda permanece vlida, apesar de reconhecermos a complementariedade e a interdependncia dos enfoques qualitativos e quantitativos (Mariani & Ogborn, 1991). Em sntese, achamos que o processo de anlise pode tambm ser conduzido em espiral, selecionando dados mais significativos, construindo hipteses interpretativas e voltando ao resto dos dados procura de

20

Investigaes em Ensino de Cincias V6(1), pp. 7-28, 2001

outras relaes, que por sua vez sero interpretadas, ampliando ou modificando as hipteses anteriores e assim por diante. A vantagem deste modo de proceder dplice. Primeiramente evita o desespero do pesquisador que no consegue ter uma viso significativa de todos os aspectos dos dados e consequentemente fica inseguro quanto possibilidade de formular hipteses abrangentes; facilmente vai se sentir quase que esmagado pela quantidade e complexidade dos dados e no raramente perde a vontade e a esperana de encontrar resultados interessantes e importantes. Pelo contrrio, o sucesso numa anlise parcial, apesar de poder alimentar a vontade de considerar-se satisfeito naquela particular anlise, constitui um incentivo para fortalecer, a medio prazo, a confiana nas anlises sucessivas e para aplic-las em outras situaes. O processo cclico tambm mantm o pesquisador com hipteses provisrias, que podero ser reforadas sucessivamente, mas que no o impedem de observar aspectos contrastantes ou no totalmente compatveis; isso aumenta a chance de produzir conhecimentos efetivamentes inovadores. A pesquisa que citamos anteriormente, referente s concepes dos estudantes sobre o Laboratrio Didtico, modificou radicalmente seu rumo exatamente aps a anlise dos dados de algumas aulas. * Inicialmente a pesquisadora analisou algumas gravaes procura das frases que revelassem as concepes alternativas dos estudantes,conseguindo alguns resultados interessantes; em seguida sua ateno foi atrada pelas situaes de um dos grupos analisados, nas quais dominavam perodos grandes de silncio e inrcia dos estudantes. Assim a pesquisadora resolveu ampliar a anlise para os comportamentos e as atitudes dos alunos durante a realizao dos experimentos. Ela percebeu que alunos com concepes semelhantes tinham atitudes diferentes em relao ao professor, aos colegas e ao prprio conhecimento. A partir dessa focalizao o problema mudou: tratava agora de entender a diferena sobretudo no clima vivenciado pelos grupos e no mais as semelhanas em suas concepes alternativas. E o trabalho foi desenvolvido com a anlise de algumas das aulas, sem pretender extend-la para todo o material disponvel (Barolli, 1998). De fato, a partir desse momento o foco da pesquisa se deslocou para a procura ou, mais precisamente, para a elaborao de um referencial terico melhor que permitisse interpretar as diferenas encontradas. A teoria de Bion sobre os grupos teraputicos (Bion, 1970 e 1994) pareceu poder ser adaptada sem violncia s situaes analisadas e at favorecer a localizao de novos detalhes (Barolli & Villani, 1998). Quais o s indcios de um bom projeto? Dentro do contexto apresentado, propomos deslocar o foco da avaliao de um Projeto de Pesquisa, passar da sua fundamentao terica para o problema e o procedimento anunciado, enfatizando a confiabilidade para produzir novos conhecimentos. Mas, para tanto, no suficiente seguir as regras estabelecidas que em vrias circunstncias no tm garantido a produo de novo saber. No propomos a ignorncia pura e simples dos produtos intelectuais dos outros, na expectativa de produzir, cada um, seu prprio universo terico. Tambm no propomos abandonar o guia terico de autores reconhecidos (Alves, 1991). De fato reconhecemos o valor das snteses bibliogrficas, sobretudo como auxlio na hora de elaborar e analisar os resultados conseguidos, confrontando-os com o trabalho dos outros. Reconhecemos
21

Investigaes em Ensino de Cincias V6(1), pp. 7-28, 2001

tambm a necessidade de estruturas tericas mais articuladas, sobretudo aps termos conseguido nossa pequena articulao. Finalmente, consideramos importante o esforo de produzir dados confiveis e, quando necessrio, de reduzir a interferncia do pesquisador, assim como de analis-los da forma mais completa possvel (Moreira, 1990). Entretanto, nossa ortodoxia no vai alm disso. Consideramos produtores de amarras desnecessrias todos os esforos para alcanar uma viso atualizada, se estes no forem acompanhados de um empenho do pesquisador para acrescentar conhecimentos pessoais complementares. Assim, tambm consideramos um desperdcio de talento ficarmos preocupados com uma fundamentao terica reconhecida, se esta no for acompanhada de uma atitude, seja de aprofundamento para alm do aceito ou de desconfiana do estabelecido, procurando e aproveitando tudo o que parece resto. Este trabalho com seus resultados no pode ser completamente previsvel, por isso impossvel de se concretizar no Projeto inicial. Em sntese, nossas consideraes esto baseadas na percepo construda ao longo de nossa experincia de que existem pelo menos duas maneira suspeitas e duas maneiras mais confiveis de conduzir uma pesquisa em nossa rea. As duas maneiras suspeitas tm em comum a crena de que possvel atingir o real , atravs de um procedimento estratgico ou de um procedimento ttico. Uma possibilidade considerar o referncial terico adotado como um instrumento inquestionvel, sobre o qual no vale a pena fazer perguntas. Desse modo ele constitui o critrio ltimo e essencial para todas as escolhas a serem realizadas. Chamaremos de Conservador o pesquisador que adota esse mtodo. Outra possibilidade considerar nova uma tese especfica que, pela sua novidade, merece tanto interesse, no devendo ser abandonada por nada. Assim, ela deve orientar todas as escolhas ao longo da pesquisa, custe o que custar. como se a criatividade do pesquisador tivessse se esgotado na criao da idia nova. Chamaremos de Revolucionrio o pesquisador que adota esse mtodo. Estes modos de conduo parecem situaes de final de pesquisa mais do que de um Projeto na medida em que j existe, em princpio, a pergunta com a resposta e o que se quer legitim-la ou apresent-la de acordo com os moldes estabelecidos. Duas outras maneiras que nos parecem mais confiveis para conduzir uma pesquisa com chances de chegar a novidades tem em comum a crena de que o real no pode ser atingido definitivamente, ento a criatividade e a perspiccia devem estar sempre presentes. Assim, o pesquisador que chamaremos de Tradicional , apesar de adotar um referencial privilegiado e a partir dele desenvolver o procedimento, vivencia sua busca admitindo e procurando a possibilidade de alteraes e de incluso de novidades nesse procedimento que o tornem mais adequado para as circunstncias. O pesquisador que chamaremos de Anrquico , apesar de seguir o desejo de romper com o esquema vigente, est atento `a possibilidade de modificaes do novo esquema adotado, inclusive aceitando elementos tradicionais. A produo de conhecimentos novos relevantes parece se apoiar em caractersticas menos formalizadas e estruturadas do pesquisador e do prprio problema em questo e algumas idias podem ser apresentadas ou sugeridas. Em primeiro lugar o pesquisador deve gostar da pesquisa, o que se manifesta pela disponibilidade e ateno constantes com respeito aos indcios de novidades, mesmo sendo um pesquisador tradicional. Nos parece que ao pesquisador que gosta de pesquisar, tudo seja permitido , pois sua vontade de avanar lhe permitir, de um lado, evitar as iluses das idias to bonitas que no precisam ser redimensionadas e, de outro lado, evitar as desiluses dos caminhos j traados que levam a resultados j conhecidos.

22

Investigaes em Ensino de Cincias V6(1), pp. 7-28, 2001

A segunda sugesto que o pesquisador, mesmo que Tradicional, deve estar preparado para se afastar, pouco ou muito, da tradio dominante. Parece claro para ns que a produo de conhecimentos novos envolve, quase sempre, a ruptura, s vezes pequena, s vezes maior, com algum procedimento padronizado ou com algumas hipteses consideradas como estabelecidas na rea ou at com algum valor considerado como intocvel. claro que esta atitude envolve riscos, que so tanto maiores quanto maior for o afastamento da prtica vigente, pois um procedimento no sustentado pela tradio, no caso de falhar em suas perspectivas, no somente no contribuir para aumentar o conhecimento geral, mas poder comprometer at o currculo e a fama do pesquisador. Quem quer produzir conhecimentos novos deve estar consciente de que a comunidade conservadora e premia com seu reconhecimento quem cumprir com todas as exigncias; entre outras coisas bem mais fcil ter projetos aprovados e artigos publicados. A terceira sugesto, que complementa e modula as anteriores, que o pesquisador, mesmo querendo ser Anarquista, deve investir energias em novas idias somente na medida que elas apresentam sinais de sucesso. Trata-se de um procedimento bem familiar na Histria da Cincia: a fundamentao pelas promessas de sucesso. Isso permite que o pesquisador no se afaste demasiadamente da Comunidade ao ponto de perder o interesse de comunicar e divulgar suas idias e seus resultados. Novas idias, novos procedimentos, novos mtodos, comeam a despertar o interesse da comunidade dos pesquisadores, mesmo que se afastem em parte ou totalmente da prtica vigente, na medida que prometem sucesso na resoluo de problemas at ento no resolvidos (Laudan, 1977). E se as promessas forem cumpridas, as novidades podero se tornar rapidamente uma nova tradio. A quarta sugesto, mesmo para o pesquisador Anarquista, a de no perder o contato com a tradio, no sentido de se perguntar sistematicamente que novidades efetivas esto sendo introduzidas e que relao elas tm com o esquema tradicional. Isso permite perceber que, s vezes, as novas idias tm uma analogia significativa com as antigas, consequentemente, elementos antigos podem ser adotados sem dificuldades e com muito proveito. Enfim, a perspectiva sermos idealistas e pragmticos ao mesmo tempo: idealistas quanto meta de procurar novidades sem cessar e pragmticos quanto dosagem de energias investidas em suas elaboraes. De fato, na vida real, ningum totalmente seduzido pela procura, pois outros interesses sempre se misturam, assim como ningum est to amarrado para no se permitir um lampejo de liberdade. De fato, em cada pesquisa confivel, normalmente, mistura-se um pouco de tudo; o trabalho de rotina de repente deixa o lugar para a emergncia de perguntas novas e estas terminam e se completam mediante trabalhos de rotina; momentos de rgida ortodoxia se entrelaam com momentos de tentativas anrquicas e os resultados so misturados e apresentados como se tudo tivesse sido planejado com a maior racionalidade. Ento podemos agora enfrentar a pergunta inicial: quais os indcios de que um projeto confivel, ou seja, ser conduzido com competncia e portanto deve ser apoiado? Existem coisas difceis de avaliar porque so subjetivas e implcitas. RELEVNCIA DO TEMA - Podemos considerar inicialmente como importante a relevncia do tema do projeto. Com isso entendemos que dever ser focalizada tanto a relevncia objetiva, ou seja, a relevncia da pesquisa proposta e como ela se insere na problemtica da rea, quanto a relevncia subjetiva, ou seja, quanto ela importante para as perspectivas do pesquisador, pois dessa forma teremos alguma garantia de que ele no assumir uma postura burocrtica e no ceder frente s dificuldades.
23

Investigaes em Ensino de Cincias V6(1), pp. 7-28, 2001

COMPETNCIA DO PESQUISADOR - Outro ponto ser a competncia do pesquisador . Aqui tambm teremos a competncia objetiva, sinalizada pelo volume e importncia dos trabalhos realizados e pelo nmero de pesquisadores formados, e a competncia subjetiva, sinalizada pelo tipo de problemas nos quais est envolvido e pela capacidade de soluo mais recente. QUESTES LEVANTADAS - Outro ponto ser analisar as questes levantadas pelo projeto. Estamos nos referindo s objetivas , ou sejas, s questes claras e que apontam para pontos precisos a serem investigados, e tambm s questes subjetivas, ou seja, s dicas heursticas que ajudaro o pesquisador a trabalhar durante a pesquisa at definir mais precisamente suas questes objetivas. REFERENCIAIS - Ainda ser importante analisar os referenciais e a bilbiografia adotados pelo pesquisador. Deveremos considerar no somente os referenciais objetivos, os que, no conceito da comunidade que trabalha na rea, se referem ao domnio pesquisados e so considerados relevantes e estabelecidos, mas tambm os referenciais subjetivos , ou seja aqueles que na opinio do pesquisador tero a capacidade de sugerir analogias para desenvolver seu trabalho. ABERTURA PARA MUDANAS - Finalmente, o ponto mais importante ser perceber se o pesquisador oferece sinais de que estar aberto ao rumo do trabalho ou seja se ele estar disponvel para mudar o rumo, caso a situao assim exija. O projeto prev o confronto com algum tipo de crtica, externa ou interna, que permita ir alm do estabelecido at ento? De alguma forma, o projeto, apesar de ser colacado como uma proposta racional, permite antecipar que durante seu desenvolvimento poder ser aperfeioado com as sugestes e dicas vindo do contexto? Esse ltimo ponto nos permite abordar mais uma considerao sobre a relao do pesquisador com as crticas. Quem j mandou verses provisrias ou definitivas de seu trabalho para serem comentadas e/ou avaliadas por outros pesquisadores, certamente j experimentou aquela sensao de impotncia e raiva na primeira leitura das crticas. Aps esta primeira reao, que pode durar desde meia hora at dias e semanas, emerge a diferena entre um pesquisador profissional aberto que elaborou um trabalho bem conduzido e um pesquisador fechado que no curte o processo de produo de conhecimentos novos. Algumas vezes realmente os pareceres que recebemos so de m qualidade, bem pouco aproveitveis; mas, pela nossa experincia, raramente a crtica intil. Normalmente o parecer oscila entre uma anlise aprofundada das idias bsicas e da prpria estrutura do trabalho e uma viso global superficial da problemtica apresentada, com sugestes interessantes, porm locais. Em qualquer dos casos o pesquisador fechado continuar defendendo internamente o seu trabalho e procurar de todas as maneira desvalorizar o parecer, numa atitude de defesa estrita, salientando tudo aquilo que nele pode ser atacado, desde a linguagem, os contedos implcitos, as finalidades, as idias bsicas, ... Enfim, fecha-se em sua primeira formulao e em nada aproveita das sugestes; muitas vezes sem condies de reformular seu trabalho, por no distinguir ainda aquilo que nele essencial, do que descartvel, as informaes novas das repeties. Ao contrrio, o pesquisador aberto tenta primeiro entender o sentido do parecer, refletindo sobre sua totalidade, procura de indicaes que melhorem a qualidade do produto
24

Investigaes em Ensino de Cincias V6(1), pp. 7-28, 2001

original; aproveita-se da oportunidade de ter seu trabalho comentado por um pesquisador externo. Durante um congresso, no qual estvamos apresentando um trabalho sobre formao de professores (Villani & Pacca, 1992b) procurando convencer o auditrio de que nossa proposta de atualizao em servio, baseada na elaborao de um planejamento didtico pelos professores, era uma maneira eficiente de resolver o problema da passagem da teoria prtica, nos foi sugerido procurar analisar os relatrios dos muitos cursos oferecidos pelas Secretarias do Estado ou dos Municpios para perceber quais as estratgias a utilizadas. Concordamos que o trabalho seria interessante e at complementar ao nosso, mas na ocasio no perceiamos nesse trabalho uma contribuio para o nosso, cuja fundamentao era em parte terica (Villani & Pacca, 1992) e em parte baseada nos resultados at ento conseguidos. Somente bem mais tarde, reconsiderando a sugesto, pensamos na possibilidade de estratgias naturais de envolvimento dos professores, desenvolvidas aqu e acol por eles mesmos, s quais no poderamos ter acesso pelo fato da iniciativa dos nossos trabalhos ser determinadas j por ns mesmos. Mesmo sem adotar a sugesto, o efeito prtico foi de nos tornarmos mais crticos quanto aos eventuais limites de nossa atuao. Em geral, as crticas podem sugerir questes que passaram desapercebidas, anlises que no foram completadas, consequncias que no foram apresentadas, contradies que no foram examinadas; qualquer elemento que possa complementar o trabalho pode ser explorado pelo autor, inclusive indo alm das intenes do prprio comentarista. Quando nada disso encontrado, sempre possvel localizar os malentendidos do parecerista com a finalidade de chegar a uma formulao melhor do projeto ou do relato, que evite tais interpretaes distorcidas. Qual a contropartida da atuao dos crticos e assessores no contexto aqui discutido? Parece-nos que as exigncias quanto competncia dos assessores tambm se modificam essencialmente, e deveriam apoiar-se em dois compromissos bsicos. Por um lado, o crtico/assessor deveria ser capaz de criar clima e espao para novidades que se apresentam individualmente, s vezes, surpreendentes, desviando-se completamente dos esquemas tradicionais e ortodoxos. Por outro lado, analisar o projeto de certo modo imparcialmente mas tambm com uma viso global da problemtica no contexto atual das pesquisas, podendo desse modo orientar o trabalho e ajud-lo no sentido de resultados relevantes e pertinentes. Uma ao com esses critrios seria muito diferente daquela que se prope a confrontar o trabalho diretamente com a ortodoxia, premiando-a sem garantia de resultados que representem um galgar nveis no conhecimento da rea, ou excluindo-o por no enxergar num fato surpreendente a possibilidade de uma inovao. Como sugesto final, gostaramos de estmular o debate e o compromisso para a ao, perguntando-nos e a toda a comunidade: Como contribuir para que a comunidade seja estimuladora de novos caminhos e no defensora d e tradies?
25

Investigaes em Ensino de Cincias V6(1), pp. 7-28, 2001

Como tornar disponvel a competncia dos pesquisadores mais experientes, para que possam criticar num dilogo frutfero? Como sustentar os novos pesquisadores em seus esforos at que eles tenham sucesso?

Referncias ALVES, A.J. 1991 O Planejamento de Pesquisas Qualitativas em Educao. Cadernos de Pesquisas, 77(5), pp. 53-61 ALVES-MAZZOTTI, A.J. & GEWANDSZNAJDER, F. (1998). O Mtodo nas Cincias Naturais e Sociais: Pesquisa Quantitativa e Qualitativa . So Paulo:Pioneira. ASTOLFI, J.P. 1999 El error, un medio para ensear. Diada Editora S.L., Sevilla BARBIER, R. 1996 - La Recherche Action. Ed. Econmica, Paris. BAROLLI, E. 1998 - Reflexes sobre o trabalho dos estudantes no Laboratrio Didtico. FEUSP. Tese de Doutoramento FEUSP BAROLLI, E.; MATTASOGLIO, O.N.;COSTA, R.Z.V. & VILLANI, A.- 1996 - A Tomada de Dados: Uma etapa esquecida no Laboratrio de Cincias. ATAS da XIX ANPED. GT Didtica , Caxamb (M.G.) BAROLLI & VILLANI- 1997 - Contribuies da psicanlise para a interpretao do laboratrio didtico. ATAS da XX ANPED. Disquete GT Didtica . Caxamb (M.G.) BAROLLI, E. & VILLANI, A. 1998 Laboratrio didtico e Subjetividade. Investigaes em Ensino de Cincias 3(3), pp. 145-164. BION, W. R. 1970 - Experincias com Grupos - Imago Editora -Rio de Janeiro, BION, W.R. - 1994 -Estudos psicanalticos revisados . 3a edio revisada. Rio de Janeiro. Imago, 1994. CLEMENT, J. - 1981 - American Journal of Physics, 50 (1), pp. 66-70 COHEN, L . & MANION, L. 1994- Research Methods in Education . 4 ed. London: Routledge. DUIT, R.; GOLDBERG, F. & NIEDDERER, H. (Eds.) Research in Physics Learning: Theoretical Issues and Empirical Studies. IPN. Kiel (D). ERICKSON, F. : Metodos qualitativos de investigacion sobre la enseanza. In Wittrock, M.C. La Investigacin de la enseanza II Ed. Paidos, Barcelona cap. 4 FERRAO, C.E. 2000 A Escola Nua ou sobre a Fora e a beleza das aes cotidianas. Tese de Doutoramento . FEUSP
26

Investigaes em Ensino de Cincias V6(1), pp. 7-28, 2001

FRANZONI, M. 1998 - Projeto enviados para a FAPESP FREITAS, D. 1998 - Mudana Conceitual em sala de Aula: Uma experincia em Formao inicial de Professores. Tese de doutoramento . FEUSP, So Paulo GIBSON, E.J. & LEVIN, H. 1975 The Psychology of Reading . MIT Press, Cambridge and London KISHINAMI, R.I. - 1983 - Anlise Institucional de um Curso Bsico de Fsica. Dissertao de Mestrado IFUSP-FEUSP KISHINAMI, R.I.; HOSOUME, Y.; PACCA, J.L.A.; VILLANI,A.- 1983 - Analysis of Institutional Relations in an Introductory Physics Course. Publicaes IFUSP/P-396 LAUDAN, L. - 1977 - Progress and its Problems. University of California Press. Berkeley CA. LDKE, M. e ANDR, M. E. D. A. (1986). Pesquisa em Educao: abordagens qualitativas. SP: Ed. Pedaggica e universitria ltda. MARIANI, M.C. & OGBORN, J. - 1992 - Toward an Ontology of Commonsense Reasoning. International Journal of Science Education 13(1), pp. 69-85. MOREIRA, M.A. 1990 Pesquisa em Ensino: O V Epistemolgico de Gowin. E.P.U So Paulo ORQUIZA, L.C. - 1994 - Representaoes mentais e conflitos cognitivos: o caso das colises em Mecnica. Tese de Doutoramento . FEUSP, PACCA, J.L.A.- 1983 - O perfil dos candidatos ao Vestibular da FUVEST. Tese de Doutoramento , FEUSP PACCA, J.L.A. & VILLANI, A. - 1990 - Categrias de anlise nas pesquisas sobre conceitos alternativos. Revista de Ensino de Fsica, 12(1), pp.123-138. PACCA, J.L.A. & VILLANI, A. 1997 A Competncia Dialgica do Professor de Cincias ATAS da XX ANPED. Disquete do GT de Didtica. Caxamb (M.G.) PIAGET, J. - 1973 - La Trasmission des Mouvements. E.E.G. XXVII; P.U.F. POSNER, G.J., STRIKE, K.A.; HEWSON, P.W.; GERTZOG, W.A. - 1982 -Accomodation of a Scientific Conception: Toward a Theory of Conceptual Change - Science Education , 66(2), pp. 211-227. Scala, S.B.N. 1980 Aprendizagem e Leitura: A Tcnica de Cloze na compreenso de relaes de Fsica . Dissertao de Mestrado. IFUSP -FEUSP THIOLLENT, M. 1988 -. Metodologia da Pesquisa Ao. SP: Cortez Editora VIENNOT, L. - 1979 - Le raisonnement spontane en dynamique lmentaire. Paris: Herman

27

Investigaes em Ensino de Cincias V6(1), pp. 7-28, 2001

VILLANI, A . - 1999 - O Professor como um Analista? - Ensaio - Pesquisa em Ensino de Cincias 1(1) , pp.5-31 VILLANI, A & FREITAS, D. (1998) Anlise de uma experincia didtica na formao de professores de cincias . Investigaes em Ensino de Cincias 3(2) , pp. 121-142 VILLANI, A & PACCA, J.L.A. - 1987 - Students' spontaneous ideas about the speed of light. International Journal of Science Education 9(1), pp.55-66 VILLANI, A & PACCA, J.L.A.- 1990 - Conceptos espontneos sobre colisiones. Enseanza de las Ciencias, 8(3), pp. 238-243 VILLANI, A. & PACCA, J.L.A. 1990b - Spontaneous reasoning of graduate students. International Journal of Science Education 12(5), pp. 589-600 VILLANI, A & PACCA, J.L.A. - 1992 - Teoria e Prtica Didtica na atualizao de professores de Fsica. Revista Brasileira de Ensino de Fsica, 14(1), pp.113-119. VILLANI, A & PACCA, J.L.A. 1992b - Atualizao de Professores de Fsica no Brasil: Por Qu? Como? Quando? Para Quem? Atas do V Reunio Latino-Americana de Ensino de Fsica , pp 75-93 VILLANI, A.; PACCA, J.L.A. - 1994 - Qual a fundamentao de seu trabalho? Resumos IV Encontro de Pesquisadores em Ensino de Fsica. Florianpolis (Brasil) (1994) pp . 12-15 VILLANI, A; SCALA, S.B.N. & HOSOUME, Y. - 1982 - A Tcnica de Cloze na compreenso de relaes de Fsica. Revista Brasileira de Fsica , 12(4), pp. 803-825 WILSON, J.T. & KORAN, J.J.JR. 1975 Review of research on mathemagenic behavior: Implications for Teaching and Learning Science. Journal of Educational Psychology , 67, pp.397-400.

Recebido em 03.04.2001 Aceito em 11.04.2001

28