CAPTULO 23

Metodologia de pesquisa
cientfica em sistemas
colaborativos
Denise Filippo
Mariano Pimentel
Jacques Wainer

META

Apresentar uma viso geral dos mtodos de pesquisa cientfica e sua aplicabilidade avaliao de
sistemas colaborativos.

OBJETIVOS EDUCACIONAIS

Aps o estudo deste captulo, voc dever ser capaz de:

identificar o mtodo de pesquisa mais indicado para um determinado objetivo e questo

de pesquisa;

identificar as tcnicas de coleta de dados mais indicadas para um determinado objetivo e

questo de pesquisa;

aplicar e incluir no projeto de pesquisa tcnicas para aumentar o rigor cientfico.

RESUMO

Este captulo apresenta uma viso geral sobre como conduzir pesquisas cientficas que envolvam Sis-
temas Colaborativos. O objetivo das pesquisas realizadas nesta rea ampliar o conhecimento sobre
o desenvolvimento e uso de sistemas colaborativos e sobre como as pessoas colaboram com apoio
de sistemas computacionais. Diferentes mtodos de pesquisa, como experimento, estudo de caso e
etnografia so utilizados em Sistemas Colaborativos. Entre as tcnicas de coleta de dados adotadas,
esto questionrio, entrevista e observao direta. Questes relativas ao rigor da pesquisa, generali-
zao e tica devem ser observadas para garantir o alto nvel da pesquisa.
 380 Sistemas Colaborativos

23.1 Pesquisa cientfica

Imagine que a primeira verso do sistema colaborativo que voc est desenvolvendo foi
finalizada e voc est ansioso para saber a reao das pessoas que vo us-lo. O sistema
vai efetivamente dar suporte colaborao entre os usurios? Que mudanas o sistema ir
provocar na maneira como os usurios colaboram uns com os outros? Como as pessoas
usaro o sistema? Ele vai solucionar um problema para o grupo? Ser que aquela funcio-
nalidade nova vai impactar na qualidade do trabalho e a produtividade da equipe? Quais
funcionalidades sero mais usadas e por qu? O que os usurios sentiro ao trabalhar com o
sistema: satisfao, indiferena ou irritao? Qual a relao custo/benefcio da implantao
do sistema na empresa? Como o novo sistema contribuir para o avano do conhecimento
cientfico? As perguntas so muitas!

Avaliar um sistema colaborativo durante o seu desenvolvimento ou implantao, no uso

dirio ou aps uma nova verso ser liberada uma atividade que voc certamente ter
que fazer, mas nem toda avaliao se caracteriza como uma pesquisa cientfica. Para ser uma
avaliao cientfica, a pesquisa deve gerar conhecimento que contribua para ampliar o corpo
de conhecimentos da rea e deve possibilitar a formulao de leis e teorias. J o objetivo de
uma avaliao tcnica melhorar a qualidade do sistema. Muitos alunos acham que fizeram
uma pesquisa cientfica ao realizar um estudo sobre a usabilidade do sistema colaborativo,
talvez porque usem instrumentos e tcnicas de coleta de dados que so comuns em pesquisas
 Captulo 23 | Metodologia de pesquisa cientfica em sistemas colaborativos 381

cientficas, como questionrios e entrevistas. Contudo, nos casos em que no h gerao de

conhecimento novo, em vez de uma pesquisa cientfica, a avaliao se caracteriza como um
estudo tcnico sobre a qualidade de uso do sistema.

O conhecimento cientfico difere do conhecimento vulgar ou popular, que, historicamente

construdo e baseado no senso comum, nem sempre verificvel ou correto. Uma pesquisa
cientfica se realiza com base num conjunto de procedimentos executados rigorosamente
para se produzir o conhecimento dito cientfico. O que se busca com as pesquisas cientficas
desenvolver teorias para explicar fenmenos.
O conhecimento cientfico pode ser obtido mediante pesquisas empricas, que so baseadas
na coleta e anlise de dados obtidos por meio de observao sistemtica em experimentos
de laboratrio ou pesquisas de campo. As pesquisas empricas so o foco de ateno neste
livro, pois elas constituem a maioria das pesquisas realizadas em Sistemas Colaborativos.
Outras formas de se obter conhecimento cientfico, como as pesquisas analticas ou biblio-
grficas, no so aqui tratadas.
A partir das pesquisas realizadas, o conhecimento cientfico acumulado por meio de uma
busca contnua por elaborar e aperfeioar teorias, conforme esquematizado na Figura 23.1.
Uma pesquisa cientfica pode corroborar a teoria vigente, ou exigir revises ou mesmo a
criao de uma nova teoria.

Figura 23.1 Processo de construo de conhecimento cientfico

 382 Sistemas Colaborativos

As pesquisas cientficas seguem o processo genrico representado na Figura 23.2, mas exis-
tem diferentes mtodos de pesquisa, e cada mtodo indica uma forma especfica de como
projetar e aplicar a pesquisa, quais as possveis tcnicas para obter e analisar dados, e como
generalizar os resultados.

Figura 23.2 Processo de pesquisa cientfica

No confunda uma pesquisa cientfica com o desenvolvimento

de um sistema
O desenvolvimento de um sistema pode ser considerado relevante como projeto final
de graduao e de especializao, pois o aluno demonstra que conseguiu aplicar as tc-
nicas apreendidas durante o curso, mas esse tipo de trabalho no se caracteriza como
uma pesquisa cientfica. Segundo Wazlawick (2008), esse tipo de pesquisa fiz algo
novo, eis meu produto resulta em artigos vistos mais como uma propaganda do
grupo que desenvolveu o sistema em vez de se caracterizar como um bom relato de
uma pesquisa cientfica. Para o avano cientfico, preciso tentar resolver um problema
relevante, formular uma boa hiptese ou boas questes de pesquisa, fundamentar-se
numa teoria e seguir rigorosamente um mtodo de pesquisa, coletar e analisar dados, e
comparar a abordagem com outras apresentadas na literatura.
 Captulo 23 | Metodologia de pesquisa cientfica em sistemas colaborativos 383

Nos captulos seguintes desta parte do livro, discutiremos em mais detalhes alguns mtodos
relevantes na rea de Sistemas Colaborativos. Nas sees a seguir, apresentamos princpios e
procedimentos transversais aos vrios mtodos de pesquisa.

23.2 Metodologia de pesquisa cientfica

Metodologia cientfica o estudo dos diferentes mtodos de pesquisa cientfica. Entenda
metodologia como a disciplina que fundamenta e compara os mtodos de pesquisa, avalia
suas especificidades e aplicabilidade, entre outros objetivos. Em metodologia de pesquisa
cientfica, costuma-se estudar os seguintes aspectos:
abordagem de pesquisa: pesquisa quantitativa, pesquisa qualitativa;
posio epistemolgica: positivista, interpretativista, crtica;
mtodo de pesquisa: experimento, estudo de caso, pesquisa-ao, entre outros;
finalidade: explicar, explorar ou descrever o fenmeno observado;
tcnica de coleta de dados: questionrio, entrevista, observao direta e documentos
histricos, entre outros;
tcnica de anlise de dados: anlise estatstica, anlise de contedo, anlise do
discurso, entre outras.
Alguns destes aspectos so apresentados resumidamente nas subsees a seguir. Mtodos de
pesquisa e tcnicas de coleta de dados so discutidos de forma mais detalhada nas prximas
sees deste captulo.

Abordagem de pesquisa
Duas abordagens de pesquisa emprica se destacam: a pesquisa quantitativa e a pesquisa qua-
litativa. Numa primeira definio, pesquisas quantitativas se ocupam de variveis que podem
ser medidas, enquanto pesquisas qualitativas se ocupam de variveis que no podem ser me-
didas, apenas observadas. A abordagem mista, na qual a pesquisa baseada em dados quanti-
tativos e qualitativos, tambm adotada.
Na pesquisa quantitativa, as variveis tm geralmente valores numricos, so obtidas de medi-
das objetivas e so analisadas estatisticamente. Exemplos de medidas numricas: a quantidade
de vezes que um usurio acessou uma pgina do sistema, quantas mensagens foram enviadas
pelos membros da equipe de trabalho, ou a quantidade de contatos de uma pessoa em uma
rede social. Algumas medidas subjetivas, como o grau de satisfao do usurio com o sistema
colaborativo, podem ser obtidas por questionrios em que o prprio usurio informa o grau
de sua satisfao; por exemplo, atribuindo uma nota baseada numa escala de valores de 0 a
10. As variveis no precisam ser necessariamente numricas: um exemplo aquele em que
se deseja saber quais dos servios de comunicao oferecidos por um sistema colaborativo
o mais popular entre os usurios (correio eletrnico, bate-papo, frum etc.). A resposta no
ser um nmero, mas o resultado avaliado estatisticamente e apresentado, por exemplo, em
termos de porcentagem de uso. Dentre os mtodos de pesquisa quantitativos, destacamos na
prxima seo o experimento e o survey.
 384 Sistemas Colaborativos

Dependendo da investigao que voc quer fazer, a pesquisa quantitativa no uma aborda-
gem adequada. Muitas perguntas que fazemos sobre o desenvolvimento ou uso de um siste-
ma colaborativo como a pessoa usa o sistema, o que est funcionando bem e o que ainda
um problema? no so suficientemente respondidas por meio de valores passveis de
anlise estatstica. As respostas para essas perguntas geram dados denominados qualitativos:
eles no podem ser medidos diretamente, e geralmente so obtidos por meio de entrevistas,
documentos ou observaes do prprio pesquisador sobre as aes dos usurios. Na prxi-
ma seo, apresentamos resumidamente alguns mtodos qualitativos: estudo de caso, teoria
fundamentada em dados, etnografia e pesquisa-ao.
A viso das duas abordagens puramente focada nos tipos de dados coletados, opondo as
pesquisas que lidam com dados quantitativos s pesquisas que lidam com dados qualitativos,
esconde aspectos importantes que devem ser conhecidos pelo pesquisador. Mtodos quan-
titativos derivam das cincias naturais, diferentemente de mtodos qualitativos, que vm das
cincias sociais. Essa diferena na origem implica em vises distintas sobre o que cincia e
sobre como se faz cincia. Perspectivas filosficas fundamentam as abordagens e os mtodos
de pesquisa, como discutido a seguir.

Posio epistemolgica
Cada pesquisa est fundamentada em uma perspectiva epistemolgica, ou filosfica, que
caracteriza a crena sobre a possibilidade de obteno do conhecimento e de sua origem.
Das perspectivas epistemolgicas mais conhecidas, destacamos a positivista, a interpreta-
tivista e a crtica.
Na perspectiva positivista, considera-se que no mundo existem variveis objetivas e inde-
pendentes do observador. O conhecimento obtido na busca por padres e relaes causais
(relao causa-e-efeito). Estes so fundamentos bsicos dos mtodos quantitativos Experi-
mento (mtodo clssico de pesquisa em laboratrios) e Survey (baseado em anlises esta-
tsticas de amostras populacionais). A pesquisa qualitativa com vis positivista tenta seguir
os fundamentos da pesquisa quantitativa, buscando provar e refutar teorias e leis sob esta
perspectiva objetiva do mundo.
Na perspectiva interpretativista, considera-se que no h variveis objetivas e que tudo o que
observado depende da interpretao do observador. As pessoas observam o mesmo fato de
forma diferente e atribuem valor ao fato de forma diferenciada. O conhecimento relativo
e deve ser obtido sob a tica dos indivduos diretamente envolvidos. Em Sistemas Colabo-
rativos, as pesquisas com perspectiva interpretativista buscam elucidar os diferentes pontos
de vista, valores e interpretaes das pessoas envolvidas com o sistema colaborativo que est
sendo estudado.
Na perspectiva crtica, a observao interpretada em funo de relaes de poder e do-
minao estabelecidas histrica e socialmente. Nos Sistemas Colaborativos esto embutidas
relaes de poder, dominao e alienao, e o objetivo de uma pesquisa com filosofia crtica
revelar essas relaes.
 Captulo 23 | Metodologia de pesquisa cientfica em sistemas colaborativos 385

Quais perspectivas filosficas so predominantes?

Dube e Pare (2003) analisaram 210 artigos na rea de sistemas de informao, de 1990 a
2000, e descobriram que 87% deles seguem a perspectiva positivista, 12% a perspectiva
interpretativista e apenas 1% a perspectiva crtica. Embora esses resultados sejam da
dcada de 1990, ainda hoje se identifica a predominncia da viso positivista em nossa
rea. Dube e Pare (2003) apresentam em seu artigo uma discusso acerca da pesquisa
positivista em sistemas de informao; Klein e Myers (1999) discutem a pesquisa inter-
pretativista em seu texto; e o artigo de Myers e Young (1997) um bom exemplo de
pesquisa com perspectiva crtica na rea de computao.

Mtodo de Pesquisa
Um mtodo de pesquisa um processo
especfico para a realizao de pesqui- Mtodo ou metodologia?
sas cientficas. Um mtodo define um
conjunto organizado de procedimen- Convm ressaltar a diferena entre os termos
mtodo e metodologia, pois h uma contro-
tos a serem seguidos de forma siste-
vrsia, e alguns autores usam metodologia
mtica que orientam o pesquisador na
para tambm se referenciar a mtodo. Neste
realizao de uma pesquisa cientfica.
livro, adotamos o termo mtodo de pesqui-
O uso de um mtodo est associado a
sa para indicarmos o processo especfico
perspectivas filosficas, tcnicas, tipos
usado para realizar uma pesquisa, e reser-
de dados, protocolos e boas prticas.
vamos o termo metodologia da pesquisa
Na rea de Sistemas Colaborativos, so
para nos referir somente ao estudo dos dife-
empregados diversos mtodos de pes- rentes mtodos de pesquisa cientfica.
quisa cientfica, tais como experimento,
estudo de caso e pesquisa-ao. Cada
mtodo de pesquisa tem caractersticas prprias, no sendo possvel afirmar genericamente
que um mtodo melhor que outro; dependendo da questo ou hiptese da pesquisa que
se deseja investigar, um mtodo mostra-se mais indicado do que outro.

Finalidade
Uma pesquisa pode ser realizada para diferentes finalidades: explicar um fenmeno, explorar
possveis causas do fenmeno, ou descrev-lo.
Na pesquisa explanatria, ou explicativa, o objetivo identificar os fatores determinantes
para a ocorrncia de um fenmeno. estabelecida uma hiptese de causa-e-efeito sobre o
fenmeno estudado: SE tal causa ocorrer, ENTO tal efeito ser observado. A pesquisa
projetada para investigar se a hiptese falsa ou se parece ser verdadeira. O pesquisador
assume que a hiptese verdadeira, mas que est sob suspeita; uma hiptese considerada
vlida at que dados empricos venham a derrub-la. Em Sistemas Colaborativos, uma pes-
quisa explanatria geralmente realizada para avaliar se o uso de um sistema ou funcionalida-
de (causa) resolve um problema especfico (efeito).
 386 Sistemas Colaborativos

Na pesquisa exploratria, o objetivo fazer exploraes iniciais sobre um fenmeno pou-

co conhecido. Objetiva-se descobrir variveis relevantes relacionadas ao fenmeno e sugerir
possveis relaes de causa-e-efeito que devero ser investigadas em pesquisas futuras. No
estabelecida uma hiptese a ser falseada, a pesquisa realizada mais livremente para identi-
ficar oportunidades de pesquisa e esboar interpretaes possveis. Em Sistemas Colaborati-
vos, a pesquisa exploratria geralmente realizada para identificar o potencial, os problemas
e as influncias do uso de um sistema colaborativo.
J numa pesquisa descritiva, o objetivo descrever um fenmeno. uma abordagem til
quando o fenmeno pouco conhecido e deseja-se produzir descries mais detalhadas,
acuradas ou perspicazes desse fenmeno. No h uma hiptese. Na rea de Sistemas Cola-
borativos, a pesquisa descritiva pode ser realizada para descrever como um grupo realiza um
determinado trabalho, como usa um determinado sistema para a realizao de tarefas, ou
como o sistema usado por diferentes perfis pessoais.

Tcnica de coleta de dados

Os dados de uma pesquisa so coletados de diversas fontes. Na seo 23.4 so apresentadas
com mais detalhes as principais tcnicas de coleta de dados usadas em Sistemas Colaborativos.

Tcnica de anlise de dados

Dentre as tcnicas para analisar os dados coletados em uma pesquisa cientfica em Sistemas
Colaborativos, destacamos a anlise estatstica para analisar dados quantitativos, e a anlise de
contedo e a anlise do discurso para dados qualitativos.
Anlise estatstica aplica-se quando os dados so nmeros obtidos de uma medio objetiva
a partir de variveis como tempo de execuo, respostas corretas, quantidade de mensagens
enviadas, entre outras. Estatstica uma cincia que se dedica coleta, anlise e interpretao
de dados. Estatstica descritiva abrange tcnicas para descrever e sumarizar os dados por
meio da descrio paramtrica (so estimados parmetros que descrevem todo o conjunto
dos dados, tal como a mdia), descrio tabular (exemplo, tabelas de frequncias) e grficos
(exemplo, histograma). Estatstica inferencial abrange tcnicas para verificar a existncia de
relaes entre variveis para que seja possvel fazer afirmaes sobre uma populao. Estas
tcnicas so discutidas em mais detalhes no prximo captulo na seo sobre anlise dos re-
sultados de um experimento.
Anlise de contedo tem como unidade de anlise a mensagem, seja textual (falada ou escri-
ta), gestual, figurativa ou documental. So analisados dados qualitativos que podem ser men-
sagens trocadas numa sesso de bate-papo, ou textos e imagens de documentos produzidos
por um grupo. Uma abordagem da anlise de contedo descrever os dados de forma quan-
titativa, como a frequncia de ocorrncia de palavras. Outra abordagem a anlise qualitativa
dos dados, em que se busca um conhecimento por meio de classificaes e comparaes das
mensagens. As categorias podem ser criadas a priori, geralmente estabelecidas em funo de
uma teoria existente. Esse tipo de categorizao adequado quando o pesquisador deseja
buscar uma resposta especfica. Outra forma de categorizar o contedo com categorias que
 Captulo 23 | Metodologia de pesquisa cientfica em sistemas colaborativos 387

emergem durante a anlise a posteriori. O pesquisador elabora um conjunto de categorias

em funo da anlise de uma parte inicial do contedo. Em seguida, as categorias so usadas
para analisar o restante do contedo, sendo que novas categorias so criadas durante a anlise.
O processo exige idas e vindas para refinar o conjunto de categorias elaboradas. Por fim, as
categorias so interpretadas luz das teorias.
Anlise do discurso uma tcnica da Lingustica e da Comunicao voltada especificamente
para a anlise de textos, sejam escritos ou falados. A anlise do discurso realizada pela in-
vestigao do texto, que o produto da atividade discursiva. Todo discurso uma construo
social que s pode ser analisado considerando o contexto histrico e as condies de produ-
o. No se analisa apenas o texto em si, mas tambm a semntica e as intenes por trs da
superfcie textual. Existem diferentes mtodos para analisar o discurso; por exemplo, quando
o texto o produto de uma conversao espontnea, empregada uma tcnica especfica
denominada anlise da conversao.

23.3 Mtodos de pesquisa

Para realizar uma pesquisa cientfica, voc dever seguir um mtodo de pesquisa. Na rea de
Sistemas Colaborativos, bem como em Sistemas de Informao em geral, so usados diversos
mtodos de pesquisa: experimento, estudo de caso, pesquisa-ao, survey, etnografia, entre
outros. Qual mtodo voc deve escolher?
 388 Sistemas Colaborativos

Quais so os mtodos empregados na rea?

A partir de um extenso estudo realizado entre 1995 e 1999 nos Estados Unidos sobre
os mtodos de pesquisa usados em computao, foi identificado que a rea de Sistemas
de Informao utiliza uma diversidade de mtodos de pesquisa (18 mtodos), tais como
experimento, estudo de caso, pesquisa-ao, prova de conceito e simulao (Vessey et al.,
2002; Glass et al., 2004).

A escolha de um mtodo depende principalmente do objetivo e da questo de pesquisa. Tam-

bm pode depender da quantidade de conhecimento j existente sobre o assunto pesquisado,
do tipo de dado mais adequado a ser analisado, da sua habilidade e da experincia de seu orienta-
dor com um ou outro mtodo de pesquisa, entre outros fatores que influenciam essa escolha.
A seguir apresentamos resumidamente alguns mtodos de pesquisa com o objetivo de indicar as
principais caractersticas desses diferentes mtodos. Este conhecimento relevante para apoiar
a identificao de qual mtodo se apresenta mais adequado para a realizao da sua pesquisa em
particular. Uma vez escolhido o mtodo de pesquisa, estude-o a fundo e siga-o rigorosamente.

Experimento
O mtodo experimento teve origem nas cincias naturais, como Fsica e Biologia. Num ex-
perimento, o pesquisador busca identificar relaes entre variveis a fim de comprovar ou re-
futar hipteses que levam formulao de leis e teorias gerais. O experimento se desenvolve
num ambiente laboratorial, artificial ou semiartificial, onde o pesquisador tem controle sobre
as variveis: fixa algumas e varia outras. As variveis so medidas com preciso e os dados
coletados so analisados estatisticamente. Em Sistemas Colaborativos, um experimento rea-
lizado para testar a hiptese de que um sistema melhor do que outro, ou ento que se obtm
melhores resultados da colaborao com o uso de um determinado sistema do que sem o uso
deste. Numa abordagem mista, um experimento em Sistemas Colaborativos tambm pode
obter dados qualitativos, por exemplo, por meio de uma entrevista ou da observao direta
de como os usurios realizam uma tarefa.

Survey (Levantamento)
Esse mtodo de pesquisa teve origem nas reas de Economia e Sociologia. Para realizar um sur-
vey, o pesquisador elabora um questionrio para obter respostas de uma quantidade significativa
de pessoas ou de toda a populao (censo). As perguntas de um survey esto relacionadas a
aes, experincias, comportamentos, opinies e perfis das pessoas com relao ao objeto de es-
tudo da pesquisa. Um exemplo de pesquisa seguindo o mtodo survey aquele em que se busca
apresentar um painel sobre o uso de redes sociais nas organizaes, obter estatsticas sobre a
quantidade de empresas que utilizam um determinado recurso, descobrir quais redes sociais so
as mais usadas e a proporo de funcionrios que as utilizam. Outro exemplo identificar os
fatores que mais influenciaram a escolha do sistema colaborativo adotado numa escola, como
funcionalidades, custo, comunidade de apoio, facilidade de aprendizagem ou suporte tcnico.

Estudo de Caso
Estudo de caso nasceu das Cincias Sociais. O fenmeno investigado em seu contexto real
sem o pesquisador ter controle sobre todas as variveis envolvidas. Em geral, um estudo de
 Captulo 23 | Metodologia de pesquisa cientfica em sistemas colaborativos 389

caso indicado quando no possvel dissociar completamente o fenmeno do ambiente

real, quando no so conhecidas todas as variveis relevantes relacionadas ao fenmeno. O
pesquisador faz uso de questionrios, entrevistas e documentos, interage com os sujeitos de
maneira semiformal (visitas e entrevistas) e realiza observao direta sobre o que ocorre no
ambiente. Na rea de Sistemas Colaborativos, um estudo de caso geralmente realizado para
investigar o uso que um determinado grupo faz de um sistema, incluindo a anlise do que
produzido e do que os usurios acham do sistema.

Etnografia
Historicamente, etnografia surgiu na antropologia para entender culturas pouco conhecidas
como as tribos indgenas. Em geral, aplica-se etnografia quando o entendimento aprofunda-
do no alcanado apenas entrevistando as pessoas, quando a observao direta do pesqui-
sador necessria para entender os valores e as prticas de uma dada cultura. O pesquisador
passa meses na comunidade investigada, vive com os sujeitos para entender como agem, o
que sentem, como trabalham, como se relacionam e se divertem. Por exemplo, muitas das
prticas de trabalho so tcitas, as pessoas no conseguem explic-las direito, mas ao viven-
ciar aquelas prticas o etngrafo consegue explicitar e produzir conhecimento. A pesquisa
etnogrfica no demanda necessariamente que o pesquisador viva ou trabalhe no ambiente a
ser pesquisado. O pesquisador pode realizar uma investigao ao longo de semanas ou dias,
o que chamado por alguns de etnografia de curta durao (short term) ou rpida e suja
(quick and dirty). Em Sistemas Colaborativos, a etnografia tem sido usada, por exemplo, para
descobrir como os funcionrios de uma empresa trabalham, quais so os problemas pelos
quais passam, como agem e se relacionam por meio de um sistema colaborativo.

Netnography
O grande volume de dados disponveis, as diversas possibilidades de atuao e o ainda
pouco conhecimento que se tem sobre as atividades sociais mediadas pelas tecnologias
computacionais tornam a vida digital uma vasta rea de interesse para pesquisadores.
Como uma pessoa se apresenta on-line para outros membros do seu grupo? O que leva
um acontecimento ao topo da lista dos assuntos mais comentados? Como um grupo
lida com diferenas culturais ou resolve questes prticas como marcar um encontro
com pessoas em diferentes fusos horrios? Quais as mudanas de comportamento
quando os membros de uma equipe trabalham juntos numa sala ou quando trabalham
remotamente? Em que a participao em uma comunidade virtual apoia as atividades
dessa mesma comunidade fora da rede? Kozinets (2010, p. 1) prope uma adaptao
da pesquisa etnogrfica para incluir a influncia da internet em mundos sociais con-
temporneos, a qual ele d o nome de netnography. O pesquisador que conduz uma
investigao envolvendo grupos virtuais tem que lidar com novas questes, tanto pelo
objeto da pesquisa em si, quanto pela conduo da prpria pesquisa neste meio virtual.
A opo por se fazer entrevistas de forma presencial ou virtual, as mudanas advindas
de participar de uma comunidade por meio da internet, a dificuldade de se observar
como trabalha uma equipe de profissionais fisicamente dispersos e a forma de abordar
uma comunidade virtual para solicitar a realizao de uma pesquisa so novas questes
a serem resolvidas pelo pesquisador.
 390 Sistemas Colaborativos

Teoria fundamentada em dados (grounded theory)

Na teoria fundamentada em dados, so empregados determinados procedimentos de anlise
para fazer emergir dos dados novos conceitos que possibilitem a gerao ou refinamento de
teorias. Diferentemente de outros mtodos de pesquisa emprica dos quais se parte de estu-
dos anteriores e de fundamentao terica para planejar a investigao e a coleta de dados,
na teoria fundamentada em dados, a orientao explicitamente inversa: inicia-se com um
tema ou situao de pesquisa e, em seguida, so coletados dados a serem analisados para fazer
emergir uma teoria. Usualmente os dados so coletados de entrevistas e de observao direta.
So usados procedimentos sistemticos de comparao de dados para descobrir categorias
(variveis) e propriedades. O pesquisador faz anotaes e anlises sobre as diversas catego-
rias e relaes identificadas. Somente quando o pesquisador identifica que j tem uma teoria
consistente, e quando a coleta de dados j atingiu o ponto de saturao em que no so en-
contrados novos dados que enriqueam a teoria, a o pesquisador inicia a comparao com as
teorias correntes na literatura cientfica. Um exemplo de emprego deste mtodo de pesquisa
a investigao sobre uma rede social so feitas entrevistas com um grupo de pessoas e os
relatos so analisados exaustivamente.

Preciso, generalizao ou realismo?

Em Sistemas de Informao, cada mtodo de pesquisa geralmente atende a somente
uma destas dimenses: resultado preciso e especfico; viso ampla sobre a populao
(generalizao); ou realismo (Dennis e Valacich, 2001). Experimentos com usurios em
laboratrio privilegiam a preciso e controle das variveis de forma a estabelecer rela-
es especficas de causa e efeito. No entanto, os resultados de um experimento no
so to abrangentes quanto os obtidos com surveys, nem revelam fenmenos que so
observveis somente em ambientes reais. Surveys maximizam a generalizao dos resul-
tados a partir de anlises estatsticas sobre amostras de uma populao; no entanto, os
dados obtidos so menos precisos do que os obtidos em laboratrio e podem esconder
detalhes intricados e nuances relevantes de um fenmeno em seu contexto real, pois
apoiam-se em perguntas com respostas preestabelecidas. Pesquisas de campo que inves-
tigam o uso do sistema num ambiente real, como as realizadas por meio de estudo de
caso, pesquisa-ao, etnografia e teoria fundamentada em dados, maximizam o realismo
ao investigar como as variveis existentes no ambiente real influenciam o uso do sistema.
Por outro lado, estes mtodos perdem na preciso dos resultados e a generalizao para
a populao mais difcil de ser obtida.

Pesquisa-ao (action research)

Pesquisa-ao teve origem na rea de Psicologia Social, em seguida o mtodo foi adota-
do por diversas reas das Cincias Sociais. Na pesquisa-ao, o pesquisador parte de um
problema num ambiente real e tem um duplo objetivo: realizar uma investigao neste
ambiente ao mesmo tempo em que atua sobre o ambiente em busca de uma soluo para o
problema. Os sujeitos da pesquisa so envolvidos e participam ativamente ao longo de toda
a investigao. Na pesquisa-ao o posicionamento do pesquisador deixa de ser o de um
 Captulo 23 | Metodologia de pesquisa cientfica em sistemas colaborativos 391

observador neutro para ser um pesquisador que atua, modifica e aprende a partir da ao
que ele realiza. Em muitos casos o pesquisador uma pessoa do prprio ambiente e no
uma pessoa externa. O processo quase sempre iterativo para que a soluo seja refinada
a cada ciclo da pesquisa. Os resultados obtidos so comparados com outros trabalhos e
teorias visando a produo de novos conhecimentos cientficos. Em nossa rea, o mtodo
pesquisa-ao geralmente usado no desenvolvimento e implantao de um sistema cola-
borativo numa determinada organizao.

23.4 Tcnicas de coleta de dados

Existem diferentes tcnicas para a obteno de dados, cabendo ao pesquisador escolher as
mais adequadas ao objetivo e ao mtodo de pesquisa adotado. So apresentadas a seguir as
principais tcnicas utilizadas na rea de Sistemas Colaborativos para a coleta de dados.

Medio
Instrumentos de medida possibilitam a coleta de dados quantitativos. Em sistemas cola-
borativos usual realizar testes com usurios para se obter medidas objetivas. Prescreve-se
uma tarefa a ser realizada com o uso do sistema investigado. Durante e no fim da realizao
da tarefa, so coletados dados obtidos da medio de variveis como tempo para realizar a
tarefa, quantidade de cliques, nmero de vezes que o usurio acessou uma pgina, quanti-
dade de mensagens enviadas, quantidade de respostas corretas. Em sistemas colaborativos
baseados na computao mvel e ubqua, a posio geogrfica do usurio ou mesmo a
temperatura corporal e a luminosidade do ambiente em que ele est so outros exemplos
de medidas.
Para realizar a pesquisa quantitativa, alm de ser preciso determinar o que medir (variveis),
deve-se determinar como medir e com que preciso (instrumento de medida). O prprio
computador frequentemente usado como instrumento de medida. O pesquisador deve
considerar os registros disponveis no sistema (LOGs) como data e hora de login/logout,
mensagens enviadas e recebidas durante uma sesso, histrico das pginas visitadas, dentre
outros dados que possam ser capturados automaticamente. Quando o pesquisador tem
acesso ao cdigo fonte do sistema, ele tem a oportunidade de criar registros especficos
para sua pesquisa, monitorar a ocorrncia de eventos e capturar dados como a sequncia
de elementos de interface clicados, notificaes recebidas, a posio do ponteiro do mouse,
o tempo decorrido entre cada tecla pressionada, dentre outras medidas que possam ser de
interesse para a pesquisa.

Questionrio
A coleta de dados por questionrio consiste numa srie ordenada de perguntas a serem res-
pondidas sem a interao com o pesquisador: mesmo que as perguntas sejam feitas e respon-
didas oralmente, no so elaboradas novas perguntas nem so aprofundadas as respostas da-
das durante a aplicao do questionrio. O questionrio tem a possibilidade de ser respondido
de forma annima e sem expor o respondente influncia do pesquisador. O anonimato e a
privacidade podem levar o respondente a dar respostas honestas; por outro lado, a ausncia
de interao pode levar ao mau entendimento das questes e a respostas imprprias.
 392 Sistemas Colaborativos

As perguntas em um questionrio podem ser fechadas ou abertas. Perguntas fechadas so

aquelas em que se escolhe um ou mais respostas dentre as predefinidas pelo pesquisador.
Questionrios so construdos com predominncia de perguntas fechadas em relao s
abertas. Perguntas fechadas so rpidas de serem respondidas e analisadas, pois esta anlise
baseada em clculos estatsticos. Estas caractersticas possibilitam que os questionrios
sejam distribudos para uma grande quantidade de usurios (uma amostra da populao),
o que necessrio quando a pesquisa busca a generalizao dos resultados obtidos. A
desvantagem que as respostas so dadas em funo das opes que o pesquisador espera
escutar, e nem sempre captam adequadamente o que o sujeito tem a dizer. J as perguntas
abertas so aquelas em que o respondente formula o prprio texto enunciando o que quiser
responder e com a profundidade que achar conveniente. So mais demoradas para serem
respondidas e resultam em dados qualitativos que precisam ser analisados por tcnicas
como anlise de contedo ou anlise do discurso; por exemplo, para identificar a recorrn-
cia e oposio de ideias.
Existem diretrizes para elaborar as perguntas de um questionrio. As questes devem ser
claras, coerentes e neutras (no devem induzir uma resposta). Devem ser evitadas questes
ambguas, baseadas em pressuposies, ou que sejam de natureza pessoal, delicadas ou in-
cmodas. No devem ser formuladas duas questes numa s (double-barrelled questions). Ao
estruturar a sequncia de perguntas, uma questo no deve influenciar a resposta s ques-
tes seguintes. Em pesquisas de opinio e atitude, recomenda-se que as respostas sejam
elaboradas de acordo com uma escala predefinida: escala de Likert, escala de Thurstone,
escala de Guttman, diferencial semntico (escala de Osgood), entre outros modelos.
A taxa de resposta, ou taxa de retorno, o percentual calculado dividindo-se a quantidade
de pessoas que responderam ao questionrio pela quantidade de pessoas da populao
questionada. A taxa de resposta um dos ndices importantes sobre a qualidade da pes-
quisa, pois se deseja obter uma amostra significativa e evitar uma anlise tendenciosa (com
vis). A taxa de retorno depende de alguns fatores. Por exemplo, quando o questionrio
aplicado por e-mail, espera-se um retorno mdio de 30%; se disponvel num site, a taxa de
retorno mdia de 40%. Outra questo a quem distribuir o questionrio. Por exemplo,
quando o questionrio no distribudo para um conjunto especfico de pessoas, mas fica
disponvel publicamente num site, possivelmente as pessoas que respondem so as que se
interessaram por aquele assunto (amostra polarizada), o que pode no refletir adequada-
mente a opinio geral daquela populao. O tempo que a pessoa leva para responder um
questionrio tambm influencia a taxa de resposta, por isso um questionrio no deve ser
muito extenso nem requerer muito tempo para ser respondido (poucas perguntas e com
predominncia de perguntas fechadas).

Entrevista
Numa entrevista, a coleta de dados realizada por meio de uma conversa entre o pesqui-
sador e o entrevistado. Tradicionalmente as entrevistas so realizadas em encontros pre-
senciais em contextos informais, mas aps a popularizao da internet tornou-se aceitvel
a realizao por meio de sistemas de mensagem instantnea, udio e videoconferncia. A
tcnica de entrevista deve ser aplicada quando preciso obter dados aprofundados e deta-
 Captulo 23 | Metodologia de pesquisa cientfica em sistemas colaborativos 393

lhados. Sendo uma conversa, as perguntas so abertas, embora seja possvel usar, quando
adequado, algumas perguntas fechadas. O custo bem maior do que a aplicao de questio-
nrio, pois requer uma boa preparao do entrevistador para a aplicao de alguma tcnica
de entrevista cientfica, requer tempo e s vezes deslocamento para entrevistar cada sujeito,
e a anlise das respostas complexa, pois cabe ao pesquisador ler e reler as entrevistas para
buscar ideias recorrentes, semelhanas, discrepncias e inconsistncias no discurso dos
entrevistados.
As entrevistas podem ser estruturadas, no estruturadas ou semiestruturadas. Nas entrevis-
tas estruturadas, o pesquisador utiliza um roteiro com perguntas previamente elaboradas
que tm que ser enunciadas igualmente e na mesma ordem a todos os participantes, no
havendo liberdade para alterar as perguntas de acordo com as respostas obtidas nem para
esclarecer dvidas quanto s perguntas. Este tipo de entrevista equivalente aplicao oral
de um questionrio. A rigidez na entrevista estruturada evita que diferenas nas respostas
sejam causadas por diferenas nas perguntas feitas pelo entrevistador. Nas entrevistas se-
miestruturadas, o pesquisador tem um roteiro de perguntas ordenadas, mas tem flexibilidade
para enunciar a questo de forma diferente, para reordenar uma pergunta, esclarecer dvidas
e incluir ou excluir alguma pergunta. O pesquisador mais livre para explorar e aprofundar-
se mais num tpico. Com o uso de entrevistas no estruturadas, o pesquisador no se prende
ordem das questes nem em como enunci-las. Tambm tem flexibilidade para conduzir a
entrevista na direo mais adequada para seus objetivos de pesquisa, o que particularmente
adequado para pesquisas exploratrias. O pesquisador trabalha com um roteiro de tpicos e
aprofunda-se em determinados aspectos medida que identifica dados relevantes para uma
determinada questo de pesquisa.
Entrevistas no estruturadas e semiestruturadas objetivam realizar uma entrevista com flu-
ncia. O entrevistado sente-se conversando mais naturalmente e fica mais vontade para
dizer o que realmente pensa, de forma detalhada e mais livre possvel. Aquilo que impor-
tante para uma pessoa sobre determinado tema aparece no seu discurso espontneo. Por
isso as perguntas devem ser simples, diretas, claras e neutras. Devem ser feitas perguntas
como O que acha do sistema?, Que dificuldades encontrou para usar o sistema?, O que
deveria ser feito para melhorar o sistema?. Perguntas abertas possibilitam gerar todo tipo
de resposta, e a partir das respostas imprevistas deve-se aprofundar a investigao por meio
de perguntas e enunciados tais como Por qu?, Como?, Explique melhor. Um erro
comum de entrevistadores principiantes , por meio da pergunta, induzir uma resposta ou
revelar o que se quer escutar por exemplo, quando se pergunta voc gostou do sistema?
o entrevistador revela uma certa expectativa de que o sistema bom; voc achou o sistema
ruim? revela a expectativa de que os usurios no devem gostar daquele sistema. Quando
o respondente forado a declarar uma posio (se gostou ou desgostou) passa a organizar
todo o discurso para defender a posio declarada para tentar manter a consistncia de seu
discurso. Por isso to importante que o entrevistador treine elaborar perguntas que no
revele seus julgamentos nem hipteses. A pergunta o que voc achou do sistema? no re-
vela uma expectativa de resposta e possibilita ao entrevistado falar sobre aspectos positivos
e negativos sem ter que defender uma posio, e assim so obtidos dados potencialmente
mais ricos e adequados para a pesquisa.
394 Sistemas Colaborativos

MEDS Mtodo de explicitao do discurso subjacente

O objetivo do MEDS (Nicolaci-da-Costa, 2007; Nicolaci-da-Costa et al., 2009) ouvir
detalhadamente aquilo que os entrevistados realmente tm a dizer. A liberdade de ex-
presso do entrevistado necessria para que possa emergir aquilo que o pesquisador
no pode prever e deseja conhecer.
O mtodo se baseia em alguns princpios. Da psicanlise, adota a tcnica clnica da livre
escuta que objetiva captar aquilo que importante para o outro. Inspirado no princpio
da associao livre, adota o pressuposto de que aquilo que importante para algum a
respeito de um determinado tema inevitavelmente aparece no seu discurso espontneo
sobre o assunto. Das teorias da construo social da realidade e da subjetividade, incor-
pora o pressuposto de que a forma de percebermos o mundo bem como os modos de
pensarmos, agirmos e sentirmos so socialmente construdos, principalmente por meio
da lngua em uso. Da Lingustica, adota o preceito de trabalhar com o discurso coletado
em contextos naturais e informais.
O mtodo define uma sequncia de fases bem delimitadas:
1 - Seleo da amostra. O recrutamento dos participantes intencional (contrasta-se
com o recrutamento randmico de experimentos) e com homogeneidade de caracte-
rsticas-chave dos participantes. Homogeneidade fundamental quando todos os par-
ticipantes tm uma caracterstica em comum, como ter usado um dado sistema colabo-
rativo. A homogeneidade ampla quando os recrutados tm vrias caractersticas em
comum, como idade, sexo, profisso, anos de experincia profissional, dentre outras
caractersticas que possibilitem constituir um pefil de alta definio que identifica
membros de um grupo social especfico. O tamanho da amostra geralmente reduzi-
do, considera-se que 20 participantes constituem um bom nmero-alvo, e muitas vezes
um nmero menor suficiente. Com poucos participantes j se consegue alcanar o
ponto de saturao em que entrevistar um novo participante no traz novos dados
relevantes para a pesquisa.
2 - Construo do roteiro para as entrevistas. Para evitar que as perguntas sejam lidas, e
consequentemente soarem artificiais para os entrevistados, nos roteiros devem constar
somente os tpicos de pesquisa a partir dos quais sero geradas as perguntas durante
as entrevistas, em tempo real, de forma que soe natural e d fluncia conversa.
As perguntas devem ser abertas e as respostas devem ser seguidas por perguntas de
esclarecimento e aprofundamento. Devem ser realizadas entrevistas-piloto at que o
pesquisador saiba conduzi-las com naturalidade.
3 - Realizao das entrevistas. Cada participante entrevistado individualmente por
um nico entrevistador. As entrevistas acontecem em horrios negociados entre en-
trevistadores e entrevistados. As entrevistas devem ser todas conduzidas on-line por
um tipo nico de sistema, como bate-papo ou audioconferncia, ou todas realizadas
presencialmente nos lugares indicados pelos prprios participantes, em que se sintam
vontade. Quando a entrevista realizada pela fala (presencialmente ou videoconfern-
cia), geralmente suficiente realizar uma nica entrevista com durao de at uma hora.
 Captulo 23 | Metodologia de pesquisa cientfica em sistemas colaborativos 395

Quando realizada por escrito (por troca de mensagens instantneas) a entrevista mais
longa e se o entrevistado ficar cansado deve ser agendada uma outra sesso para a con-
tinuao da entrevista.
4 e 5 - Transcrio e anlise dos depoimentos. Quando a entrevista realizada por voz,
primeiro preciso transcrever a conversa. Quando realizada por troca de mensagens
escritas, o registro da sesso j constitui a transcrio. Para a interpretao adota-se a
abordagem mica, cujo ponto de partida so as categorias que emergem dos pronun-
ciamentos dos entrevistados (e no se adota a abordagem tica, que parte de categorias
prvias oriundas das teorias). A anlise realizada em duas etapas. A primeira, chamada
de interparticipantes, consiste na anlise das respostas dadas pelo grupo como um todo,
os depoimentos so sistematicamente comparados em busca de recorrncias e singula-
ridades. J a segunda etapa, denominada intraparticipantes, se dedica anlise detalhada
de cada uma das entrevistas individuais em busca de inconsistncias no discurso do
sujeito, contradies, novos conceitos e novos usos da linguagem.

Grupo focal
Grupo focal uma tcnica de coleta de dados qualitativos em que se entrevista um grupo de
pessoas ao mesmo tempo. A reunio deve conter de 3 a 10 pessoas, durar de 1 a 2 horas, e
ser moderada por um pesquisador experiente. As pessoas do grupo devem ter caractersticas
similares, como o interesse e o conhecimento sobre o objeto de estudo. Em Sistemas Colabo-
rativos, o grupo frequentemente formado por pessoas de uma mesma empresa ou de uma
mesma equipe com experincia em usar o sistema investigado.
Grupo focal aplicado quando preciso gerar ideias; conhecer opinies e expectativas; obter
respostas; encontrar solues e identificar problemas, conflitos e comportamentos que apa-
recem quando as pessoas esto em grupo.
Como tcnica de pesquisa, o grupo focal possibilita a captura de uma grande quantidade de
informao em pouco tempo, pois diferentes percepes, pontos de vista e atitudes sobre
o mesmo objeto de pesquisa so revelados durante a reunio. As ideias de um membro do
grupo servem para disparar novas ideias nos demais membros do grupo, o que possibilita
que conceitos, solues e reflexes sejam criados conjuntamente. Por meio de um grupo
focal, que baseado numa conversa, os consensos e as controvrsias so mais facilmente
detectados do que por meio de uma anlise comparativa de entrevistas individuais. Diferen-
as de terminologia podem ser esclarecidas durante a prpria reunio e opinies conflitantes
podem ser resolvidas ou reforadas, tornando mais claros mltiplos pontos de vista dos
membros do grupo. Por outro lado, os participantes do grupo podem influenciar uns aos
outros e algumas opinies podem ficar mais evidentes ou no serem reveladas devido di-
nmica particular daquele grupo.
A atuao do moderador determinante para a coleta de dados. o moderador quem deter-
mina o foco para a discusso do grupo, prepara a reunio, escolhe os tpicos a serem discuti-
dos (no mais do que cinco tpicos por reunio), disponibiliza artefatos a serem comentados
 396 Sistemas Colaborativos

(como um prottipo do sistema), informa as regras e as atividades da reunio, proporciona

um ambiente favorvel troca de ideias, evita polmicas desnecessrias, e incentiva a parti-
cipao de todos estimulando os mais tmidos e contendo os que monopolizam a discusso.
Entre os possveis tpicos para discusso, destacamos o levantamento de ideias, relatos sobre
procedimentos e prticas de trabalho no dia a dia, e discusso dos objetivos, necessidades,
resultados esperados, experincias, opinies, preferncias e problemas. Contar com um ob-
servador adicional e gravar a reunio so opes que contribuem para a posterior anlise dos
dados gerados pelo grupo focal.

Observao direta
A observao direta est baseada no uso dos sentidos como forma de adquirir conhecimento
sobre o objeto de pesquisa. Um ou mais pesquisadores podem estar envolvidos numa mes-
ma observao. Embora estejamos acostumados na vida diria a observar o mundo nossa
volta, o pesquisador que atua como observador realiza a observao de forma sistemtica,
est ciente do que faz, tem um foco, detalhista, criterioso e busca objetividade para evitar
possveis vieses na observao.
Uma vantagem da observao direta que o pesquisador percebe os fatos diretamente, sem
intermediao de pessoas que trabalham ou vivem no ambiente em que a pesquisa realizada.
Isto importante porque h diferena entre o que uma pessoa diz que faz e o que ela efetiva-
mente faz. O desafio com relao interpretao: o pesquisador precisa ter conhecimento do
ambiente e da cultura dos usurios para conseguir atribuir significado quilo que observa.
Ao realizar a coleta de dados por meio da observao direta, o pesquisador pode manter-se
incgnito a priori ou revelar seu papel e objetivos para todos os sujeitos da pesquisa ou apenas
para um grupo de pessoas. Quanto durao da observao, ela pode ser curta, durando
apenas algumas horas, ou longa, estendendo-se por meses ou anos. Em relao ao foco da
observao, o pesquisador tem como opo restringir-se a uma questo especfica ou buscar
uma viso abrangente do que est investigando.
A observao direta pode ocorrer no ambiente real ou num ambiente controlado de labo-
ratrio. Na observao direta num ambiente real, o pesquisador coleta dados detalhados
sobre o sistema colaborativo dentro do seu contexto; percebe e revela conhecimentos e
comportamentos tcitos dos usurios; e presencia eventos e situaes no momento em que
eles ocorrem. A observao direta em sistemas colaborativos envolve descobrir como o
ambiente em que o sistema utilizado, quais so os eventos e as variveis relevantes, quem
so os usurios e demais interessados, que atividades eles realizam, como se comportam
e o que sentem. J no ambiente de laboratrio, o pesquisador faz a observao num local
preparado e controlado para evitar influncia de variveis que no sejam relevantes para o
objetivo da pesquisa. Um exemplo o pesquisador observar como os usurios usam um
sistema durante uma tarefa especfica proposta sem a influncia de situaes que podem
ocorrer num ambiente real, tais como interrupo de colegas, necessidade de realizar ativi-
dades paralelas ou presso emocional.
A observao direta pode ser estruturada ou no estruturada. No caso estruturado, o pesqui-
sador j tem conhecimento prvio dos aspectos-chave que deseja investigar e elabora ante-
 Captulo 23 | Metodologia de pesquisa cientfica em sistemas colaborativos 397

cipadamente um plano baseado em tpicos e

categorias a serem observadas. No caso no Envolvimento do
estruturado, a pesquisa tem um carter mais pesquisador
exploratrio, o pesquisador no sabe de ante- O estudo de caso um exemplo de
mo o que relevante e est aberto a tudo o observador como participante na
que percebe. classificao de Gold (1958) sobre o
Quanto forma de registro, o pesquisador grau de envolvimento do pesquisador
deve fazer anotaes e manter um dirio da- e dos sujeitos. No grau de envolvi-
quilo que observa. O registro das observaes mento observador como participan-
deve ser feito to logo possvel, mas, quando te a interao curta e semiformal, e
inadequado fazer anotaes em frente aos no h a formao de relacionamen-
usurios, o pesquisador deve apurar a memria tos entre o pesquisador e os sujeitos.
e empregar tcnicas de memorizao. Filma- J a etnografia e a pesquisa-ao so
gem e gravao de voz so boas opes para exemplos do grau de envolvimento
aprofundar a anlise do que foi observado. participante como observador, pois
o pesquisador se integra ao ambiente
O grau de envolvimento do pesquisador com interagindo e criando laos de con-
as pessoas pode ser formal ou informal. O fiana e descontrao com as pessoas,
pesquisador interage com os sujeitos de ma- tornando-se capaz assumir o papel de
neira formal, ou semiformal, quando no se participante que observa. No caso da
integra ao ambiente e a interao s ocorre, pesquisa-ao, o pesquisador pode ser
por exemplo, em visitas empresa para ob- ele prprio um participante membro
servar como o sistema colaborativo est sen- daquele ambiente.
do usado. Alternativamente, o pesquisador
pode viver e trabalhar no ambiente por um perodo mais longo, por exemplo, para participar
e vivenciar o cotidiano de uma equipe de trabalho durante a implantao de um novo siste-
ma colaborativo, e assim ocorrer interao informal.
O pesquisador adota uma posio de neutralidade, busca interferir ao mnimo no ambiente
pesquisado, exceto no mtodo da pesquisa-ao, em que o pesquisador deliberadamente se
envolve e age interferindo no ambiente investigado como um participante de fato ou , ele
prprio um nativo daquele ambiente. Uma questo a ser considerada numa pesquisa at
que ponto a presena do pesquisador modificou o comportamento dos usurios e influenciou
o resultado de uma determinada pesquisa.

Documentos
Alm de medir variveis, observar as pessoas envolvidas com o objeto de pesquisa e fazer in-
quritos (questionrios, entrevistas, grupos focais), outra fonte de dados para uma investigao
so os documentos. Podem ser formais ou informais, fsicos ou virtuais, institucionais ou pes-
soais. Existem inmeros tipos de documento: projeto, diagrama, processo de trabalho, pauta
e ata de reunio, relatrio, informativo institucional, memorando, carta, mensagem de correio
eletrnico, registro da conversa realizada por meio de bate-papo e mensageiro instantneo,
gravaes de udio e videoconferncia, mensagem de texto de celular, postagem em fruns,
blogs, microblogs e em redes sociais, lista de tarefas, organograma, cronograma, descrio de
procedimentos, ordem de servio, agenda, dirio, manual, maquete, mapa, planta, objeto, foto,
 398 Sistemas Colaborativos

gravao, filmagem, banco de da-

dos, prottipo, produto desenvol-
vido, histrico de verses de sof-
tware, comentrio de programas,
arquivo e repositrios de diversos
tipos, dentre tantos outros. Tam-
bm podem ser usados docu-
mentos publicados em veculos
de comunicao de massa, como
jornal, revista, rdio e televiso.
Diferentes documentos devem
ser coletados em cada domnio
de aplicao, tais como receitas e
pronturios mdicos, no caso de
um sistema colaborativo na rea
de sade, ou nota dos alunos, se
o sistema colaborativo for para a
educao. Seja criativo e enfren-
te as eventuais dificuldades para
obter os documentos que voc
precisar em sua pesquisa.
Como coletar dados de Sistemas
Colaborativos mveis e ubquos?
A coleta de dados de pesquisas com sistemas
mveis dificultada pela mobilidade dos usu-
rios. A observao direta nem sempre vivel,
pois demanda que o pesquisador acompanhe ou
filme o usurio em trnsito e alternando entre
situaes e locais pblicos e privados. Trs mto-
dos de coleta de dados vm sendo usados pelos
pesquisadores na rea de computao mvel: do
it, quando solicitado que o prprio usurio
anote alguns dados importantes para a pesquisa
ou responda a perguntas feitas pelo sistema; use
it, quando os dados so coletados por meio do
uso do sistema, como no caso de se fazer o regis-
tro da navegao do usurio (medio); e wear
it, quando os dados so coletados por meio de
sensores e cmeras que o usurio veste (Hagen
et al., 2005).

tica em pesquisa em computao

Pesquisa em Sistemas Colaborativos sempre envolve seres humanos. Em outras reas
que envolvem pesquisas com pessoas, em particular nas cincias da sade, h um
conjunto quase consensual de quais so os padres ticos. Com relao ao envol-
vimento do usurio em sistemas interativos, os pesquisadores devem garantir con-
sentimento livre e esclarecido, participao voluntria e no remunerada, anonima-
to dos usurios, bem-estar fsico e psicolgico, dentre outros direitos dos usurios,
conforme explicado no quadro Direitos dos usurios e deveres do avaliador no
Captulo 17. Algumas questes especficas surgem quando so realizadas negocia-
es com uma empresa para a autorizao de uma pesquisa dentro de seus esta-
belecimentos. Nessas negociaes, o pesquisador ter de enfrentar questes como:
que garantias de anonimato da organizao na publicao final dos resultados so
apropriadas? A pesquisa qualitativa deve ser muito explcita e detalhada na descrio
do ambiente que foi estudado, o que conflita com as demandas de anonimato da
organizao;
a organizao tem poder de veto na publicao dos resultados? A pesquisa quali-
tativa pode tanto revelar os problemas quanto as vantagens competitivas das orga-
nizaes. A organizao pode temer a revelao de tais informaes, mesmo com as
garantias de anonimato acordadas;
 Captulo 23 | Metodologia de pesquisa cientfica em sistemas colaborativos 399

se a organizao j autorizou a pesquisa, preciso pedir consentimento de cada um

dos sujeitos estudados? Ou seja, se a organizao autorizou o pesquisador a entrevis-
tar os seus funcionrios, preciso separadamente pedir o consentimento de cada um
dos funcionrios entrevistados?
um problema real em computao que sistemas acabam por substituir pessoas.
Se a pesquisa feita com a inteno de especificar um sistema, o pesquisador etica-
mente obrigado a informar aos sujeitos da pesquisa que talvez seus empregos estejam
ameaados? Por exemplo, nas cincias da sade, o pesquisador deve divulgar que a
pesquisa pode ser prejudicial ao voluntrio. E numa empresa?

23.5 Generalizao dos resultados

Anlise estatstica fornece procedimentos amplamente conhecidos para a generalizao de
dados de pesquisas quantitativas. J nas pesquisas qualitativas, uma questo que surge : que
generalizaes so possveis de serem obtidas de um estudo que foi realizado num ambiente
especfico e com um grupo particular de sujeitos? Como as concluses so aplicveis em
outros contextos?
Na pesquisa qualitativa, no se busca fazer uma generalizao com base em anlise estatsti-
ca. Deve-se considerar que o objetivo de uma pesquisa qualitativa realizar uma investigao
em profundidade, extraindo conhecimento cientfico a partir da descoberta de variveis rele-
vantes, nuances e detalhes intrincados sobre o fenmeno investigado de forma indissocivel
ao seu contexto. Utiliza-se, ento, a generalizao analtica, em que o pesquisador generaliza
os resultados em relao a uma determinada teoria.
Aplicar os resultados de uma pesquisa qualitativa em outros contextos similares uma for-
ma de generalizao. Por exemplo, se foi observado que a introduo de novas funcionali-
dades num ambiente virtual de aprendizagem promoveu uma maior interao entre alunos
e professores de uma escola, o uso destas mesmas funcionalidades nos ambientes virtuais
de escolas com caractersticas similares pode provocar resultados semelhantes. At que
ponto um contexto similar a outro uma questo a ser observada: o que deve ser consi-
derado no perfil dos alunos, dos professores e da escola para serem considerados similares?
Para possibilitar a generalizao, importante que pesquisador relate de forma detalhada
e criteriosa o contexto da pesquisa e todos os procedimentos realizados. O detalhamento
possibilita que outros pesquisadores avaliem a similaridade entre diferentes contextos de
pesquisa.

A generalizao da pesquisa qualitativa tambm conseguida quando se tm sucesso em apli-

car em outros contextos os conceitos elaborados, os dados coletados, as anlises realizadas,
ou os procedimentos, tcnicas, padres e artefatos desenvolvidos durante a pesquisa.

Outra forma de generalizao alcanada por meio da anlise transversal de pesquisas. Cada
pesquisa especfica, seja qualitativa ou quantitativa, pode servir de fonte de dados para uma
pesquisa que compile diferentes pesquisas sobre um mesmo fenmeno.
 400 Sistemas Colaborativos

23.6 Qualidade da pesquisa

Os resultados de pesquisas quantitativas, como as realizadas por meio de experimentos e
surveys, so amplamente aceitos. H confiana na qualidade da pesquisa, j que so bem
conhecidos e compreendidos os procedimentos de coleta e anlise dos dados, assim como
as tcnicas que garantem a validade e a confiabilidade da investigao. Por outro lado, a pes-
quisa qualitativa ainda menos praticada na computao, por isso no so to difundidas as
tcnicas para garantir que os resultados e as concluses sejam vlidos e confiveis. So pouco
conhecidas as tcnicas para controlar a subjetividade e o vis do pesquisador, de forma a as-
segurar que as concluses realmente vm dos dados em vez de estarem baseadas em posies
preconcebidas do pesquisador.

Critrios de qualidade
A qualidade de uma pesquisa comumente avaliada pelos critrios a seguir, como
difundido em vrios livros-textos (Yin, 2010):
validade do constructo (identificao correta das variveis): envolve estabelecer
corretamente um conjunto de medidas operacionais para os conceitos que esto
sendo investigados;
validade interna (relao causa-e-efeito correta): envolve identificar corretamente
a causa de um efeito, garantindo que o efeito no devido a outros fatores. Esse
critrio no se aplica a pesquisas exploratrias e descritivas; somente se aplica a
pesquisas causais, ou explanatrias, em que se busca estabelecer relaes de causa
e efeito;
validade externa (generalizao): refere-se possibilidade dos resultados da
pesquisa serem generalizados para outros contextos;
confiabilidade (repetibilidade): refere-se possibilidade dos procedimentos
realizados serem repetidos em outros contextos.

Dentre as tcnicas para controlar as ameaas confiabilidade e validade da pesquisa quali-

tativa, destacamos:
Seleo adequada dos sujeitos: selecionar adequadamente as pessoas que participaro
da pesquisa um dos aspectos mais importantes para a validade e confiabilidade dos resul-
tados. Em experimentos, a seleo aleatria, o que garante uma mistura de tal forma
que no h a ameaa de se ter selecionado somente os melhores sujeitos para influenciar
positivamente o resultado da pesquisa. J nas pesquisas qualitativas, a seleo nem sempre
aleatria. Algumas estratgias apoiam a seleo intencional dos sujeitos: perfil de alta re-
soluo (quando todos os sujeitos precisam ter um conjunto de caractersticas predefinidas
para poderem ser recrutados para a amostra), perfil fundamental (quando o sujeito precisa
satisfazer uma dada caracterstica, tal como ser usurio intensivo de um dado sistema co-
laborativo), e variao mxima (em que se busca selecionar participantes heterogneos
 Captulo 23 | Metodologia de pesquisa cientfica em sistemas colaborativos 401

para cobrir todas as caractersticas nas diferentes dimenses importantes para a pesquisa).
No entanto, h situaes em que no se escolhe um perfil de sujeitos. Por exemplo, quando
um professor se prope a fazer uma pesquisa-ao sobre a aprendizagem na escola em que
ele trabalha ou quando uma empresa tem interesse em realizar um estudo de caso num
determinado setor de trabalho, os sujeitos so aqueles que fazem parte daquele local. Neste
caso, adequado identificar as caractersticas comuns dos sujeitos daquela comunidade: a
escola possui alunos majoritariamente de uma determinada classe social ou que tenham
pais que so analfabetos? A empresa possui profissionais com alto nvel de instruo ou
que morem muito longe do local de trabalho? Relatar o perfil dos sujeitos possibilita que
o leitor da pesquisa esteja ciente de que os resultados foram obtidos e se aplicam quele
determinado contexto.
Triangulao: triangulao a utilizao de vrias fontes para observar o mesmo fenmeno.
Por exemplo, pode-se coletar dados por meio de um teste com usurios, aplicar um questio-
nrio e entrevistar estes mesmos usurios, e tambm analisar os documentos produzidos pela
empresa. Quando as diferentes fontes de dados levam a um mesmo resultado, considera-se
que a pesquisa tem mais qualidade, pois a confiana no resultado aumenta. Alm da triangu-
lao pelo uso de mltiplas fontes de dados, h outras formas de triangulao. Na triangula-
o de pesquisadores, tambm chamada de codificao mltipla, dois ou mais pesquisadores
observam os usurios ao mesmo tempo. Outra opo utilizar mais de um pesquisador para
a anlise dos dados ou para o planejamento da pesquisa. Pode-se ainda convidar um parceiro
neutro, que um pesquisador experiente no envolvido diretamente na pesquisa, para validar
e criticar as concluses do pesquisador principal. Na triangulao de teorias, so utilizadas
diferentes teorias para apoiar a concluso sobre um mesmo conjunto de dados a partir de di-
ferentes perspectivas. J na triangulao de mtodos, so realizadas diferentes pesquisas, com
diferentes mtodos, para investigar uma mesma questo. A triangulao de mtodos deve ser
utilizada com ateno redobrada, j que cada mtodo mais adequado para determinados
objetivos de pesquisa.
Validao pelos sujeitos: a validao pelos sujeitos consiste em mostrar os dados cole-
tados e as anlises aos sujeitos da pesquisa, respeitando-se as questes ticas previamente
combinadas, tal como o anonimato. Alm de possibilitar ao pesquisador verificar se suas
anotaes e concluses so coerentes com a interpretao dos sujeitos da pesquisa, pode-
se tambm utilizar o retorno dos sujeitos como parte do processo de coleta de dados, em
que se faz uso dos dados previamente coletados como base para uma nova discusso com
os sujeitos.

Reviso pelos pares

Quando outros pesquisadores fazem a reviso da pesquisa submetida para publica-

o, os comentrios dos revisores, especialmente quanto aos pontos fracos da sua
pesquisa, devem ser encarados como uma oportunidade de melhorar a pesquisa
fazendo uma nova coleta de dados, refinando um quadro terico que voc criou,
acrescentando um novo ponto de vista na anlise da soluo, entre outros.
 402 Sistemas Colaborativos

Apresentar dados brutos sempre que possvel: quando o pesquisador apresenta dados
brutos e, a partir desses dados, explica a anlise que fez dos dados, o leitor da pesquisa tem
a possibilidade de concordar ou discordar da linha de raciocnio seguida pelo pesquisador.
Quando os dados so apresentados j resumidos e sumarizados, o leitor no tem como avaliar
os resultados e confia menos nas concluses.

23.7 Publicao dos resultados

O objetivo das pesquisas cientficas ampliar
o conhecimento. Para atingir esse objetivo, a Relato rigoroso
pesquisa precisa ser publicada.
Artigos como os de Dube e Pare
Uma publicao cientfica exige ateno e (2003) e Klein e Myers (1999) discu-
cuidado por parte do pesquisador. No bas- tem como executar uma pesquisa qua-
ta voc fazer uma pesquisa de qualidade, litativa rigorosa e como relat-la de
preciso mostrar que ela tem qualidade. Na forma rigorosa.
pesquisa quantitativa, a qualidade da pesqui-
sa pode ser julgada pela escolha do desenho experimental e dos testes estatsticos, uma vez
que a execuo da pesquisa planejada segue um roteiro bem-definido e pouco sujeito a va-
riaes. J em pesquisa qualitativa, a qualidade da pesquisa depende tanto do planejamento
quanto da execuo. O pesquisador qualitativo tem que manter suas ideias pr-pesquisa con-
troladas, tem que estar aberto para aproveitar as oportunidades que aparecerem durante a
pesquisa, ter habilidade de entrevistar os participantes, entre outras competncias e posturas.
Se o pesquisador no competente, fica difcil acreditar nos resultados da pesquisa, sejam eles
quais forem. O pesquisador qualitativo precisa mostrar evidncias no artigo que um pesqui-
sador competente. O texto da publicao tem que ser rico o suficiente para dar confiana aos
revisores e aos leitores de que a pesquisa foi feita com boa qualidade. Tambm deve eviden-
ciar que todas as boas prticas foram realizadas. Parte do processo de convencer os revisores
e leitores mostrar que o pesquisador est ciente da literatura sobre metodologia de pesquisa
qualitativa. preciso defender o mrito dos mtodos qualitativos caso a publicao seja em
uma rea que valoriza a pesquisa quantitativa, ainda que a rea de Sistemas Colaborativos j
aceite bem as pesquisas qualitativas.

EXERCCIOS
23.1. Para comparar os mtodos experimento, survey, estudo de caso e pesquisa-ao, ela-
bore uma tabela explicitando as seguintes caractersticas de cada mtodo: abordagem,
perspectivas filosficas, finalidade, dimenso (preciso, generalizao e realismo), tcni-
cas de coleta de dados e tcnicas de anlise de dados mais utilizadas. Considere apenas
os casos tpicos.
23.2. Comparar vantagens e desvantagens das tcnicas de coleta de dados questionrio, entre-
vistas, observao direta e grupo focal.
23.3. Considerando a desorganizao com que os documentos oficiais de uma empresa eram
tratados, a diretoria determinou que suas equipes de trabalho no mais usariam pastas
compartilhadas na rede para criar e manter os documentos, mas passariam a utilizar um
 Captulo 23 | Metodologia de pesquisa cientfica em sistemas colaborativos 403

wiki. Cada equipe seria responsvel por manter um nico documento wiki que organi-
zasse todos os documentos sob sua responsabilidade. Um pesquisador externo identifi-
cou a possibilidade de realizar vrias pesquisas com os objetivos relacionados nos itens
a a d. Para cada item, identifique que mtodos de pesquisa podem ser adequados para
cada caso. Restrinja sua escolha entre experimento, survey, estudo de caso, etnografia e
pesquisa-ao.
a. Investigar a hiptese de que os funcionrios so mais produtivos utilizando wikis do
que repositrios de artigos.
b. Identificar relaes entre o sucesso no uso de um sistema colaborativo e o perfil e as
aes do lder da equipe de trabalho que usar o sistema.
c. Investigar fatores que levaram ao sucesso ou ao insucesso da implantao do wiki.
d. Compreender em profundidade como se deu o processo de adoo do wiki.

LEITURA RECOMENDADA
Mtodos e tcnicas de pesquisa social (Gil, 2006). Apresenta uma introduo sobre
pesquisa cientfica, um painel geral de mtodos de pesquisa e tcnicas de coleta de
dados. um texto inicial de leitura fcil e em portugus.
Conduction research in information systems (Dennis e Valacich, 2001). Aborda
questes envolvendo a pesquisa em sistemas de informao. Apresenta trs dimenses
dos mtodos experimento, survey e estudo de caso, comparando-os.
Qualitative research in information systems (Myers, 1997). Apresenta e discute
perspectivas filosficas, mtodos e modos de anlise para pesquisas em sistemas de
informao.

REFERNCIAS
BARBOSA, E. F. Instrumentos de coleta de dados em pesquisa. SEE-MG/CEFET-MG/1999.
DENNIS, A. R.; VALACICH, J. S. Conduction research in information systems. CAIS - Commu-
nications of the Association for Information Systems, v. 7, n. 5, jul. 2001.
DUBE, L.; PARE, G. Rigor in information system positivist case research: current practices, tren-
ds and recommendations. MIS Quarlerly, v. 27, n. 4, p. 597-635, 2003.
GIL, A. C. Mtodos e tcnicas de pesquisa social. 5. ed. So Paulo: Atlas, 2006.
GLASS, R. L.; RAMESH, V.;VESSEY, I. An analysis of research in computing disciplines. Com-
munications of the ACM, v. 42, n. 1, p. 94-97, jan. 2004.
GOLD, R. L. Roles in sociological field observations. Social Forces, v. 36, p. 217-223, 1958.
HAGEN, P.; ROBERTSON, T.; KAN, M.; SADLER Emerging research methods for unders-
tanding mobile technology use. In: CONFERENCE OF THE COMPUTER-HUMAN IN-
TERACTION SPECIAL INTEREST GROUP (CHISIG), 19th, of Australia on Computer-
human interaction: citizens online: considerations for today and the future, 2005, Camberra,
Australia. ACM International Conference Proceeding Series, Camberra, Australia, 2005. v. 122, p.
1-10.
KLEIN, H. K.; MYERS, M. D. A set of principles for conducting and evaluating interpretive field
 404 Sistemas Colaborativos

studies in information systems. MIS Quarterly, v. 23, n. 1, p. 67-93, 1999.

KOZINETS, R. V. Netnography: doing ethnographic research online. Los Angeles/London: Sage Publi-
cations, 2010.
MCMILLAN, J. H.; SCHUMACHER, S. Research in education. New York: Addison Wesley Educa-
tional Publishers, 1997. p. 274-275.
MYERS, M. D. Qualitative research in information systems. MISQ Discovery, v. 2, 1997. MIS Quar-
terly. Disponvel em: <http://www.qual.auckland.ac.nz/>.
MYERS, M. D.; YOUNG, L. W. Hidden agendas, power, and managerial assumptions in infor-
mation systems development: an ethnographic study. Information Technology & People, v. 10, n.
3, p. 224-240, 1997.
NICOLACI-DA-COSTA, A. M. O campo da pesquisa qualitativa e o mtodo de explicitao do
discurso subjacente (MEDS). Psicol. Reflex. Crit., Porto Alegre, v. 20, n. 1, 2007.
NICOLACI-DA-COSTA, A. M.; ROMAO-DIAS, D.; DI LUCCIO, F. Uso de entrevistas on-line
no mtodo de explicitao do discurso subjacente (MEDS). Psicol. Reflex. Crit., Porto Alegre,
v. 22, n. 1, 2009.
VESSEY, I.; RAMESH, V.; GLASS, R. L.. Research in information systems: an empirical study of
diversity in the discipline and its journals. Journal of Management Information Systems, v. 19, n. 2,
p. 129-174, out. 2002.
WAZLAWICK, R. S. Metodologia de pesquisa para cincia da computao. Rio de Janeiro: Elsevier,
2008.
YIN, R. K. Estudo de caso: planejamento e mtodos 4. ed. Porto Alegre: Bookman, 2010.