Mtodos de pesquisa

quantitativa e qualitativa para a

Cincia da Computao
Tiago Cesar dos Santos, Lina Mara Garcs e Andr Gomes Benjamim.
Prof. Dr. Jorge Luiz e Silva.
ROTEIRO
Conceitos introdutrios
Mtodos de pesquisa cientfica
Mtodos quantitativos
Planejamento de Experimentos
Mtodos qualitativos
tica em pesquisa em computao
Referncia
ROTEIRO
Conceitos introdutrios
Mtodos de pesquisa cientfica
Mtodos quantitativos
Planejamento de Experimentos
Mtodos qualitativos
tica em pesquisa em computao
Referncia
Conceitos Introdutrios
Envolve na maioria dos casos a construo
de:
um programa
um modelo
um algoritmo, ou
um sistema novo.
Novidade considerada como algo
fundamental da pesquisa em CC.
PESQUISA EM CINCIAS DA
COMPUTAO (CC)
rodrigoregis.blogspot.com
Conceitos Introdutrios
PROGRAMA: Software que resolve um
problema especfico, e cujo usurio
normalmente o prprio autor.
SISTEMA: Software que interage com
usurios que no so o desenvolvedor do
sistema, e que faz parte das atividades do
usurio.
PROGRAMA E SISTEMA
desenvolvimentodesoftware.xpg.uol.com.br
Conceitos Introdutrios
VERIFICAO: o processo de julgar a
aderncia de um sistema de informao
com a sua especificao.
VALIDAO: o processo de julgar quo
bem um sistema de informao resolve o
problema para o qual ele foi concebido.
AVALIAO: o processo de verificar para
que serve e quanto serve um sistema.
VERIFICAO, VALIDAO E
AVALIAO
www.passmark.com
ROTEIRO
Conceitos introdutrios
Mtodos de pesquisa cientfica
Mtodos quantitativos
Planejamento de Experimentos
Mtodos qualitativos
tica em pesquisa em computao
Referncia
Mtodos de pesquisa cientfica
Avaliar programas e sistemas.
Entendimentos de requisitos.
Entendimento de prticas e o contexto de trabalho em
organizaes.
Demonstraes e refutaes de teorias sobre sistemas
de informao.
Subsdio para especificar sistemas de informao.
Entender prticas de trabalho colaborativo.
Para fazer cincia.
Criao de leis gerais ou teorias em diferentes reas da
computao.
PARA QU SO USADOS?
www.chrismadden.co.uk
Mtodos de pesquisa cientfica
METOLOGIAS PARA OBTR CONHECIMENTO EM CINCIA DA COMPUTAO
Pesquisa analtica
Pesquisa bibliogrfica
Pesquisa quantitativa
Pesquisa qualitativa
Mtodos de pesquisa cientfica
METOLOGIAS PARA OBTR CONHECIMENTO EM CINCIA DA COMPUTAO
Mtodo mais comum de gerar/obter conhecimento.
Faz algumas pressuposies sobre os dados do programa
ou sobre a mquina onde o programa vai a ser executado
Prova matematicamente que o programa tem algumas
propriedades interessantes.
Exemplos:
A anlise de complexidade assinttica de algoritmos
Anlise de algoritmos e programas onde se modela a
distribuio de probabilidades dos dados
Pesquisa analtica
Pesquisa bibliogrfica
Pesquisa quantitativa
Pesquisa qualitativa
Mtodos de pesquisa cientfica
METOLOGIAS PARA OBTR CONHECIMENTO EM CINCIA DA COMPUTAO
NO apenas coletar e resumir alguns artigos relevantes
pesquisa.
Objetivo: Coletar TODOS os artigos publicados que
reportam a algum experimento quantitativo pelo qual se
esta interessado em resumir os vrios resultados.
Prticas comuns :
Reviso sistemtica: Termina em uma avaliao
qualitativa e quantitativa dos resultados.
Meta-anlise: Usa tcnicas estatsticas avanadas
para agregar os vrios resultados experimentais num
nico nmero.
Pesquisa analtica
Pesquisa bibliogrfica
Pesquisa quantitativa
Pesquisa qualitativa
Mtodos de pesquisa cientfica
METOLOGIAS PARA OBTR CONHECIMENTO EM CINCIA DA COMPUTAO
baseada em:
A medida (normalmente numrica) de poucas
variveis objetivas
A nfase em comparao de resultados, e
O uso intensivo de tcnicas estatsticas.
Mtodos
quantitativos
Dados sintticos
Tcnicas
estatsticas
Uso de
questionrios
Desenhos
experimentais
Pesquisa analtica
Pesquisa bibliogrfica
Pesquisa quantitativa
Pesquisa qualitativa
Mtodos de pesquisa cientfica
METOLOGIAS PARA OBTR CONHECIMENTO EM CINCIA DA COMPUTAO
baseada em:
A observao cuidadosa dos ambientes onde o
sistema est sendo usado ou ser usado.
Do entendimento das vrias perspectivas dos
usurios
Mtodos qualitativos
Estudos qualitativos
observacionais
Pesquisa-ao
Outras formas
Pesquisa analtica
Pesquisa bibliogrfica
Pesquisa quantitativa
Pesquisa qualitativa
ROTEIRO
Conceitos introdutrios
Mtodos de pesquisa cientfica
Mtodos quantitativos
Planejamento de Experimentos
Mtodos qualitativos
tica em pesquisa em computao
Referncia
Mtodos Quantitativos
ESSNCIA DA PESQUISA QUANTITATIVA
Caractersticas marcantes
estabelecer variveis
ato de mensurar
Mtodos Quantitativos
ESSNCIA DA PESQUISA QUANTITATIVA
Primeiro contato
metodologia cientfica
forma emprica
Aplicao em Cincias Naturais
tradicional
poucas variveis
objetivas
medidas em escala numrica
Mtodos Quantitativos
ESSNCIA DA PESQUISA QUANTITATIVA
as variveis a serem observadas so consideradas objetivas, isto ,
diferentes observadores obtero os mesmos resultados em observaes
distintas
no h desacordo do que melhor e o que pior para os valores dessas
variveis objetivas
medies numricas so consideradas mais ricas que descries
verbais, pois elas se adequam manipulao estatstica
Mtodos Quantitativos
Estrutura lgica da abordagem
quantitativa (BRYMAN, 1989)
Mtodos Quantitativos
A essncia da pesquisa quantitativa em cincia da computao
verificar o quo melhor usar um programa/sistema novo frente
(s) alternativa(s).
Mtodos Quantitativos
Processamento de dados
organizao dos dados para extrao de conhecimento
Mtodos Quantitativos
Estatstica Descritiva
descreve, resumi, totaliza e apresenta graficamente os dados
Estatstica Inferencial
permite testar hipteses
Mtodos Quantitativos
Estatstica Descritiva
distribuio de frequncia
% => nmero de ocorrncias/total
Mtodos Quantitativos
Estatstica Descritiva
mdia

mediana
ordena os valores e pega o central
moda
valor mais frequente
Mtodos Quantitativos
Estatstica Descritiva
correlao
indica a fora e a direo do relacionamento linear entre duas
variveis aleatrias
Mtodos Quantitativos
Estatstica Inferencial
amostras de uma populao
teste de hipteses
intervalo de confiana
ROTEIRO
Conceitos introdutrios
Mtodos de pesquisa cientfica
Mtodos quantitativos
Planejamento de Experimentos
Mtodos qualitativos
tica em pesquisa em computao
Referncia
Planejamento de Experimentos
Experimentos so atividades caracterizadas pela manipulao de
algumas variveis, e a observao de outras, em situaes artificiais
ou semi-artificiais. - Jacques Wainer
Planejamento de Experimentos
Validade Interna
O efeito observado foi obtido a
partir da manipulao realizada
Validade Externa
Generalizao do efeito
observado
Planejamento de Experimentos
Desenho Experimental
O1 X O2
O1: pr-teste (observao)
O2: ps-teste
X: Introduo case
(Interveno)
E1: apresentao de um
projeto P1, contagem de
erros de P1.
Apresentao de um
projeto P2 e contagem de
erros de P2
E2: Contagem de erros de
um projeto P3, instalao
CASE, contagem de um
projeto P4 posterior.
Planejamento de Experimentos
Algumas das ameaas podem ser:
Instrumentao
Testagem
Maturao
Histria
Planejamento de Experimentos
Outras ameaas esto presentes em desenhos que
apresentem dois grupos.
Considerando um experimento E3 com dois grupos, onde
ambos possuem a estrutura do experimento E1,
entretanto o grupo 2 no apresenta a ferramenta CASE.
Planejamento de Experimentos
Desenho Experimental (E3)
O1 X O2 (Grupo Experimental)
O3 O4 (Grupo de Controle)
Planejamento de Experimentos
Esse desenho permite que sejam neutralizadas as
ameaas de maturao e histria. Entretanto, permite
que sejam introduzidas outras ameaas como:
Seleo
Mortalidade Seletiva
Contaminao
Comportamento Competitivo
Comportamento Compensatrio
Efeito de Expectativa do Sujeito
Efeito de expectativa do Experimentador
Influncia de Parte da Interveno
Planejamento de Experimentos
Os desenhos de um experimento so tidos como
verdadeiramente experimentais se ambos os grupos de controle
e grupo experimental forem selecionados de forma aleatria.
Isso permite a eliminao das ameaas de seleo e mortalidade
seletiva
Caso no seja possvel a seleo aleatria, porm, ainda existir a
separao entre grupo experimental e de controle, ento esse
desenho considerado como quase experimental.
Planejamento de Experimentos
O objetivo de um experimento permitir que determinado
conhecimento seja generalizado.
Entretanto, possvel garantir que o resultado ir valer para
qualquer indivduo, em qualquer lugar, em qualquer tempo e
em qualquer ambiente?
ROTEIRO
Conceitos introdutrios
Mtodos de pesquisa cientfica
Mtodos quantitativos
Planejamento de Experimentos
Mtodos qualitativos
tica em pesquisa em computao
Referncia
Mtodos Qualitativos
Se ocupam de variveis que NO podem
ser medidas, APENAS observadas.
Vm das cincias sociais.
So mtodos que se caraterizam por ser
um estudo aprofundado de um sistema no
ambiente onde ele est sendo usado.
Mtodos Qualitativos SEMPRE envolvem
pessoas, e na maioria das vezes sistemas.
DEFINIO
http://www.slideshare.net/tofoli/elaborando-uma-pesquisa-qualitativa
Mtodos Qualitativos
CLASSIFICAO
Pesquisa observacional
Objetivo: Observar o
ambiente mas NO modific-
lo.
Pesquisa Ao
Objetivo: Modificar o
ambiente.
REAS: Sistemas de informao, Gerncia de sistemas de informao, Sistemas colaborativos, Engenharia de
Software, Interfaces humano-computador, e Informtica mdica
Mtodos Qualitativos > Pesquisa observacional
1. ESTUDOS OBSERVACIONAIS
Positivista
Interpretativista
Tenta seguir de perto os fundamentos da pesquisa
quantitativa.
Existem variveis objetivas no mundo, que embora
no possam ser medidas, podem ser observadas.
Pesquisa com vis positivista tenta falar em teorias, em
provar e desaprovar essas teorias.
chamada:
Descritiva: Busca descrever de forma objetiva e direta
eventos e fatos interessantes.
Exploratria: Descreve o fenmeno, faz propostas para
novas teorias, observaes ou mtricas para medir o
fenmeno.
Positivista
Crtica
Mtodos Qualitativos > Pesquisa observacional
1. ESTUDOS OBSERVACIONAIS
Positivista
Interpretativista
Entende o mundo como uma construo
histrica e social de relaes de poder e
dominao.
Objetivo central: Revelar heranas que os
sistemas de informao tem com a
sociedade, alienao e dominao.
Positivista
Crtica
Mtodos Qualitativos > Pesquisa observacional
1. ESTUDOS OBSERVACIONAIS
Interpretativista
Prope que:
No h variveis objetivas.
Tudo o que observado depende de
interpretao de um observador.
Tenta iluminar e elucidar as diferentes
perspectivas/valores/interpretaes das
pessoas envolvidas com o sistema.
Positivista
Crtica
Mtodos Qualitativos > Pesquisa observacional
1.1 ESTILOS DA PESQUISA OBSERVACIONAL
ESTUDOS DE CASO ETNOGRAFIA
O pesquisador interage com os sujeitos de uma forma
semi-formal.
Entrevistas, conversas programadas, acesso a
documentos formais da organizao.
Objetivo: Descobrir as prticas formais da
organizao e os valores, opinies e atitudes dos
sujeitos.
Relevante em pesquisa da Engenharia de software,
sistemas de informao, informtica mdica.
O pesquisador vive-trabalha junto com os sujeitos.
Em computao tem sido usada para descobrir o
que as pessoas fazem.
Objetivo: Entender como as pessoas trabalham.
Durao deve ser suficiente para:
Sujeitos passem a estar confortveis com a
presena do pesquisador
O pesquisador tenha observado suficientes
comportamentos e prticas.
Relevante em reas de sistemas colaborativos,
interfaces (HIC).
Mtodos Qualitativos > Pesquisa observacional
1.2 TCNICAS DA PESQUISA OBSERVACIONAL
Amostragem fundamentada em teoria ou
direcionada
Separao de observao e de teorizao
Teoria fundamentada em dados
Triangulao
Parceiro neutro
Validao pelos sujeitos
Mtodos Qualitativos > Pesquisa observacional
1.2 TCNICAS DA PESQUISA OBSERVACIONAL
Amostragem fundamentada em teoria ou
direcionada
Separao de observao e de teorizao
Teoria fundamentada em dados
Triangulao
Parceiro neutro
Validao pelos sujeitos
A seleo das amostras NO aleatria, mas busca
especificamente casos extremos.
As fontes mais diversas sero estudadas
A pesquisa cobre o espectro das possibilidades.
Mtodos Qualitativos > Pesquisa observacional
1.2 TCNICAS DA PESQUISA OBSERVACIONAL
Amostragem fundamentada em teoria ou
direcionada
Separao de observao e de teorizao
Teoria fundamentada em dados
Triangulao
Parceiro neutro
Validao pelos sujeitos
A coleta de dados e a teorizao devem ser feitas em
momentos independentes.
O pesquisador deve anotar tudo que acontece na
observao de campo e depois fazer o analise.
Mtodos Qualitativos > Pesquisa observacional
1.2 TCNICAS DA PESQUISA OBSERVACIONAL
Amostragem fundamentada em teoria ou
direcionada
Separao de observao e de teorizao
Teoria fundamentada em dados
Triangulao
Parceiro neutro
Validao pelos sujeitos
Anlise de dados qualitativos que busca extrair dos prprios
dados e de padres repetitivos dos dados as teorias que
explicam tais dados.
Mtodos Qualitativos > Pesquisa observacional
1.2 TCNICAS DA PESQUISA OBSERVACIONAL
Amostragem fundamentada em teoria ou
direcionada
Separao de observao e de teorizao
Teoria fundamentada em dados
Triangulao
Parceiro neutro
Validao pelos sujeitos
Utilizao de vrias fontes para o mesmo fato.
Consiste em buscar pelo menos duas formas/fontes para
cada dado e anlise da pesquisa.
Pode-se usar mais de uma tcnica de coleta de dados, ou
pode-se usar mais de um pesquisador observando o
ambiente.
Codificao mltipla: Uso de mltiplos pesquisadores.
Mtodos Qualitativos > Pesquisa observacional
1.2 TCNICAS DA PESQUISA OBSERVACIONAL
Amostragem fundamentada em teoria ou
direcionada
Separao de observao e de teorizao
Teoria fundamentada em dados
Triangulao
Parceiro neutro
Validao pelos sujeitos
Utilizao de um pesquisador experiente no envolvido
diretamente na pesquisa para validar/ criticar as concluses.
Mtodos Qualitativos > Pesquisa observacional
1.2 TCNICAS DA PESQUISA OBSERVACIONAL
Amostragem fundamentada em teoria ou
direcionada
Separao de observao e de teorizao
Teoria fundamentada em dados
Triangulao
Parceiro neutro
Validao pelos sujeitos
Consiste em mostrar os dados coletados e/ou a anlise dos
mesmos a alguns dos sujeitos da pesquisa.
Mtodos Qualitativos
CLASSIFICAO
Pesquisa observacional
Objetivo: Observar o
ambiente mas NO modific-
lo.
Pesquisa Ao
Objetivo: Modificar o
ambiente.
REAS: Sistemas de informao, Gerncia de sistemas de informao, Sistemas colaborativos, Engenharia de
Software, Interfaces humano-computador, e Informtica mdica
Mtodos Qualitativos > Pesquisa - Ao
Objetivo: Modificar o ambiente que est
sendo estudado atravs da ao do
pesquisador.
Resultados: a descrio de um caso de
tentativa de modificao de uma
organizao ou grupo atravs do
desenvolvimento (opcional) e a
implantao de um sistema.
Mtodos Qualitativos > Pesquisa - Ao
ETAPAS DE UMA PESQUISA-AO
Infra-estrutura
cliente-sistema
Diagnstico
Planejamento
da ao
Tomada da
ao
Avaliao
Aprendizado
Definio de um acordo/contrato sobre o escopo da pesquisa, os
papis que cada um assumir, etc.
Definio conjunta e colaborativa do que o problema a ser
resolvido.
Construo da soluo que espera-se resolver o problema.
Implantao da soluo
A anlise/avaliao dos resultados da ao.
A adaptao das teorias que foram usadas para formular a soluo,
tendo em vista a avaliao.
Mtodos Qualitativos > Pesquisa - Ao
DIFERENS COM ATIVIDADES DE DESENVOLVIMENTO DE SISTEMAS E CONSULTORIAS
Des. de sistemas
O problema a ser resolvido normalmente
definido antes que o processo de desenvolvimento
comece.
Acredita que a soluo desenvolver um sistema
novo.
Encara a avaliao como um teste Existe um vis
para que a avaliao seja positiva!.
No h muita preocupao com o aprendizado
participativo. H pouco retorno para os sujeitos do
sistema.
Pesquisa - Ao
Comea com a fase de diagnstico
Pode que a soluo no seja um sistema novo.
A avaliao deve ser to neutra quanto possvel.
Da anlise dos resultados, os participantes devem
reavaliar suas teorias e conhecimentos.
Consultorias
O processo de diagnstico parte do processo.
As organizaes esperam que os consultores
proponham a soluo baseada na sua experincia
prvia.
Mtodos Qualitativos > Outras formas qualitativas de avaliao
Especialista na rea usa o programa ou sistema e
expressa sua opinio sobre a experincia de us-lo.
reas: Interao Humano - Computador
Avaliao como crtica
artstica
Usa-se um grupo de especialistas.
Mantem o controle da subjetividade dos
especialistas.
Avaliao por comit de
especialistas
Mtodos Qualitativos > Publicao
CUIDADOS NA HORA DE PUBLICAR RESULTADOS
Defender o mrito dos mtodos qualitativos, se a publicao em uma rea da CC que valoriza a pesquisa
quantitativa.
Na pesquisa quantitativa, a competncia do pesquisador central na escolha do desenho experimental e na
escolha do teste estatstico, mas fazer pesquisa essencialmente uma tarefa mecnica.
Em pesquisa qualitativa, a competncia do pesquisador necessria durante o fazer da pesquisa. O
pesquisador tem que:
Manter suas idias pr-pesquisa controlados
Separar a coleta dos dados da teorizao
Estar aberto e aproveitar as oportunidades que aparecem durante a pesquisa.
Ter habilidade de entrevistar os participantes.
O texto da publicao tem que ser rico o suficiente para dar confiana ao revisor e aos leitores que a pesquisa
foi feita por algum competente.
O pesquisador precisa de ligar a sua pesquisa com as teorias fundamentais da pesquisa qualitativa.
ROTEIRO
Conceitos introdutrios
Mtodos de pesquisa cientfica
Mtodos quantitativos
Planejamento de Experimentos
Mtodos qualitativos
tica em pesquisa em computao
Referncia
tica em pesquisa em computao
Pesquisa qualitativa, questionrios e experimentos necessariamente
envolvem seres humanos.
Cada pesquisador ter que refletir e agir segundo suas convices nessas
e outras questes, quanto participao em experimentos:
O sujeito de um experimento em cincia da computao deve ser
informado que ele participa de um experimento ou isso no
necessrio?
Se ele tiver que ser informado, preciso que ele o seja antes e
concorde em participar, ou s preciso que ele aprove aps o
experimento?
Referncia
WAINER, J. (2007) Mtodos de pesquisa quantitativa e qualitativa para a cincia de
computao. T. KOWALTOWSKI W e K. BREITMAN (Org), Atualizao em Informtica da
Sociedade Brasileira de Computao, PP 221-262.
Disponvel para download no endereo:
HTTP://www.ic.unicamp.br/~wainer/publications.html