Escolar Documentos
Profissional Documentos
Cultura Documentos
2007 - 06 - 11 - Métodos Quantitativos I - MarcosForte - O Uso de Questionários em Trabalhos Científicos
2007 - 06 - 11 - Métodos Quantitativos I - MarcosForte - O Uso de Questionários em Trabalhos Científicos
1. Introduo
Um questionrio to somente um conjunto de questes, feito para gerar os dados necessrios para se
verificar se os objetivos de um projeto foram atingidos. Mas, construir questionrios no uma tarefa
fcil, e aplicar tempo e esforo no planejamento do questionrio um requisito essencial para se atingir
os resultados esperados. Infelizmente no existe uma metodologia padro para o desenvolvimento de
questionrios, porm existem recomendaes de diversos autores com relao a essa importante tarefa no
processo de pesquisa cientfica.
Este trabalho tem o objetivo de apresentar as etapas envolvidas no desenvolvimento de um questionrio e
est estruturado da seguinte forma: a seo 2 versa sobre a metodologia para a construo de um
questionrio; a seo 3 apresenta a importncia de se definir uma amostra adequada de respondentes e
como definir o tamanho da amostra; a seo 4 descreve uma viso geral de como analisar os dados
coletados pelos questionrios; e finalmente a seo 5 apresenta as concluses.
Passos
Evidenciar os objetivos da pesquisa
Definir o assunto da pesquisa em seu questionrio
Planejar o que vai ser
Obter informaes adicionais sobre o assunto da pesquisa a partir de fontes de
Mensurado
dados secundrios e pesquisa exploratria
Determinar o que vai ser perguntado sobre o assunto da pesquisa
Para cada assunto, determinar o contedo de cada pergunta
Dar Forma ao
Questionrio
Decidir sobre o formato de cada pergunta
Determinar como as questes sero redigidas
Texto das Perguntas
Avaliar cada uma das questes em termos de sua facilidade de compreenso,
conhecimentos e habilidades exigidos, e disposio dos respondentes.
Dispor as questes em uma ordem adequada
Decises sobre
Seqenciamento e
Agrupar todas as questes de cada sub-tpico para obter um nico
Aparncia
questionrio
Ler o questionrio inteiro para verificar se faz sentido, e se consegue
mensurar, o que est previsto para ser mensurado
Pr-Teste e Correo de
Verificar possveis erros no questionrio
Problemas
Fazer o pr-teste no questionrio
Corrigir o problema
Figura 1 Passos para a elaborao de um questionrio.
Com relao ao contedo das perguntas, pode-se tentar verificar fatos, crenas quanto a fatos, crenas
quanto a sentimentos, descoberta de padres de ao e de comportamento presente ou passado. Tambm
necessrio que o pesquisador faa algumas reflexes, do tipo: a pergunta realmente necessria? Qual a
sua utilidade? Estas perguntas podem se desdobrar nas seguintes questes:
O assunto exige uma pergunta separada, ou pode ser includo em outras perguntas?
Existem outras perguntas que j incluem adequadamente este ponto?
A pergunta desnecessariamente minuciosa e especfica?
Vrias perguntas so necessrias sobre o assunto desta pergunta ou uma o suficiente?
Devese evitar o uso de abreviao, e no se deve tratar dois assuntos complexos em uma mesma
pergunta.
Todos os aspectos importantes sobre este tpico sero obtidos da forma como foi elaborada a
pergunta?
Em perguntas de opinio, interessa saber os graus de favorabilidade/desfavorabilidade, ou basta
saber se a favor ou contra?
As pessoas tm a informao necessria para responder a pergunta? No basta, porm que se esteja
abordando a pessoa certa, preciso saber se ela capaz de se lembrar da informao. Nossa
habilidade para nos lembrarmos dos eventos influenciada pela importncia do prprio evento
para cada um, do tempo passado desde que ele ocorreu e da presena de estmulos que nos ajudem
a recordar.
Os respondentes estaro dispostos a dar a informao? A predisposio em responder a uma
determinada questo parece ser funo do tempo e trabalho envolvidos na elaborao da resposta,
de sua habilidade em articular a resposta, e da sensibilidade do assunto tratado.
Que objees algum poderia ter para responder esta pergunta?
O tema abordado muito ntimo, perturbador ou expe socialmente as pessoas, de forma a causar
resistncias e respostas falsas?
O tema embaraoso para o respondente por colocar em perigo seu prestgio caso seja contrrio a
idias socialmente aceitas?
Devese tomar o cuidado de no se usar perguntas muito especficas, quando, na verdade, a pesquisa for de
carter geral. Por exemplo, perguntar quantas vezes uma pessoa foi ao supermercado em determinado
ms, pode resultar em uma resposta menos precisa do que se fosse perguntado a respeito do seu
comportamento usual ou mdio durante os meses anteriores.
A figura 2 descreve segundo Mattar (1994), as principais vantagens e desvantagens de cada formato das
respostas.
Tipo de Questes
Abertas
Mltipla Escolha
Dicotmicas
Vantagens
Estimulam a cooperao;
Permitem avaliar melhor as
atitudes para anlise das questes
estruturadas;
So muito teis como primeira
questo de um determinado tema
porque deixam o respondente
mais vontade para a entrevista a
ser feita;
Cobrem pontos alm das questes
fechadas;
Tm menor poder de influncia
nos respondentes do que as
perguntas
com
alternativas
previamente estabelecidas;
Exigem
menor
tempo
de
elaborao;
Proporcionam
comentrios,
explicaes e esclarecimentos
significativos para se interpretar e
analisar
as perguntas
com
respostas fechadas;
Evitase o perigo existente no caso
das
questes
fechadas,
do
pesquisador deixar de relacionar
alguma alternativa significativa no
rol de opes.
Desvantagens
Do margem parcialidade do
entrevistador na compilao das
respostas, j que no h um padro
claro de respostas possveis. Assim,
difcil a codificao das respostas e
sua conseqente compilao;
H
grande
dificuldade
para
codificao e possibilidade de
interpretao subjetiva de cada
decodificador;
Quando aplicadas em forma de
entrevistas,
podem
levar
potencialmente a grandes vises dos
entrevistadores;
Quando feitas atravs de questionrios
auto-preenchidos, esbarram com as
dificuldades de redao da maioria das
pessoas, e mesmo com a "preguia" de
escrever.
So menos objetivas, j que o
respondente pode divagar e at mesmo
fugir do assunto;
So mais onerosas e mais demoradas
para serem analisadas que os outros
tipos de questes.
responder;
Apresentam pouca possibilidade
de erros;
Diferentemente das dicotmicas,
trabalham
com
diversas
alternativas.
responder;
Menor risco de parcialidade do
entrevistador;
Apresentam pouca possibilidade
de erros;
So altamente objetivas.
Polarizao
de
respostas
e/ou
possibilidade de forar respostas em
relao a um leque de opinies;
Podem levar a erros de medio, se o
tema foi tratado de forma dicotmica,
quando na verdade apresenta vrias
alternativas;
Dependendo de como a pergunta
feita,
questes
com
respostas
dicotmicas so fortemente passveis
de erros sistemticos.
2.2.1 Escalas
Quando se aplica um questionrio fechado (mltipla escolha ou dicotmico) pretende-se medir aspectos
como atitudes ou opinies do pblico-alvo, e isso geralmente possvel com a utilizao de escalas. As
escalas que se utilizam podem ser de quatro tipos: escala de Likert, VAS (Visual Analogue Scales), escala
Numrica e escala Guttman.
A escala de Likert apresenta uma srie de cinco proposies, das quais o respondente deve selecionar
uma, podendo estas ser: concorda totalmente, concorda, sem opinio, discorda, discorda totalmente.
efetuada uma cotao das respostas que varia de modo consecutivo: +2, +1, 0, -1, -2 ou utilizando
pontuaes de 1 a 5. necessria ateno quando a proposio negativa. Nestes casos a pontuao
atribuda dever ser invertida.
VAS (Visual Analogue Scales) um tipo de escala que advm da escala de Likert apresentando
os mesmos objetivos, mas num formato diferente. Este tipo de escala baseia-se numa linha horizontal com
10 cm de comprimento apresentando nas extremidades duas proposies contrrias:
til
Intil
O entrevistado deve responder questo assinalando na linha a posio que corresponde sua
opinio.
A Escala Numrica deriva da escala anterior na qual a linha se apresenta dividida em intervalos
regulares.
A escala de Guttman apresenta um conjunto de respostas que esto hierarquizadas. Deste modo
se um respondente concordar com uma das opes esta concordncia ir incluir todas as respostas que se
encontram numa posio inferior na escala. Se o inquirido concordar com uma opo, mas no concordar
com as anteriores, tal significar que a escala est mal construda. A cada item atribudo cotao que se
inicia em zero caso no seja escolhida nenhuma opo, um se for escolhida a primeira opo, dois se for
escolhida a segunda opo e assim sucessivamente.
A pergunta exprime adequadamente todas as alternativas, ou mostra apenas um dos lados do tpico
em questo? Ambos devem ser citados.
O quadro de referncia claro e uniforme para todas as pessoas que respondem?
A pergunta deixa claro que a pessoa deve respondla baseada naquilo que pensa ser a verdade e
no naquilo que desejaria que fosse a verdade?
A frase enviesada, ou seja, est emocionalmente carregada ou deformada para determinado tipo
de resposta?
O que traria melhores resultados? Uma redao mais pessoal ou mais impessoal da pergunta?
O que seria melhor? Apresentar a pergunta de maneira direta ou indireta? No h recomendaes
concretas quanto ao emprego de perguntas indiretas. Suas possibilidades e limitaes devem ser
examinadas caso a caso, de acordo com o objetivo da pesquisa. Entram em questo problemas
morais e tcnicos: saber se as inferncias pretendidas podem ser retiradas, sem prejuzo, das
provas indiretas; se tal pergunta indireta ir enviesar a resposta; se as perguntas so altamente
invasivas da intimidade etc. (Selltiz et al, 1974).
Usar temas e perguntas gerais no inicio do questionrio, deixando as perguntas especficas para
depois (fechar o foco gradualmente);
As perguntas mais pessoais, sensveis ou embaraosas devem ser feitas somente no final do
questionrio e convm que sejam alternadas com questes simples;
Devese adotar uma ordem lgica de perguntas utilizando um fluxograma ou rvore de deciso para
posicionar as perguntas;
Dar uma seqncia lgica ao questionrio. Mudanas de tpicos repentinas e "ir e voltar" ao
assunto devem ser evitados;
Informaes que classificam social, econmica ou demograficamente o respondente devem ser
colocadas no final, a no ser que alguma delas sirva como "filtro";
Perguntas de carter mais invasivo, ou que tratem temas delicados, no devem ser colocados no
incio do questionrio e convm que sejam alternadas com questes simples;
Outra preocupao com o questionrio a de explicar as condies adequadas para o seu uso e aplicao,
tanto no caso de formulrios auto-preenchidos, quanto nos que utilizam entrevistadores. Devem ser
fornecidas aos entrevistadores instrues claras de como proceder no campo, como abordar os
respondentes, como preencher os instrumentos, etc. A seguir, so apresentados alguns pontos sobre os
quais os entrevistadores devem ser orientados.
Proporcionar ao respondente uma situao de liberdade, em que a pessoa seja estimulada a
apresentar francamente suas opinies;
Garantir, se for o caso, o anonimato do respondente;
O entrevistador deve ser educado, amistoso e imparcial;
Nunca dever mostrar surpresa ou desaprovao diante das opinies de quem responde;
As perguntas precisam ser apresentadas da maneira exata, com as mesmas palavras que foram
propostas;
Qualquer explicao improvisada da pergunta proibida. Em casos em que se imagine, de
antemo, que surgiro dvidas, esclarecimentos devem ser previamente elaborados;
As perguntas devem seguir a ordem exata em que aparecem no questionrio;
O entrevistador deve apresentar todas as perguntas, e jamais responder alguma por deduo
prpria;
Esperase que o entrevistador registre fiel e integralmente a resposta;
necessrio que os entrevistadores sejam orientados em relao ao processo de amostragem.
Por exemplo, como proceder em casos de recusas ou ausncias.
3. Populaes e amostras
Uma noo importante referente amostragem reconhecer que uma amostra vlida simplesmente no
o conjunto de respostas que adquirimos quando administrarmos um questionrio. Um conjunto de
respostas s uma amostra vlida, em condies estatsticas, se for obtido por um processo de amostragem
aleatrio. (Kitchenham e Pfleeger, 2002a).
2.
3.
tcnica freqentemente usada quando a populao for de difcil identificao pelos pesquisadores. Por
exemplo, poderamos esperar que os hackers de software se conheam entre si, assim se achssemos um
hacker para participar da pesquisa, poderamos lhe pedir que identificasse outros possveis participantes.
O nvel alfa que pretendemos usar, onde alfa a probabilidade de um erro Tipo I (quer dizer, a
probabilidade de falsamente rejeitar a hiptese invlida). Alfa normalmente fixa em 0.05 ou
0.01.
2.
O nvel de beta que ns pretendemos usar, onde beta a probabilidade de um erro Tipo II (quer
dizer, a probabilidade de falsamente aceitar a hiptese invlida). Beta normalmente fixa em
0.20. Falamos freqentemente sobre o poder de um teste ou experincia; poder calculado como
1-beta. O poder de um teste a probabilidade de aceitar corretamente a hiptese alternativa.
3.
O tamanho de efeito que a diferena de resultados entre dois grupos. Por exemplo, suponha
que queremos investigar se h diferenas de pagamento entre engenheiros de software de
diferentes sexos. Poderamos pesquisar os homens e mulheres que se formaram em 1998 e
perguntar qual o salrio base deles. O tamanho de efeito a diferena entre o salrio masculino
comum e o salrio feminino comum.
4.
A varincia de efeito o grau de variao dos dados dentro de um grupo. Usando o exemplo do
salrio, podemos obter a varincia de valores de salrio para os homens e para as mulheres.
Claro que, o tamanho de efeito e de varincia o que ns esperamos obter como resultado de nossa
pesquisa, assim precisamos de informao anterior para determinar um tamanho de amostra apropriado.
Podemos obter tal informao de pesquisas prvias, pesquisa piloto ou opinio de um especialista.
No caso simples de avaliar o tamanho de amostra, assumindo uma distribuio Normal para as variveis
de resposta, dois grupos com nmeros iguais em cada grupo e varincias iguais dentro do grupo, o
tamanho de amostra (por grupo) :
( z a zb ) *
1 2
onde
1-2 o tamanho de efeito.
a varincia padro.
za a parte superior na distribuio normal padro que corresponde a . Por exemplo, z a = 1.96 se =
0.05.
zb a parte inferior na distribuio normal padro que correspondente a . zb = -0.84 se = 0.20.
No devemos esquecer os no respondentes quando fixarmos o tamanho da amostra. Por exemplo, se a
frmula nos fala que o tamanho de amostra tima 50, mas esperamos uma taxa de resposta de 80%,
devemos aumentar o tamanho da amostra para 63.
4. Anlise de Dados
Neste ponto, assumimos que voc j projetou e administrou a sua pesquisa e agora voc est pronto para
analisar os dados coletados. Agora abordaremos alguns assuntos gerais envolvendo analise de dados de
pesquisa. Porm, no iremos descrever como analisar todos os tipos de dados de pesquisa em detalhes,
desse modo iremos nos concentrar na discusso de alguns erros de anlise mais comuns e como evit-los.
(Kitchenham e Pfleeger, 2002c)
pessoas diferentes que codifiquem respostas e compararem os resultados, de forma que a parcialidade
no seja introduzida pela categorizao.
XT Xi
Populao Total:
i 1
X ( X i ) / N
Media da Populao:
i 1
Varincia da Populao:
(Xi X )/ N
2
x
Proporo: PY ( Yi ) / N
i 1
Y2 PY (1 PY )
N n xi
i 1
Total:
XT
Mdia:
x
i 1
/n
N 1 2
sx
N
2
Varincia: x
onde:
s x2
sx
n
i 1
x x / n 1
2
N n
N
sx
Para a proporo
P
^
N n
N
N n
N
Py 1 Py
n 1
Estas podem no ser as frmulas que voc estaria esperando ao ler um livro bsico em estatstica e
anlise de dados. Os erros padres incluem o termo N n / N que ser chamado de correo de
populao finita (fpc)(Levy e Lemeshow, 1999). O fpc pode ser re-escrito como 1 (n / N ) onde se
pode observar que se N tender ao infinito, o fpc se aproxima de 1 e as frmulas de erros padro se
aproxima das frmulas habituais. Se n = N, as condies de erro padro so zero porque os valores da
mdia, total e de proporo so conhecidos e portanto no sujeito a erro.
Nota. A equao que ns demos por determinar tamanho de amostra ignora o fpc, e se usada como est
resultar em um resultado sobreestimado do tamanho de amostra exigida. Porm, melhor para ter mais
do que menos em uma amostra.
Podemos talvez converter uma escala ordinal em uma varivel dicotmica. Por exemplo, se
estamos interessados em comparar se a proporo de quem concorda ou concorda totalmente
maior em um grupo que outro, podemos re-codificar nossas respostas em uma varivel
dicotmica (por exemplo, podemos codificar "concordo totalmente" ou "concordo" como 1 e
todas as outras respostas como 0) e usar as propriedades da distribuio binomial. Essa tcnica
tambm til se quisermos avaliar o impacto de outras variveis em uma varivel de escala
ordinal.
3.
Podemos usar a correlao de postos de Spearman ou o tau de Kendall (Siegel e Castellan, 1998)
para medir a associao entre variveis de escala ordinal.
5. Concluses
Espera-se que ao longo deste trabalho o leitor tenha compreendido a importncia do planejamento na
realizao de um questionrio. Todas as indagaes quanto ao contedo, forma, redao e seqncia
devem ser feitas para cada questo. Esse planejamento no se limita ao desenvolvimento das questes,
mas tambm a realizao de pr-testes, determinao da populao alvo e da amostra, e analise dos
dados. Tudo isso deve ser realizado antes de se questionar toda a amostra com o propsito de no perder
todo trabalho empenhado.
6. Referncias
AAKER, ET AL (2001) Marketing Research (7th Ed.), New York: John Wiley & Sons, Inc
CRONBACH, L. J. (1951) Coefficient alpha and internal structure of tests, Psychometrika, 16(2), pp.
297-334.
GOODE, Willian J.; HATT, Paul K. (1972) Mtodos em Pesquisa Social. 4a ed. So Paulo: Nacional.
KITCHENHAM, B. and PFLEEGER, S. (2002a). Principles of survey research: part 2: designing a
survey. ACM SIGSOFT Software Engineering Notes, 27(1):4445.
KITCHENHAM, B. and PFLEEGER, S. (2002c).Principles of survey research: part 6: data analysis.
ACM SIGSOFT Software Engineering Notes, 28(2):2427.
LEVY, P. S. and LEMESHOW, S. (1999) Sampling and Populations, Third Edition, Wiley Series in
Probability and Statistics, John Wiley & Sons, New York.
LITTLE, R. J. A. and RUBIN, D. B. (1987) Statistical Analysis with Missing Data, Wiley, New York.
MATTAR, F. N. (1994) Pesquisa de marketing: metodologia, planejamento, execuo e anlise, 2a. ed.
So Paulo: Atlas, 2v., v.2.
SELLTIZ, Claire et al. (1974) Mtodos de pesquisa nas relaes sociais. 3 a . ed. So Paulo: E.P.U.
SIEGEL, S. and CASTELLAN, N. J (1998) Nonparametric Statistics for the Behavioral Sciences, 2nd
Edition, McGraw-Hill Book Company, N.Y.