Você está na página 1de 42

Traduzido do Inglês para o Português - www.onlinedoctranslator.

com

Capítulo 1

Os pilares de
Pesquisa de opinião

Edith D. de Leeuw
Joop J. Hox
Departamento de Metodologia e Estatística, Universidade de Utrecht

Don A. Dillman
Universidade Estadual de Washington

1.1 INTRODUÇÃO

A ideia de conduzir uma pesquisa é enganosamente simples. Envolve a identificação


de um grupo ou categoria específica de pessoas e a coleta de informações de
algumas delas para obter uma visão sobre o que todo o grupo faz ou pensa; no
entanto, a realização de uma pesquisa inevitavelmente levanta questões que podem
ser difíceis de responder. Quantas pessoas precisam ser pesquisadas para poder
descrever com bastante precisão todo o grupo? Como as pessoas devem ser
selecionadas? Que perguntas devem ser feitas e como devem ser feitas aos
respondentes? Além disso, quais métodos de coleta de dados devem ser
considerados, e alguns desses métodos de coleta de dados são melhores do que
outros? E, uma vez coletadas as informações, como deve ser analisado e relatado?
Decidir fazer uma pesquisa significa comprometer-se a trabalhar em uma miríade de
questões, cada uma das quais é crítica para o sucesso final da pesquisa.
No entanto, todos os dias, em todo o mundo, milhares de pesquisas estão sendo
realizadas. Algumas pesquisas envolvem anos de planejamento, exigem esforços árduos para
selecionar e entrevistar os entrevistados em suas casas e levam muitos meses para serem
concluídas e muitos mais meses para relatar os resultados. Outras pesquisas são conduzidas
aparentemente com a velocidade da luz, pois as solicitações de pesquisa na web são transmitidas
simultaneamente para as pessoas, independentemente de sua localização, e as pesquisas
concluídas começam a ser devolvidas alguns minutos depois; a coleta de dados é interrompida
em alguns dias e os resultados são relatados minutos depois. Enquanto algumas pesquisas usam
apenas um modo de coleta de dados, como o telefone, outras podem envolver vários modos, por
exemplo, começando com o correio, passando para o telefone e terminando com entrevistas face
a face. Além disso, algumas pesquisas são bastante simples e baratas de fazer, como uma
pesquisa por correio de membros de uma pequena associação profissional. Outras são
incrivelmente complexas, como uma pesquisa do público em geral em todos os países da União
Europeia, na qual as mesmas perguntas precisam ser respondidas em vários idiomas por pessoas
de todos os níveis educacionais.

1
2 Edith de Leeuw, Joop Hox, Don Dillman

Em meados do século XX, havia uma notável semelhança de procedimentos e


métodos de pesquisa. A maioria das pesquisas significativas foi feita por meio de
entrevistas face a face na maioria dos países do mundo. Pesquisas em papel auto-
administradas, geralmente feitas por correio, eram a única alternativa. No entanto, na
década de 1980, o telefone substituiu as entrevistas face a face como o modo de pesquisa
dominante nos Estados Unidos e, na década seguinte, as pesquisas por telefone se
tornaram o principal método de coleta de dados em muitos países. No entanto, outros
métodos foram surgindo e, na década de 1990, surgiram em alguns países dois modos
adicionais de pesquisa – a Internet e a resposta por telefone a perguntas de entrevistas
pré-gravadas, conhecidas como Resposta de Voz Interativa ou IVR. No entanto, em alguns
países, a entrevista face a face continuou sendo o modo de pesquisa confiável e
predominantemente usado.
Nunca na história da pesquisa houve tantas alternativas para coletar dados de
pesquisa, nem tanta heterogeneidade no uso de métodos de pesquisa entre os
países. A heterogeneidade também existe dentro dos países, pois os pesquisadores
tentam combinar os modos de pesquisa com as dificuldades associadas à localização
e obtenção de respostas a populações específicas de pesquisa.
No entanto, todas as pesquisas enfrentam um desafio comum, que é como
produzir estimativas precisas, pesquisando apenas uma proporção relativamente
pequena da população maior, dentro dos limites dos ambientes sociais, econômicos e
tecnológicos associados aos países e populações de pesquisa nos países. Este
capítulo é sobre como resolver esses problemas comuns que descrevemos como os
pilares da topografia. Quando compreendidos e respondidos, os desafios
fundamentais garantirão a precisão na busca dos objetivos da pesquisa.

1.2 O QUE É UMA PESQUISA?

Uma rápida revisão da literatura revelará muitas definições diferentes do que constitui uma pesquisa. Alguns manuais sobre

metodologia de pesquisa descrevem imediatamente os principais componentes de pesquisas e de erros de pesquisa em vez

de dar uma definição (por exemplo, Fowler, Gallagher, Stringfellow, Zalavsky Thompson & Cleary, 2002, p. 4; Groves, 1989, p.

1), outros fornecem definições, variando de definições concisas (por exemplo, Czaja & Blair, 2005, p. 3; Groves, Fowler,

Couper, Lepkowski, Singer & Tourangeau, 2004, p. 2; Statistics Canada, 2003, p. 1) para elaborar descrições de critérios

(Biemer & Lyberg, 2003, Tabela 1.1). O que essas definições têm em comum? A seção de métodos de pesquisa de pesquisa

da American Statistical Association fornece em seu site uma introdução (Scheuren, 2004) que explica a metodologia de

pesquisa para usuários de pesquisa, cobrindo as principais etapas do processo de pesquisa e explicando as questões

metodológicas. De acordo com Scheuren (2004, p. 9) a palavra survey é usada com mais frequência para descrever um

método de coleta de informações de uma amostra de indivíduos. Além de amostrar e coletar informações, outros termos

recorrentes nas definições e descrições são sistemáticos ou organizados e quantitativos. Assim, uma pesquisa pode ser vista

como uma estratégia de pesquisa na qual informações quantitativas são sistematicamente coletadas de uma amostra

relativamente grande de uma população. outros termos recorrentes em definições e descrições são sistemáticos ou

organizados e quantitativos. Assim, uma pesquisa pode ser vista como uma estratégia de pesquisa na qual informações

quantitativas são sistematicamente coletadas de uma amostra relativamente grande de uma população. outros termos

recorrentes em definições e descrições são sistemáticos ou organizados e quantitativos. Assim, uma pesquisa pode ser vista

como uma estratégia de pesquisa na qual informações quantitativas são sistematicamente coletadas de uma amostra

relativamente grande de uma população.

A maioria dos livros enfatiza que a metodologia de pesquisa é uma ciência e que existem
critérios científicos para a qualidade da pesquisa. Como resultado, os critérios de qualidade da pesquisa
Pilares da pesquisa de pesquisa 3
têm sido amplamente discutidos. Uma definição muito geral de qualidade é a adequação ao uso. Essa definição foi cunhada por Juran e Gryna em seu livro de 1980 sobre

planejamento e análise de qualidade e tem sido amplamente citada desde então. Como essa definição geral é especificada depende do produto que está sendo avaliado e

do usuário. Por exemplo, a qualidade pode estar focada na construção, na fabricação de móveis resistentes e seguros e em testá-los. Como a Ikea, rede sueca de móveis,

que anunciava em seus catálogos com qualidade de produção e dava exemplos de como um sofá era testado quanto à robustez. Nas estatísticas de pesquisa, o foco

principal tem sido a precisão, a redução do erro quadrático médio ou MSE. Isso é baseado no modelo de Hansen e Hurwitz (Hansen, Hurwitz, & Madow, 1953; Hansen,

Hurwitz, & Bershad, 1961) que diferencia entre erro aleatório e viés sistemático e oferece um conceito de erro total (ver também Kish, 1965), que ainda é a base dos atuais

modelos de erro de pesquisa. O indicador de qualidade estatística é, portanto, o MSE: a soma de todos os erros quadrados das variáveis e todos os erros quadrados

sistemáticos. Uma abordagem mais moderna é a qualidade total, que combina as duas ideias, como Biemer e Lyberg (2003) fazem em seu manual sobre qualidade de

pesquisa. Eles aplicam o conceito de adequação ao uso ao processo de pesquisa, o que leva aos seguintes requisitos de qualidade para dados de pesquisa: precisão

definida pelo erro quadrado médio, pontualidade definida pela disponibilidade no momento em que é necessário e acessibilidade, ou seja, os dados devem estar acessíveis

para aqueles para quem a pesquisa foi realizada. 1965), que ainda é a base dos modelos de erro de pesquisa atuais. O indicador de qualidade estatística é, portanto, o MSE:

a soma de todos os erros quadrados das variáveis e todos os erros quadrados sistemáticos. Uma abordagem mais moderna é a qualidade total, que combina as duas

ideias, como Biemer e Lyberg (2003) fazem em seu manual sobre qualidade de pesquisa. Eles aplicam o conceito de adequação ao uso ao processo de pesquisa, o que leva

aos seguintes requisitos de qualidade para dados de pesquisa: precisão definida pelo erro quadrado médio, pontualidade definida pela disponibilidade no momento em

que é necessário e acessibilidade, ou seja, os dados devem estar acessíveis para aqueles para quem a pesquisa foi realizada. 1965), que ainda é a base dos modelos de erro

de pesquisa atuais. O indicador de qualidade estatística é, portanto, o MSE: a soma de todos os erros quadrados das variáveis e todos os erros quadrados sistemáticos.

Uma abordagem mais moderna é a qualidade total, que combina as duas ideias, como Biemer e Lyberg (2003) fazem em seu manual sobre qualidade de pesquisa. Eles

aplicam o conceito de adequação ao uso ao processo de pesquisa, o que leva aos seguintes requisitos de qualidade para dados de pesquisa: precisão definida pelo erro

quadrado médio, pontualidade definida pela disponibilidade no momento em que é necessário e acessibilidade, ou seja, os dados devem estar acessíveis para aqueles

para quem a pesquisa foi realizada. Uma abordagem mais moderna é a qualidade total, que combina as duas ideias, como Biemer e Lyberg (2003) fazem em seu manual sobre qualidade de pesquisa. E

Existem muitos estágios na elaboração de uma pesquisa e cada uma influencia a


qualidade da pesquisa. Deming (1944) já deu um alerta precoce sobre a complexidade da
tarefa que o elaborador da pesquisa enfrenta, quando listou nada menos que treze fatores
que afetam a utilidade final de uma pesquisa. Entre eles estão os efeitos relativamente bem
compreendidos da variabilidade da amostragem, mas também os efeitos mais difíceis de
medir. Deming incorpora efeitos do entrevistador, método de coleta de dados, não
resposta, imperfeições do questionário, erros de processamento e erros de interpretação.
Outros autores (por exemplo, Kish, 1965, ver também Groves, 1989) basicamente
classifique as ameaças à qualidade da pesquisa em duas categorias principais,por exemplo,
diferenciar entre erros de não observação (por exemplo, não resposta) e de observação
(por exemplo, na coleta e processamento de dados). Biemer e Lyberg (2003) agrupam erros
em erro amostral e erro não amostral. O erro de amostragem ocorre devido à seleção de
uma amostra em vez de estudar toda a população. Erros não amostrais são devidos a erros
e/ou deficiências do sistema e incluem todos os erros que podem ser cometidos durante a
coleta e processamento de dados, como cobertura, não resposta, medição e erro de
codificação (consulte também Lyberg & Biemer, Capítulo 22).
Nos próximos capítulos deste manual, fornecemos ferramentas concretas para
incorporar qualidade ao projetar uma pesquisa. O objetivo deste capítulo é sensibilizar o leitor
para a importância de projetar para a qualidade e apresentar os princípios metodológicos e
estatísticos que desempenham um papel fundamental na elaboração de pesquisas de qualidade
sólidas.
Uma metáfora útil é o projeto e a construção de uma casa. Ao construir uma
casa, prepara-se cuidadosamente o terreno e colocam-se as pedras angulares. Este é
o fundamento sobre o qual toda a estrutura deve repousar. Se essa fundação não for
projetada com cuidado, a casa desabará ou afundará no subsolo inseguro e
pantanoso, como muitos construtores holandeses experimentaram no passado. Da
mesma forma, ao projetar e construir uma pesquisa, deve-se também estabelecer
uma base bem pensada. Nas pesquisas, começa-se com a preparação do subsolo
4 Edith de Leeuw, Joop Hox, Don Dillman

especificando os conceitos a serem medidos. Então esses conceitos claramente


especificados devem ser traduzidos, ou em termos técnicos, operacionalizados em
variáveis mensuráveis. Os metodologistas da pesquisa descrevem esse processo em
termos de evitar ou reduzir erros de especificação. Os cientistas sociais usam o termo
validade de construto: a medida em que um método de medição representa com
precisão o construto pretendido. Esta primeira etapa é conceitual e não estatística; os
conceitos de interesse devem ser definidos e especificados. Sobre essa base,
colocamos os quatro pilares da pesquisa de levantamento: cobertura, amostragem,
resposta e medição (Salant & Dillman, 1994; ver também Groves, 1989).

Figura 1.1. Os pilares da pesquisa de opinião

A Figura 1.1 fornece uma imagem gráfica da metáfora da pedra angular. Somente quando esses
pilares são sólidos, dados de alta qualidade são coletados, que podem ser usados em
processamento e análise posteriores. Neste capítulo, apresentamos ao leitor questões-chave na
pesquisa de levantamento.

1.3. QUEBRANDO O TERRENO: ESPECIFICAÇÃO DA


PESQUISA E DAS PERGUNTAS DA PESQUISA

O primeiro passo no processo de pesquisa é determinar os objetivos da pesquisa. Os


pesquisadores devem concordar com um conjunto bem definido de objetivos de pesquisa.
Estes são então traduzidos em um conjunto de questões-chave de pesquisa. Para cada
pergunta de pesquisa, uma ou mais perguntas de pesquisa são então formuladas,
dependendo do objetivo do estudo. Por exemplo, em um estudo geral da população, uma
ou duas questões gerais sobre bem-estar são suficientes para dar uma indicação global de
bem-estar. Por outro lado, num estudo específico sobre a influência das redes sociais nos
sentimentos de bem-estar dos idosos, é necessário um retrato bem mais detalhado do
bem-estar e uma série de perguntas devem ser feitas, cada pergunta medindo um aspecto
específico da bem-estar. Essas diferentes abordagens são ilustradas nas caixas de texto
indicadas posteriormente.
Pilares da pesquisa de pesquisa 5
Exemplo de pergunta geral de bem-estar (Hox, 1986)

Levando tudo em consideração, quão satisfeito ou insatisfeito você está com a vida em geral?
MUITO INSATISFEITO
INSATISFEITO
NEM INSATISFEITO NEM SATISFEITO
SATISFEITO
MUITO SATISFEITO

Exemplos Perguntas gerais + específicas de bem-estar (Hox, 1986)

Juntando todas as coisas, quão satisfeito ou insatisfeito você está comvida em geral?
MUITO INSATISFEITO
INSATISFEITO
NEM INSATISFEITO NEM SATISFEITO
SATISFEITO
MUITO SATISFEITO

Juntando todas as coisas, quão satisfeito ou insatisfeito você está coma casa em que você
mora?
MUITO INSATISFEITO
INSATISFEITO
NEM INSATISFEITO NEM SATISFEITO
SATISFEITO
MUITO SATISFEITO

Juntando todas as coisas, quão satisfeito ou insatisfeito você está comsua saúde?

Juntando todas as coisas, quão satisfeito ou insatisfeito você está comseus contatos sociais?

Os metodologistas da pesquisa têm dado muita atenção aos problemas de formulação das
perguntas reais que fazem parte do questionário da pesquisa (cf. Fowler & Cosenza, Capítulo 8).
Problemas de redação de perguntas, fluxo de questionários, contexto de perguntas e escolha de
categorias de resposta têm sido o foco de muita atenção. Muito menos atenção tem sido dada ao
esclarecimento dos problemas que ocorremantesa primeira questão da pesquisa é colocada no
papel: o processo que leva da construção teórica ao protótipo do item da pesquisa (cf. Hox, 1997).
Schwarz (1997) observa que os programas de pesquisa em larga escala geralmente envolvem um
grupo grande e heterogêneo de pesquisadores, onde o conjunto de questões finalmente
acordado é o resultado de negociações complexas. Como resultado, os conceitos finalmente
adotados para a pesquisa são muitas vezes definidos vagamente.

Ao pensar sobre o processo que leva de construtos teóricos a perguntas de


pesquisa, é útil distinguir entre conceituação e operacionalização. Antes que as perguntas
possam ser formuladas, os pesquisadores devem decidir quais conceitos desejam medir.
Eles devem definir o que pretendem medir nomeando o conceito, descrevendo suas
propriedades e seu escopo e definindo importantes subdomínios de seu significado. O
processo subsequente de operacionalização envolve a escolha de indicadores empíricos
para cada conceito ou cada subdomínio. Os conceitos teóricos são muitas vezes referidos
como 'construções' para enfatizar que eles são teóricos
6 Edith de Leeuw, Joop Hox, Don Dillman

conceitos que foram inventados ou adotados para um propósito científico específico


(Kerlinger, 1986). A discussão de Fowler e Cosenza (Capítulo 8) sobre a distinção entre
construtos e perguntas de pesquisa segue essa linha de raciocínio.
Para preencher a lacuna entre teoria e medição, duas estratégias de pesquisa distintas
são defendidas: uma estratégia baseada em teoria ou de cima para baixo, que começa com
construções e trabalha em direção a variáveis observáveis e uma estratégia baseada em dados
ou de baixo para cima, que começa com observações e trabalha em direção à teoria. construtos
(cf. Hox & De Jong-Gierveld, 1990). Para exemplos de tais estratégias, nos referimos a Hox (1997).

Quando uma pergunta final da pesquisa feita a um entrevistado falha em


perguntar sobre o que é essencial para a pergunta de pesquisa,temos um erro de
especificação. Em outras palavras, o construto implícito na pergunta da pesquisa
difere do construto pretendido que deve ser medido. Isso também é referido como
uma medida que tem baixa validade de construção. Como resultado, o parâmetro
errado é estimado e o objetivo da pesquisa não é alcançado. Um exemplo claro de
erro de especificação é dado por Biemer e Lyberg (2003, p. 39). O conceito pretendido
a ser medido foi “…o valor de uma parcela de terra se fosse vendida em um mercado
justo hoje.” Uma operacionalização potencial em uma pergunta de pesquisa seria
“Por que preço você venderia este terreno?” Uma inspeção mais detalhada dessa
questão revela que ela pergunta quanto vale subjetivamente a parcela de terra para o
agricultor. Talvez valha tanto para o agricultor que ele/ela nunca o venderia.

Existem várias maneiras pelas quais se pode investigar se ocorrem erros de especificação. Em primeiro lugar, o

esboço do questionário e o questionário de conceito devem sempre ser discutidos minuciosamente pelos pesquisadores e

com o cliente ou usuários da informação, e verificações explícitas devem ser feitas se as perguntas do questionário refletem

os objetivos do estudo. Na próxima etapa, o questionário conceitual deve ser pré-testado com um pequeno grupo de

respondentes reais, usando os chamados métodos de laboratório cognitivo. Estas são técnicas qualitativas para investigar se

e quando ocorrem erros no processo de pergunta-resposta. O primeiro passo no processo de resposta à pergunta é

entender a pergunta. Portanto, a primeira coisa que é investigada em um pré-teste é se os respondentes entendem a

pergunta e as palavras usadas na pergunta como pretendido pelo pesquisador. Normalmente as questões são adaptadas e/

ou reformuladas, com base nos resultados dos pré-testes do questionário. Para obter uma boa descrição dos métodos de

pré-teste, consulte o Capítulo 10 de Campanelli. Sempre que uma questão é reformulada, existe o perigo de alterar seu

significado original (intencionado) e, assim, introduzir um novo erro de especificação. Portanto, tanto os resultados dos pré-

testes quanto o questionário final adaptado devem ser novamente discutidos minuciosamente com o cliente. existe o perigo

de alterar seu significado original (pretendido) e, assim, introduzir um novo erro de especificação. Portanto, tanto os

resultados dos pré-testes quanto o questionário final adaptado devem ser novamente discutidos minuciosamente com o

cliente. existe o perigo de alterar seu significado original (pretendido) e, assim, introduzir um novo erro de especificação.

Portanto, tanto os resultados dos pré-testes quanto o questionário final adaptado devem ser novamente discutidos

minuciosamente com o cliente.

1.4. COLOCANDO AS PEDRAS: COBERTURA,


AMOSTRAGEM, NÃO RESPOSTA E MEDIÇÃO

Conforme observado anteriormente, a especificação da questão de pesquisa e a elaboração de


protótipos de questões de pesquisa são conceituais e não estatísticas; diz respeito ao
Pilares da pesquisa de pesquisa 7
validade de construção da medição. Em outras palavras, a questão mede o que se supõe
medir, ela mede o construto teórico pretendido (Cronbach & Meehl, 1955). Em contraste, as
fontes de erro de coleta de dados resumidas em nossos quatro pilares podem ser avaliadas
estatisticamente examinando o efeito que elas têm sobre a precisão das estimativas. Três
dos quatro pilares referem-se explicitamente ao fato de que as pesquisas geralmente
coletam dados de uma amostra, uma fração da população de interesse.erro de cobertura
ocorre quando alguns membros da população têm probabilidade zero de serem
selecionados na amostra da pesquisa. Por exemplo, a lista de amostra (quadro) pode não
cobrir todos os elementos da população para a qual se deseja generalizar os resultados.
Erro de amostragemocorre porque apenas um subconjunto de todos os elementos
(pessoas) na população é realmente pesquisado. O erro de amostragem é estatisticamente
bem compreendido desde que sejam usadas amostras probabilísticas: em geral, a
quantidade de erro de amostragem é uma função direta do número de unidades incluídas
na amostra final. Para uma discussão clara sobre cobertura e amostragem, consulte Lohr
(Capítulo 6). Erro de não respostaocorre quando algumas das unidades amostradas não
respondem e quando essas unidades diferem daquelas que respondem e de forma
relevante para o estudo. Para uma introdução ao erro de não resposta e erro de não
resposta, consulte Lynn (Capítulo 3). A última pedra angular éerro de medição, que ocorre
quando a resposta de um respondente a uma pergunta é imprecisa, afasta-se do valor
“verdadeiro” (ver também Hox, Capítulo 20).

Uma pesquisa perfeita minimizaria todas as quatro fontes de erros. O erro de cobertura é evitado quando cada

membro da população tem uma chance conhecida e diferente de zero de ser selecionado para a pesquisa. O erro de

amostragem é reduzido simplesmente pela amostragem de unidades selecionadas aleatoriamente o suficiente para atingir

a precisão necessária. O erro de não resposta é evitado se todos responderem ou se os respondentes forem exatamente

como os não respondentes em termos das coisas que estamos tentando medir. O erro de medição pode ser evitado fazendo

perguntas claras; perguntas que os respondentes são capazes e estão dispostos a responder corretamente. Na etapa de

desenho da pesquisa, o objetivo metodológico é prevenir ou pelo menos reduzir possíveis erros; no estágio de análise, o

objetivo estatístico é ajustar a análise para erros de forma que sejam produzidos resultados corretos (ou seja, imparciais e

precisos). A literatura de pesquisa metodológica sugere uma variedade de métodos para reduzir as fontes de erro de

pesquisa; no entanto, deve-se ter em mente que há mais de uma fonte de erro e que é preciso se comprometer e escolher

ao tentar reduzir o erro total da pesquisa. E faça tudo isso dentro de um orçamento viável também; ou como Lyberg e

Biemer colocaram no Capítulo 22: “o desafio no projeto de pesquisa é alcançar um equilíbrio ideal entre erros e custos de

pesquisa”. No restante, discutimos os quatro pilares com mais detalhes e os relacionamos a capítulos específicos deste livro.

faça tudo isso dentro de um orçamento viável também; ou como Lyberg e Biemer colocaram no Capítulo 22: “o desafio no

projeto de pesquisa é alcançar um equilíbrio ideal entre erros e custos de pesquisa”. No restante, discutimos os quatro

pilares com mais detalhes e os relacionamos a capítulos específicos deste livro. faça tudo isso dentro de um orçamento

viável também; ou como Lyberg e Biemer colocaram no Capítulo 22: “o desafio no projeto de pesquisa é alcançar um

equilíbrio ideal entre erros e custos de pesquisa”. No restante, discutimos os quatro pilares com mais detalhes e os

relacionamos a capítulos específicos deste livro.

1.4.1. Cobertura e Erro de Cobertura

Ao fazer uma pesquisa, tem-se uma população-alvo em mente: a população-alvo. Para


extrair uma amostra da população-alvo, é necessário um quadro de amostragem. Pode ser
uma lista de membros da população-alvo, por exemplo, uma lista de todos os membros de
uma determinada organização ou o registro de todos os habitantes de um determinado
8 Edith de Leeuw, Joop Hox, Don Dillman

cidade. Mas também pode ser uma lista virtual ou um algoritmo, como na amostragem de
probabilidade de área ou na amostragem de discagem aleatória de dígitos (RDD) (cf. Lohr,
Capítulo 6 sobre cobertura e amostragem, e Steeh, Capítulo 12 sobre RDD). Na amostragem
probabilística de área, a população é dividida em grupos com base na proximidade geográfica e,
em seguida, áreas específicas são selecionadas. No RDD, números de telefone aleatórios são
gerados usando um algoritmo que está em conformidade com as propriedades dos números de
telefone válidos no país que está sendo investigado. Erros de cobertura de quadro ocorrem
quando há uma incompatibilidade entre o quadro de amostragem e a população-alvo. Em outras
palavras, quando não há correspondência de um para um entre as unidades no quadro e as
unidades na população-alvo.
A forma mais comum de erro de cobertura é a subcobertura, ou seja, nem todas as
unidades da população-alvo estão incluídas no quadro de amostragem. Um exemplo claro
de subcobertura são pessoas com um número de telefone não listado quando o quadro de
amostragem é a lista telefônica. Outra forma de erro de cobertura é a sobrecobertura; aqui
uma unidade da população-alvo aparece mais de uma vez no quadro de amostragem.
Duplicações como essa podem ocorrer quando um quadro de amostragem resulta da
combinação de várias listas. Por exemplo, em uma lista, uma mulher é listada com seu
nome de solteira e em uma segunda lista com seu nome de casada. Se essas listas forem
combinadas, a mesma pessoa será listada em duas entradas diferentes. Outro exemplo são
as pesquisas que usam telefones móveis (celulares); essas pessoas disfarçadas que
possuem mais de um telefone. Um terceiro tipo de erro de cobertura é causado por
inclusões errôneas no quadro. Por exemplo, um número comercial é incluído em uma lista
com números de telefone residencial.
Como exemplo final, considere o caso de pesquisas na web. Uma maneira comum
de atrair entrevistados para uma pesquisa na Web é colocar um link para a pesquisa em
um site popular. Basicamente, isso significa que o pesquisador não tem controle sobre
quem responde ao questionário. O erro de cobertura para pesquisas na web está
relacionado a duas causas diferentes (cf. Ramos, Sevedi, & Sweet, 1998). Primeiro, é o
respondente quem deve fazer contato com o programa de coleta de dados. Em uma
pesquisa na web, isso requer acesso a um computador e à Internet, além de algum grau de
habilidade com o computador. Indivíduos que carecem destes não são cobertos. Além
disso, o software de entrevista em geral não é independente de hardware ou software. As
telas parecem diferentes em diferentes resoluções, ou quando diferentes navegadores são
usados para acessar o site da pesquisa, e algumas combinações de hardware e software
podem tornar o site de pesquisa inacessível para alguns usuários, resultando em erro de
cobertura. Para obter uma visão geral dos diferentes tipos de pesquisas na web e seu
potencial de erros, consulte Lozar Manfreda e Vehovar (Capítulo 14).
A disponibilidade de listas abrangentes ou algoritmos que cobrem a
população varia muito dependendo da população-alvo, mas também do país. Por
exemplo, em países como Dinamarca e Holanda, a agência nacional de estatística tem
acesso ao registro da população (ver também Belém Capítulo 26). Isso permite que a
agência nacional de estatística extraia uma amostra probabilística não apenas da
população em geral, mas também subamostras específicas. Alguns países têm boas
listas de usuários de telefones celulares, enquanto outros não. Em algumas áreas, o
sistema telefônico possui uma estrutura bem definida de bancos de números usados
e não usados, o que possibilita a geração de números de telefone aleatórios com
boas propriedades de cobertura. Na maioria das áreas, o sistema telefônico não
possui essa estrutura ou vários
Pilares da pesquisa de pesquisa 9
sistemas telefônicos estão em uso, o que torna mais difícil a geração de números de
telefone aleatórios (cf. Steeh, Capítulo 12).
As pesquisas na Web são um desafio especial para os metodologistas de pesquisa,
porque o problema de cobertura é grande e difícil de resolver. Não há listas da população que
possam ser usadas para extrair amostras com propriedades conhecidas. Os endereços de e-mail
não têm uma estrutura comum que possa ser usada para gerar endereços aleatórios, semelhante
à forma como os números de telefone aleatórios são gerados no RDD. Finalmente, as amostras
voluntárias frequentemente usadas são amostras de conveniência, para as quais a cobertura não
pode ser determinada (cf. Lozar Manfreda & Vehovar, Capítulo 14).

1.4.2. Amostragem e erro de amostragem

O erro de amostragem ocorre porque apenas uma amostra da população é investigada em


vez de toda a população. A amostragem e o erro de amostragem são tratados por Lohr
(Capítulo 6). Com base nos valores das variáveis noprobabilidadeamostra, o valor para a
população é estimado usando a teoria estatística. Quando a amostragem aleatória simples
é usada, técnicas estatísticas padrão podem ser usadas; no entanto, quando esquemas de
amostragem mais complicados são usados, como amostragem por conglomerados ou
estratificação, as técnicas estatísticas padrão não fornecem dados precisos.p- devem ser
usados valores e intervalos de confiança e técnicas estatísticas mais complicadas. Métodos
para analisar projetos de levantamentos complexos são discutidos por Stapleton no
Capítulo 18.
O erro de amostragem pode ser controlado extraindo amostras grandes o
suficiente para produzir a precisão desejada. A Tabela 1.1 dá uma indicação do número de
respondentes necessários para as porcentagens estimadas com uma precisão especificada
(por exemplo, Devore & Peck, 2005, pp. 377–378).

Tabela 1.1 Precisão: número de respondentes necessário para estimativas de porcentagem dentro
do Intervalo de Confiança (IC) de 95 por cento.
Número de entrevistados Largura de 95% CI
96 ±10%
384 ±5%
1537 ±2,5%
9604 ±1%
Porcentagem base 50%, intervalo de confiança de 95% com base na aproximação normal

O ponto principal da Tabela 1.1 é que uma grande precisão requer amostras muito
grandes. A regra geral é que, para diminuir os erros de amostragem pela metade,
precisamos de uma amostra completa que seja quatro vezes maior.
A questão mais importante sobre a amostragem é que, se nossa amostra fornão
uma amostra probabilística, a inferência estatística não é apropriada. A diferença entre
amostragem probabilística e não probabilística é que a amostragem não probabilística não
nãouse umaleatórioprocedimento de seleção. Isso não significa necessariamente que as
amostras não probabilísticas não sejam representativas da população; no entanto, significa
que as amostras não probabilísticas não podem depender da teoria da probabilidade
estatística. Com uma amostra probabilística, sabemos a probabilidade de representarmos
bem a população e, portanto, podemos estimar intervalos de confiança e testes de
significância. Com uma amostra não probabilística, podemos
10 Edith de Leeuw, Joop Hox, Don Dillman

pode ou não representar bem a população, mas não é apropriado aplicar inferência
estatística para generalizar para uma população geral. Na melhor das hipóteses, podemos
usar a inferência estatística para avaliar a precisão com que podemos generalizar para uma
população composta por quem respondeu. Se isso é representativo para qualquer
população geral está além da inferência estatística.

1.4.3 Erro de resposta e não resposta

A não resposta é a incapacidade de obter dados para todas as unidades amostradas em


todas as questões. Existem dois tipos de não resposta em pesquisas:não resposta da
unidadeeitem sem resposta. A não resposta da unidade é a falha em obter qualquer
informação de uma unidade de amostra elegível. A não resposta da unidade pode ser o
resultado de não contato ou recusa. Lynn (Capítulo 3) oferece uma ampla visão geral sobre
erros de não resposta e de não resposta; para uma discussão sobre erro de não resposta
em estudos transculturais, ver Couper e de Leeuw (2003); para ajuste estatístico e
ponderação, ver Biemer e Christ (Capítulo 16). A não resposta ao item ou dados ausentes
do item referem-se à falha em obter informações para uma ou mais perguntas em uma
pesquisa, dado que as outras perguntas foram respondidas. Para obter uma introdução,
consulte de Leeuw, Hox e Huisman (2003), para abordagens estatísticas para lidar com
dados ausentes, consulte o Capítulo 18 de Rässler, Rubin e Schenker.
O erro de não resposta é uma função da taxa de resposta e das diferenças entre
respondentes e não respondentes. Se a não resposta for o resultado de um processo
puramente aleatório, em outras palavras, se a não resposta for completamente aleatória,
então não há nenhum problema real. Obviamente, a amostra realizada é menor,
resultando em intervalos de confiança maiores em torno dos estimadores. Mas as
conclusões não serão tendenciosas devido à falta de resposta. Somente quando
respondentes e não respondentes diferem uns dos outros nas variáveis de interesse do
estudo, haverá um sério problema de não resposta. A não resposta é entãoseletivonão
resposta e certos grupos podem estar sub-representados. No pior caso, existe uma
associação substancial entre a não resposta e uma variável importante do estudo,
causando resultados enviesados. Um exemplo clássico vem dos estudos de mobilidade:
pessoas que viajam muito são mais difíceis de contatar para uma entrevista sobre
mobilidade do que pessoas que viajam raramente. Assim, a não resposta seletiva causada
por não contatos específicos leva a uma subestimação da mobilidade. Para obter mais
exemplos, consulte Lynn (Capítulo 3).
Duas abordagens principais são usadas para lidar com a não resposta:
reduzindoe ajustando. A redução da não resposta aplica estratégias que, em
geral, reduzem o número de não contatos e recusas. As causas do não contato
dependem do desenho específico do levantamento. Por exemplo, em pesquisas
face a face, o não contato pode ser o resultado da incapacidade do entrevistador
de alcançar o respondente dentro do número permitido de tentativas de
contato. Aumentar o número de tentativas de contacto não só aumenta o
número de contactos e consequentemente a taxa de resposta, mas também os
custos. Variar os dias e horários de tentativas de contato também aumenta a
taxa de resposta, sem afetar tanto o custo. Em pesquisas por correio e pela
Internet, os não contatos podem ser o resultado de correspondências não
entregues devido a erros na lista de endereços. As ferramentas para reduzir as
recusas também dependem do modo de coleta de dados utilizado. Por exemplo,
Pilares da pesquisa de pesquisa 11
incentivos ou contatos especiais para neutralizar recusas explícitas. Para obter mais detalhes,
consulte Lynn (Capítulo 3).
O ajuste de não resposta refere-se a ajustes estatísticos que são aplicados depois
que os dados são coletados. Se a diferença entre os respondentes e os não respondentes
for conhecida, por exemplo, porque podemos comparar certas características dos
respondentes com valores populacionais conhecidos, a ponderação estatística pode ser
usada para fazer com que a amostra se pareça com a população com relação a essas
características. O problema com o ajuste estatístico é que geralmente apenas atributos
simples do respondente, como idade, sexo e educação, podem ser usados para pesar a
amostra. Isso melhora a representatividade da amostra em relação às variáveis de
interesse substantivo central apenas se essas variáveis estiverem relacionadas aos
atributos usados no esquema de ponderação. Biemer e Christ discutem a ponderação
para dados de pesquisa em detalhes no Capítulo 17.
Finalmente, os números de não resposta devem ser claramente relatados nas
pesquisas. Isso geralmente assume a forma de um valor de taxa de resposta. Ao relatar as
taxas de resposta, é importante indicar como a taxa de resposta foi calculada. Para obter
detalhes sobre o cálculo da taxa de resposta e uma descrição das fontes de não resposta,
consulte o folheto sobre definições padrão da Associação Americana para Pesquisa de
Opinião Pública (AAPOR). Uma versão regularmente atualizada e uma calculadora de taxa
de resposta online podem ser encontradas no site da AAPOR (www.aapor.org).

1.4.4 Medição e Erro de Medição

O erro de medição também é chamado de erro de observação. Os erros de medição estão


associados ao próprio processo de coleta de dados. Existem três fontes principais de erro
de medição: o questionário, o respondente e o método de coleta de dados. Quando
entrevistadores são usados para coleta de dados, o entrevistador é uma quarta fonte de
erro.
Um questionário bem elaborado e bem testado é a base para reduzir o erro
de medição. As perguntas do questionário devem ser claras e todos os respondentes
devem ser capazes de compreender os termos usados da mesma forma. Com
perguntas fechadas, as categorias de resposta devem ser bem definidas e exaustivas.
Quando uma pergunta não é clara, ou quando as categorias de resposta não são
claramente definidas, os respondentes cometerão erros ao responder à pergunta ou
não saberão o que responder. Quando os dados são coletados por meio de
entrevistas, os entrevistadores tentarão ajudar, mas, ao fazer isso, também podem
cometer erros e introduzir erros adicionais do entrevistador (Fowler, 1995). Portanto,
melhorar oquestionárioé um bom começo para melhorar a qualidade total da
pesquisa. Para uma boa introdução à elaboração e redação de perguntas eficazes,
consulte Fowler e Cosenza (Capítulo 8). Deve-se enfatizar que mesmo questionários
cuidadosamente elaborados podem conter erros e que um questionário deve sempre
ser avaliado e pré-testado antes de ser usado em uma pesquisa. No Capítulo 10,
Campanelli fornece ao leitor informações sobre os diferentes métodos para testar
questões de pesquisa e fornece orientações práticas sobre a implementação de cada
um dos métodos.
Respondentespodem ser uma fonte de erro por si só quando fornecem
informações incorretas. Isso pode não ser intencional, por exemplo, quando um
respondente não entende a pergunta ou quando um respondente tem dificuldade
12 Edith de Leeuw, Joop Hox, Don Dillman

lembrando de um evento. Mas um entrevistado também pode fornecer informações


incorretas de propósito, por exemplo, quando perguntas delicadas são feitas (ver também
Lensvelt-Mulders, Capítulo 23). Os erros de medição que se originam do respondente estão
além do controle do pesquisador. Um pesquisador só pode tentar minimizar os erros do
entrevistado tornando a tarefa do entrevistado o mais fácil e agradável possível. Em outras
palavras, escrevendo perguntas claras que os entrevistados estão dispostos a responder.
No Capítulo 2, Schwarz, Knäuper, Oyserman e Stich descrevem como os entrevistados
chegam a uma resposta e revisam os processos cognitivos e comunicativos subjacentes às
respostas da pesquisa.
Ométodo de coleta de dadospode ser uma terceira fonte de erro de medição. No
Capítulo 7 deste livro, de Leeuw descreve as vantagens e desvantagens das principais
técnicas de coleta de dados. Uma das principais diferenças entre os modos de pesquisa é a
maneira como certas perguntas podem ser feitas. Por exemplo, em uma entrevista por
telefone, os entrevistados precisam confiar apenas em pistas auditivas: eles apenas ouvem
a pergunta e as categorias de resposta. Isso pode causar problemas quando uma longa
lista de possíveis respostas deve ser apresentada. Dillman, no Capítulo 9 sobre a lógica e a
psicologia do desenho do questionário, descreve as diferenças de modo no desenho do
questionário e propõe um desenho unificado ou unimodal para superar as diferenças entre
os modos. Isso é de grande importância quando projetos de modo misto são usados, seja
em uma pesquisa ou em estudos longitudinais (por exemplo, pesquisas de painel, ver
também o Capítulo 25 de Sikkel & Hoogendoorn), ou entre pesquisas, como pode ser o
caso em estudos transnacionais e comparativos nos quais um modo (por exemplo,
telefone) é usado em um país e outro modo (por exemplo, presencial -entrevistas
presenciais) é usado em outro. Para questões importantes na pesquisa comparativa, veja
Harkness (Capítulo 4); para mais detalhes sobre os desafios dos levantamentos de modo
misto, consulte De Leeuw, Dillman e Hox (Capítulo 16).
Uma segunda grande diferença entre os modos é a presença versus a
ausência de um entrevistador. Pode haver boas razões para escolher um método sem
entrevistadores e deixar o locus de controle com os entrevistados, como garantir
mais privacidade e mais tempo para refletir para os entrevistados. Os questionários
autoaplicáveis em geral são descritos por De Leeuw e Hox no Capítulo 13; as
inovações tecnológicas são descritas por Lozar Manfreda e Vehovar no Capítulo 14
sobre Pesquisas na Internet e por Miller Steiger e Conroy no Capítulo 15 sobre
Resposta de Voz Interativa. Por outro lado, o uso de entrevistadores também tem
muitos pontos positivos, principalmente quando se utilizam questionários muito
complexos ou quando tarefas especiais devem ser executadas. Como Loosveldt
afirma no Capítulo 11: “…a tarefa do entrevistador é mais abrangente e complexa do
que simplesmente fazer perguntas e registrar a resposta do entrevistado. Os
entrevistadores implementam o procedimento de contato, convencem os
entrevistados a participar, esclarecem o papel do entrevistado durante a entrevista e
coletam informações sobre o entrevistado.”
No entanto, quando um entrevistador está presente, o entrevistador também pode ser
uma fonte de erro. Os entrevistadores podem interpretar mal uma pergunta, podem cometer
erros ao administrar um questionário ou ao registrar as respostas. Ao fazer a pergunta, os
entrevistadores podem involuntariamente mudar seu significado. Ao fornecer informações
adicionais ou explicar uma palavra mal compreendida, eles podem influenciar inadequadamente
um entrevistado. Mesmo a maneira como os entrevistadores se parecem e se vestem pode
influenciar um entrevistado em uma entrevista face a face. Selecionando e
Pilares da pesquisa de pesquisa 13
o treinamento cuidadoso dos entrevistadores ajuda a reduzir os erros relacionados ao
entrevistador. Para obter mais detalhes, consulte o Capítulo 23 sobre treinamento de
entrevistadores, de Lessler, Eyerman e Wang. Os entrevistadores podem cometer erros genuínos,
mas também podem trapacear intencionalmente. Os entrevistadores são conhecidos por falsificar
dados ou pular perguntas para encurtar entrevistas tediosas. O monitoramento dos
entrevistadores ajuda a reduzir isso. Ter um controlador de qualidade ouvindo os entrevistadores
por telefone é um método amplamente utilizado. Nas entrevistas presenciais, as gravações
podem ser feitas e as fitas selecionadas podem ser verificadas posteriormente. Contatos especiais
de verificação ou reentrevistas podem ser usados para avaliar o desempenho do entrevistador
em pesquisas face a face em larga escala (cf. Lyberg & Biemer, Capítulo 22; Japec, 2005, p. 24).

1.5 DA COLETA DE DADOS À ANÁLISE:


COMO A FUNDAÇÃO AFETA A ESTRUTURA

Existem várias maneiras pelas quais o design de uma pesquisa e o procedimento preciso
de coleta de dados afetam o estágio subsequente de análise de dados. Estes também
envolvem os quatro pilares. A influência mais direta é o próprioamostragem procedimento
que é utilizado. Conforme mencionado anteriormente, os procedimentos estatísticos
padrão assumem que os dados são uma amostra aleatória simples da população. Na
maioria das pesquisas, outros esquemas de amostragem são usados porque são mais
eficientes ou menos dispendiosos, por exemplo, amostragem por conglomerados ou
estratificação. Quando esses esquemas de amostragem são usados, a análise deve
empregar métodos estatísticos especiais (ver também Stapleton, Capítulo 17). Da mesma
forma, quando a ponderação (cf. Biemer & Christ, Capítulo 16) é usada para compensar
diferentes probabilidades de inclusão, seja por projeto ou por causa de problemas de não
resposta, métodos estatísticos especiais devem ser usados. Os pacotes estatísticos padrão
podem ou não incluir esses métodos. Por exemplo, o pacote SPSS (versão 15 e superior)
pode analisar dados de pesquisa complexos com pesos e esquemas de amostragem
complicados, mas inclui apenas análises estatísticas selecionadas para tais dados. Os
outros procedimentos no SPSS podem incluir ponderação, mas não corrigem os erros
padrão para os efeitos da ponderação, o que produz testes estatísticos incorretos.
Uma maneira menos óbvia pela qual o desenho da pesquisa afeta a análise dos
dados reside no ajuste para a combinação de erro de cobertura e não resposta. Isso pode
resultar em dados que não são representativos para a população, e o método de ajuste
usado com mais frequência é a ponderação das características do respondente para as
quais os valores da população são conhecidos. Para mais detalhes, veja Biemer e Cristo
(Capítulo 16). Duas questões são importantes aqui. Primeiro, o ajuste estatístico visa
produzir estimativas imparciais de parâmetros populacionais quando as probabilidades de
seleção não são iguais; no entanto, nenhuma quantidade de inteligência estatística
restaura as informações que deixamos de coletar. Portanto, a prevenção reduzindo o
problema na fase de coleta de dados é importante. Segundo, a qualidade do ajuste
depende fortemente da quantidade e qualidade da informação de base que temos
disponível para construir os pesos. A coleta dessas informações requer um planejamento
cuidadoso na fase de projeto. Devem ser incluídas variáveis auxiliares para as quais os
valores populacionais sejam conhecidos, por exemplo, para uma amostra da população
geral por meio da agência nacional de estatística, ou para amostras de uma população
especial por meio de um registro existente. Porque o uso de
14 Edith de Leeuw, Joop Hox, Don Dillman

registros é regulado por questões de privacidade, neste último caso pode ser
necessário obter permissão prévia. Para saber mais sobre privacidade e ética em
pesquisa de opinião, consulte Singer (Capítulo 5). Finalmente, para poder usar a
informação, é crucial que o procedimento de coleta de dados use as mesmas palavras
e categorias de resposta que foram usadas para coletar os dados populacionais
conhecidos (cf. Dillman, Capítulo 9). De preferência, o mesmo método de coleta de
dados deve ser usado, para evitar confusão de erros de seleção e medição.
Um caso especial de não resposta é a falha em obter informações sobre algumas
das perguntas, o que leva a dados incompletos para alguns dos entrevistados. Assim como
é o caso da não-resposta da unidade discutida anteriormente, a prevenção e a coleta de
informações auxiliares também são importantes com dados ausentes de itens (ver também
de Leeuw, Hox e Huisman, 2003). O próximo passo é o ajuste estatístico. No Capítulo 19,
Rässler, Rubin e Schenker discutem conceitos relativos aos mecanismos que criam dados
ausentes, bem como quatro abordagens comumente usadas para lidar com dados
ausentes (de itens).
Erros de medição, ou seja, discrepâncias entre a medição e o valor real,
influenciam a análise de maneiras mais sutis. Mais uma vez, a prevenção é o melhor
remédio. Os erros de medição têm origem na redação da pergunta e no questionário,
no método de pesquisa e no entrevistador, nos respondentes e nas interações
complexas entre eles. Muitas decisões na fase de projeto do levantamento têm o
potencial de afetar o erro de medição (cf. Biemer & Lyberg, Capítulo 22). A prevenção
baseia-se na aplicação das melhores práticas conhecidas na elaboração de inquéritos;
isso pressupõe que eles estejam bem documentados (cf. Mohler, Pennel e Frost,
Capítulo 21). Outro passo importante para reduzir o erro de medição tanto quanto
possível é o pré-teste completo do instrumento de pesquisa antes de ser realmente
usado (cf. Campanelli, Capítulo 10). Na fase de análise, alguns ajustes para o efeito de
erros de medição podem ser feitos; Hox discute isso no Capítulo 19. Ajustes para
erros de medição podem ser feitos quando escalas de vários itens são usadas ou se
informações auxiliares estiverem disponíveis sobre a quantidade de erro de medição
em variáveis específicas. Novamente, para poder ajustar na fase de análise, o design
da pesquisa deve garantir que as informações necessárias estejam disponíveis.

1.6 PODEMOS PAGAR ISSO: BALANCEANDO AS CARACTERÍSTICAS DO DESIGN


E QUALIDADE DA PESQUISA

Anteriormente, discutimos os fundamentos da pesquisa de levantamento: abrir caminho


(especificação) e colocar os quatro pilares (cobertura, amostragem, não resposta e
medição). Os mesmos critérios fundamentais de qualidade são discutidos nos manuais de
qualidade. Por exemplo, na publicação do Eurostat de 2000 sobre a avaliação da qualidade
nas estatísticas, o primeiro critério de qualidade é a relevância do conceito estatístico. Um
produto estatístico é relevante se atender às necessidades do usuário. Isso implica que as
necessidades do usuário devem ser estabelecidas no início. O conceito de relevância está
intimamente relacionado ao problema de especificação e à validade de construto da
mensuração. Traduzimos corretamente a pergunta de pesquisa substantiva em uma
pergunta de pesquisa? Caso contrário, cometemos um erro de especificação e o produto
estatístico não atende às necessidades dos usuários.
Pilares da pesquisa de pesquisa 15
menção estatísticaprecisãoda estimativa como critério de qualidade. A precisão depende de
todos os quatro pilares e é discutida detalhadamente no início deste capítulo. Mas também
existem critérios adicionais de qualidade. Biemer e Lyberg (2003) destacam a importância
da pontualidade definida como disponível no momento em que é necessária, e da
acessibilidade, ou seja, os dados devem estar acessíveis àqueles para quem a pesquisa foi
realizada. O Eurostat (2000) distingue sete dimensões distintas da qualidade estatística,
acrescentando a comparabilidade, o que significa que deve ser possível fazer comparações
fiáveis no tempo e no espaço. A comparabilidade é extremamente importante em estudos
transculturais e transnacionais (ver também Harkness, Capítulo 4). Para uma discussão
sobre qualidade e procedimentos para garantia e controle de qualidade, consulte Lyberg e
Biemer (Capítulo 22).
Tanto os conceitos de qualidade de Biemer e Lyberg (2003) quanto as dimensões de
Eurostat (2000) vão além da fundação e pilares descritos anteriormente neste capítulo e são
relevantes para a qualidade de todo o processo de pesquisa e os dados que ele produz. Seus
critérios foram desenvolvidos principalmente para uso em organizações de pesquisa de grande
escala e escritórios estatísticos governamentais, mas a qualidade e garantia de qualidade da
pesquisa é uma questão que também se aplica a pesquisas de menor escala, onde o pesquisador
da pesquisa também é o usuário da pesquisa. Não importa se é uma pesquisa de pequena ou
grande escala, se a pesquisa está usando papel e lápis ou alta tecnologia, a qualidade pode e deve
ser construída em todas as pesquisas. Para procedimentos de avaliação de qualidade, consulte
Lyberg e Biemer (Capítulo 22).
Voltando à metáfora da construção de uma casa: existem muitas maneiras
diferentes de construir uma casa boa e de qualidade. Mas também há uma grande
variedade de tipos de casas, desde uma simples casa de veraneio até uma luxuosa vila, de
uma casa flutuante a uma monumental casa do século XVII em um canal, de uma fazenda a
um palácio dos sonhos. O que é uma boa casa depende das necessidades do morador, o
que é uma boa vistoria depende do usuário da vistoria (cf. Dippo, 1997). Os objetivos da
pesquisa determinam a população em estudo e os tipos de perguntas que devem ser feitas.
Normas de privacidade e ética podem restringir o design; outras restrições práticas podem
ser causadas pelo tempo e fundos disponíveis. Os países e as organizações de pesquisa
podem diferir quanto aos recursos disponíveis, como mão de obra qualificada, capacidades
administrativas, experiência com determinados procedimentos ou métodos, hardware e
software de computador. É claro que os metodologistas da pesquisa devem equilibrar os
custos da pesquisa e os recursos disponíveis em relação aos erros da pesquisa, e que
qualquer pesquisa real será o resultado de compromissos metodológicos. As pesquisas são
um empreendimento complexo e muitos aspectos devem ser considerados quando o
objetivo é maximizar a qualidade dos dados com os recursos disponíveis e dentro de um
orçamento razoável de tempo e custos.
Finalmente, as pesquisas são realizadas em um contexto cultural específico, o
que também pode afetar a forma como esses aspectos influenciam a qualidade da
pesquisa. Os metodologistas da pesquisa precisam levar isso em consideração ao
projetar uma pesquisa. Por exemplo, quando uma pesquisa por telefone (ou Internet)
é contemplada para um estudo internacional, é importante entender como os
telefones e a Internet são vistos nas diferentes culturas incluídas na pesquisa. É um
dispositivo pessoal, como telefones celulares? É um aparelho doméstico, como são os
telefones fixos? Ou é um dispositivo comunitário, com um telefone (móvel) ou ligação
à Internet partilhada por toda uma aldeia? O design da pesquisa significa que os
custos e a qualidade devem ser otimizados e, em um mundo global, isso
16 Edith de Leeuw, Joop Hox, Don Dillman

significa que devem ser otimizados dentro dos limites dos recursos e
diferenças culturais e tecnológicas.

1.7 CONTEÚDO DESTE LIVRO

O objetivo deste livro é apresentar aos leitores as questões centrais que são
importantes para a qualidade da pesquisa, discutir as decisões que devem ser
tomadas ao projetar e realizar uma pesquisa e apresentar o conhecimento
metodológico e estatístico atual sobre as consequências da essas decisões para a
qualidade dos dados da pesquisa.
A primeira parte do livro,Fundações, é uma introdução ampla na
metodologia de pesquisa. Além desta introdução, contém capítulos sobre a
psicologia de fazer perguntas, o problema da falta de resposta, questões e
desafios em pesquisas internacionais e questões éticas em pesquisas.
A segunda seção,Projeto, apresenta uma série de questões que são vitais na
elaboração de uma pesquisa de qualidade. Inclui capítulos sobre cobertura e amostragem,
escolha do método de coleta de dados, redação de perguntas eficazes, construção do
questionário e teste de perguntas de pesquisa.
A terceira seção principal,Implementação, discute os detalhes de uma série de
procedimentos para realizar uma pesquisa. Há capítulos sobre entrevistas face a face,
entrevistas por telefone, questionários autoaplicáveis, pesquisas na Internet e pesquisas de
Resposta de Voz Interativa. Finalmente, há um capítulo sobre os desafios que surgem
quando diferentes modos de coleta de dados são misturados em uma pesquisa.

A quarta seção,Análise de dados, discute uma série de assuntos estatísticos


que são especialmente importantes na análise de dados de pesquisa. Isso inclui
capítulos sobre a construção de pesos de ajuste, análise de dados de pesquisas
complexas, como lidar com dados incompletos (não resposta do item) e acomodação
de erros de medição. A seção final,Edições especiais, contém vários tópicos de
interesse especial para pesquisas de qualidade. Inclui capítulos sobre documentação
de pesquisa, garantia e controle de qualidade, treinamento de entrevistadores, coleta
de dados sobre tópicos delicados e pesquisas de painel, incluindo painéis de acesso.
O capítulo final introduz a coleta de dados do tipo pesquisa sem fazer perguntas aos
entrevistados, combinando e integrando as informações existentes.

GLOSSÁRIO DE CONCEITOS CHAVE

Validade do construto. A medida em que um instrumento de medição mede o


construto pretendido e produz uma observação distinta daquela produzida por uma
medida de um construto diferente.
erro de cobertura. Erros de cobertura ocorrem quando a definição operacional
da população inclui uma omissão, duplicação ou inclusão indevida de um
elemento na população. Omissões levam a subcobertura, e duplicações e
inclusões indevidas levam a supercobertura.
Erro de medição. A medida em que há discrepâncias entre uma
medição e o valor real, que o instrumento de medição é projetado para
Pilares da pesquisa de pesquisa 17
medir. O erro de medição refere-se tanto à variância quanto ao viés, onde a
variância é a variação aleatória de uma medição e o viés é o erro sistemático.
Existem várias fontes potenciais; por exemplo, o erro de medição pode surgir do
respondente, questionário, modo de coleta de dados, entrevistador e interações
entre eles.
Erro de não resposta. A não resposta é a falha em coletar informações dos entrevistados
da amostra. Existem dois tipos de não resposta: não resposta de unidade e não resposta de
item. A não resposta da unidade ocorre quando a pesquisa falha em obter quaisquer dados
de uma unidade na amostra selecionada. A não resposta ao item (dados incompletos)
ocorre quando a unidade participa, mas faltam dados sobre itens específicos. A não
resposta leva ao erro de não resposta se os respondentes diferirem dos não respondentes
nas variáveis de interesse.
Erro de amostragem. Erro na estimativa devido à coleta de uma amostra em vez de medir cada
unidade no quadro de amostragem. Se a amostragem probabilística for usada, a quantidade de
erro de amostragem pode ser estimada a partir da amostra.
erro de especificação. O erro de especificação ocorre quando o conceito medido por uma
pergunta de pesquisa e o conceito que deve ser medido com essa pergunta diferem.
Quando isso ocorre, há baixa validade de construto.
Capítulo 13

Questionários Auto-Aplicáveis;
Pesquisas por correio e outras aplicações

Edith D. de Leeuw
Joop J. Hox
Departamento de Metodologia e Estatística, Universidade de Utrecht

13.1 INTRODUÇÃO

A essência das pesquisas auto-administradas é que não há um entrevistador para


administrar a pesquisa, fazer as perguntas e registrar as respostas. O respondente
administra o questionário, lê as perguntas e registra as respostas e não há entrevistador
para auxiliar ou explicar. O processo de perguntas e respostas (ver Schwarz et al., Capítulo
2) é totalmente autoadministrado. Os questionários autoaplicáveis podem ser usados
individualmente (como uma pesquisa por correio) ou em grupo (por exemplo, pesquisas
com alunos em salas de aula). Equivalentes assistidos por computador estão disponíveis
para diferentes tipos de questionários autoadministrados. Por exemplo, na pesquisa
educacional, os computadores da escola e os laboratórios de informática podem ser
usados para administrar questionários e testes, enquanto nas pesquisas de
estabelecimentos os aplicativos da web estão se tornando populares. Às vezes, para
pesquisas de tópicos especiais, um laptop é levado aos entrevistados e o entrevistado
responde às perguntas usando esse laptop sem qualquer interferência do entrevistador.
Este formulário é chamado CASI ou auto-entrevista assistida por computador. Finalmente,
pesquisas na Internet para pesquisas populacionais e pesquisas em painel da web são o
desenvolvimento mais recente. Para uma introdução e visão geral, consulte de Leeuw, Hox,
& Kef, 2003; de Leeuw, (2006), o site deste livro Capítulo 13.
Pesquisas postais ou de papel e pesquisas pela Internet são as duas melhores
formas conhecidas de questionários autoaplicáveis, especialmente em ciências sociais
e em pesquisas de opinião. Nestes inquéritos não existe contacto pessoal com o
inquirido, devendo toda a informação (por exemplo, instruções, explicações, o
próprio questionário) ser transmitida em papel ou através de uma interface
informática. Existem também formas de questionários autoaplicáveis, nas quais um
intermediário ou representante do pesquisador entra em contato com o respondente
e apresenta o questionário, mas o próprio processo de perguntas e respostas é
totalmente autoaplicável. Exemplos são questionários de entrega, onde um
enumerador distribui questionários para famílias ou pessoas específicas, mas os
respondentes completam o questionário por conta própria e Resposta de Voz
Interativa, onde um entrevistador por telefone apresenta a técnica e depois muda
para um computador (ver também Miller Steiger & Conroy, Capítulo 15). Finalmente,
existem formas híbridas em que um intermediário introduz o questionário, dá

239
240 Edith de Leeuw, Joop Hox

instruções adicionais e fornece ajuda quando necessário. Embora nessas formas


híbridas o processo de pergunta-resposta seja, em princípio, auto-administrado, o
intermediário do pesquisador pode fornecer ajuda quando surgem problemas. Um
bom exemplo é a auto-entrevista assistida por computador, na qual um laptop é
levado ao entrevistado e um entrevistador treinado dá instruções e ajuda quando
necessário. Outros exemplos são pesquisas educacionais em sala de aula ou
questionários autoadministrados (assistidos por computador) adaptados a grupos
especiais que podem precisar de assistência extra (de Leeuw, Hox e Kef, 2003).
Além da ausência (ou presença muito limitada) de um entrevistador, há outra
diferença importante entre questionários autoaplicáveis e entrevistas estruturadas.
Em um questionário autoaplicável, seja um teste psicológico, uma pesquisa postal ou
um questionário na web, o respondentevêas perguntas com as categorias de
respostas associadas, mas em entrevistas estruturadas os entrevistados geralmente
não, embora material de exibição, como cartões flash com categorias de respostas,
possa ser usado ocasionalmente. Como consequência, a apresentação visual das
questões e o layout geral do questionário são muito mais importantes em
questionários autoaplicáveis, tanto no papel quanto na tela do computador (ver
também de Leeuw, Capítulo 7 e Dillman, Capítulo 9).
Este capítulo discute brevemente os efeitos da ausência do entrevistador e da
apresentação visual de um questionário sobre os dados. Em seguida, apresentamos cinco
tipos principais de questionários autoadministrados: (a) pesquisa por correio, (b) pesquisas
e painéis pela Internet, (c) resposta interativa por voz, (d) questionário autoadministrado
introduzido pelo entrevistador e (e) administração em grupo. A maior parte deste capítulo é
dedicada a pesquisas de correio da população em geral, porque esta aplicação demonstra
todas as questões importantes. As pesquisas na Web e a resposta de voz interativa também
são métodos autoadministrados, mas precisam lidar com uma série de questões e desafios
específicos e, portanto, são discutidos brevemente neste capítulo e com mais detalhes por
Lozar Manfreda e Vehovar (Capítulo 14 ) e Miller Steiger e Conroy (Capítulo 15). Os
questionários autoadministrados mediados pelo entrevistador são discutidos apenas nos
pontos que diferem dos questionários autoadministrados gerais, conforme discutido nas
pesquisas por correio. Embora os questionários autoaplicáveis em grupo sejam menos
conhecidos em pesquisas gerais, eles são uma ferramenta importante em pesquisas
educacionais e têm alguns problemas especiais associados a eles, que discutimos aqui.

13.2 EFEITOS DA AUSÊNCIA DOS ENTREVISTADORES

13.2.1 Taxa de Resposta

Quando os entrevistados são abordados com uma solicitação para participar de uma
pesquisa, os entrevistadores podem convencer os entrevistados relutantes, motivá-los e
fornecer informações adicionais sobre a pesquisa. Como resultado, as taxas de resposta
em entrevistas face a face e por telefone são geralmente mais altas do que em pesquisas
autoadministradas (Groves & Couper, 1998; de Leeuw, Capítulo 7, seção 5). Embora os
entrevistadores difiram em sua taxa de sucesso individual, todos os entrevistadores podem
ser treinados para fazer um bom trabalho em convencer os entrevistados a cooperar, tanto
para pesquisas face a face (National Center for Social Research, 1999; Snijkers, Hox, & de
Questionários Auto-Aplicáveis 241
Leeuw, 1999) e para entrevistas por telefone (Groves & McGonagle, 2001); para uma
visão geral, veja Lessler, Eyerman & Wang (Capítulo 23).
Alcançar uma alta taxa de resposta em pesquisas auto-administradas requer
esforços especiais na fase de contato da pesquisa. O que precisa ser feito difere de
acordo com o tipo específico de pesquisa realizada. Por exemplo, em pesquisas por
correio, um questionário atraente e uma carta de apresentação em combinação com
lembretes oportunos são necessários (Dillman, 1978, 2007). As pesquisas na Internet
precisam de um convite bem escrito, em combinação com lembretes cronometrados
e um bom layout e interface da web (Dillman, 2007, ver também Lozar Manfreda &
Vehovar, Capítulo 14). Em questionários de desistência e outros tipos de
questionários autoadministrados mediados pelo entrevistador, o treinamento
especial em conversão de não-resposta ajuda o mediador a persuadir respondentes
relutantes (ver também Lessler et al., Capítulo 23). Finalmente, em todos os tipos de
pesquisas, cartas antecipadas ou pré-notificações têm uma influência positiva na
resposta (de Leeuw, Callegaro, Hox,

13.2.2. Qualidade de Dados

Nos estudos de entrevista, os entrevistadores podem fornecer instruções ou explicações


quando necessário durante a coleta de dados. Quando são exigidas respostas de membros
específicos da família, os entrevistadores podem controlar quem preenche o questionário.
Mas a presença do entrevistador também pode influenciar as respostas e causar efeitos
indesejados no entrevistador, especialmente quando questões delicadas estão sendo
discutidas. Em outras palavras, a presença de um entrevistador é ao mesmo tempo um
ativo e um passivo, e é importante que os entrevistadores sejam bem treinados (cf.
Loosveldt, Capítulo 11; Lessler, Eyerman & Wang, Capítulo 23).
Em contraste, em questionários autoaplicáveis,todas as informaçõessobre
o estudo e o questionário devem ser acompanhados do próprio questionário e da carta de
apresentação ou instruções que o acompanham. Isso inclui as categorias de perguntas e
respostas, mas tambémMeta informação: explicações sobre o objetivo e conteúdo do
estudo e instruções sobre como responder a perguntas específicas. Em pesquisas na Web e
outras formas de auto-entrevista assistida por computador, a metainformação também
inclui as informações disponíveis no sistema de ajuda. Em alguns casos (como painéis de
Internet), instruções explícitas podem ser adicionadas solicitando que uma pessoa
específica da casa responda.
Além disso, hápara-informação, que é toda a informação implícita
no questionário por layout e design visual, independente da informação
textual. Em questionários auto-administrados, a linguagem gráfica pode
assumir o papel da comunicação não-verbal e paralinguística, tão
importante para transmitir significado nas entrevistas (ver também Redline
& Dillman, 2002; de Leeuw, Capítulo 7). Por exemplo, um ponto de
interrogação dá a mesma informação em forma gráfica que o tom de voz
mais alto do entrevistador comunica paralinguisticamente. O uso de fontes
diferentes transmite graficamente que uma palavra específica é importante,
enquanto os entrevistadores usam a voz para enfatizar termos importantes
de forma paralinguística. O design visual é mais do que linguagem gráfica;
também diz respeito, entre outros, ao arranjo espacial do texto e categorias
de resposta, fundo, especialmente contrastes figura/fundo, e uso de cores.
242 Edith de Leeuw, Joop Hox

um questionário e focar em informações relevantes, resultando em menos erros.


Para uma introdução ao design visual e questionários, veja Dillman, Gersteva, &
Mahon-Haft, 2005).
Para melhorar a qualidade dos dados, o pré-teste é necessário em todos os modos de
pesquisa, mas o pré-teste é extremamente importante para questionários autoadministrados,
porque nenhum entrevistador está presente para corrigir erros ou problemas no questionário.
Muito depende da compreensão correta do enunciado das perguntas e o pré-teste delas é parte
integrante da construção do questionário profissional. Apenas pré-testar as perguntas não é
suficiente. Um questionário autoaplicável é mais do que uma coleção de perguntas, e todos os
outros textos, como instruções e transições verbais para novas partes do questionário, também
devem ser testados (para uma introdução e visão geral sobre o pré-teste, consulte Campanelli,
Capítulo 10).

Uma tarefa importante na concepção e implementação de uma pesquisa auto-


administrada é garantir que o entrevistado receba todas as informações que, de
outra forma, seriam transmitidas pelo entrevistador. Na fase de contato, por
exemplo em cartas ou ligações antecipadas, essas informações dizem respeito à
própria pesquisa e têm como função estimular o respondente a participar da
pesquisa. Na fase de coleta de dados, essas informações abordam principalmente
o processo de perguntas e respostas e sua função é apoiar o respondente na
compreensão das perguntas e fornecer respostas adequadas.

13.3 EFEITOS DA APRESENTAÇÃO VISUAL DO


QUESTIONÁRIO

Num questionário auto-aplicável o inquirido é o centro de tudo e


consequentemente tudo deve ser adaptado ao inquirido. Um bom
design visual é de fundamental importância aqui, pois a principal
interface entre o pesquisador e o respondente é o questionário. Um
questionário orientado ao respondente começa com o uso consistente
de linguagem tipográfica, como fontes diferentes. Por exemplo, usar
letras mais escuras (negrito) para as perguntas e mais claras (letras
normais para as respostas, chama a atenção para a pergunta primeiro.
Para outros tipos de informações, outros estilos devem ser usados, por
exemplo, instruções ao respondente em itálico , textos de transição
entre blocos de perguntas em uma caixa ou com fundo sombreado.
Salant e Dillman (1995) e Dillman (2000,

Números, símbolos e layout gráfico (por exemplo, espaçamento,


localização, brilho, contraste e arranjos figura/fundo) todos comunicam
significado e devem ser usados para otimizar um questionário para uso auto-
administrado (para uma base teórica ver Redline, Dillman, Dajani, & Scruggs,
2003; para exemplos claros e um estudo de caso ver Dillman, Gertseva, &
Mahon-Haft, 2005). Além do layout gráfico consistente, há questões mais gerais
de design visual, pois o design visual diz respeito à aparência geral do
Questionários Auto-Aplicáveis 243
questionário total em papel ou na tela. A aparência geral de um questionário
autoaplicável evoca reações. Em um design orientado ao respondente, o pesquisador
tenta tornar a tarefa do respondente o mais fácil, agradável e interessante possível, e
o design visual é uma ferramenta muito eficaz quando usada de forma sistemática e
moderada.
Especialmente com métodos assistidos por computador e pesquisas na
Web, existem muitas opções de design. A fácil disponibilidade de fontes, estilos,
modelos, sem mencionar as animações, tenta os designers novatos a usar muitos
elementos gráficos. Isso pode facilmente levar a uma sobrecarga visual que distrai
das perguntas a serem respondidas. A distração visual causada pelos gráficos torna
as tarefas dos respondentes realmente mais difíceis, quando eles tentam se
concentrar nas perguntas e buscar informações relevantes.

O design visual profissional deve facilitar a comunicação e apoiar o processo de


perguntas e respostas de uma forma que seja relevante para o público e para o
conteúdo da pesquisa. Nesse sentido, a velha regra dos designers de que menos é
mais também é válida para a elaboração de questionários.

13.4 PESQUISAS DE CORREIO

13.4.1 Características Gerais das Vistorias por Correio

As pesquisas por correio consistem em questionários enviados por correio a um indivíduo


amostrado, a quem é solicitado que preencha o questionário e o envie de volta; nenhum
entrevistador está presente e a pesquisa é totalmente auto-administrada. O questionário pode ser
em papel ou em disco de computador (Disk by Mail); um formato especial usado em pesquisas de
estabelecimento é um questionário por fax. As principais vantagens das pesquisas por correio são
os baixos custos, sem pressão de tempo, uso de estímulos visuais, ausência de viés do
entrevistador e mais privacidade para os entrevistados. As desvantagens são: taxa de resposta
potencialmente baixa e recursos limitados para questões complexas e abertas.
As pesquisas por correio requerem um quadro de amostragem explícito de nomes e endereços.
As listas telefónicas ou outras listas são frequentemente utilizadas para inquéritos por correio à
população em geral. Usar a lista telefônica como um quadro de amostragem tem a desvantagem
de que pessoas sem telefone e pessoas com um telefone não listado não podem ser contatadas.
Tem a vantagem de os números de telefone estarem disponíveis para todas as unidades de
amostragem e lembretes ou acompanhamentos por telefone poderem ser implementados de
forma rápida e sem problemas. Outra razão para o uso frequente da lista telefônica como base de
amostragem é a relativa facilidade e os baixos custos associados a esse método. Alguns países
(como a Dinamarca) possuem excelentes registros administrativos com nomes e endereços que
podem ser usados como base de amostragem, em outros países (como a Holanda), o correio
central fornece listas de endereços de entrega postal oficiais que são usadas como base de
amostragem para a população em geral. Nos Estados Unidos, um arquivo de sequência de
entrega postal (DSF) já está disponível, o que torna possível obter um bom quadro postal para o
público em geral para amostragem.
Uma desvantagem distinta das pesquisas por correio é o controle limitado que o pesquisador
tem sobre a escolha do indivíduo específico dentro de uma família que de fato preenche
244 Edith de Leeuw, Joop Hox

a pesquisa. Não há nenhum entrevistador disponível para aplicar as técnicas de seleção de


respondentes dentro de uma família, e todas as instruções para a seleção de respondentes
devem ser incluídas na carta anexa. Como consequência, apenas procedimentos simples como a
alternância masculino/feminino/mais novo/mais velho ou o método do primeiro ou último
aniversário podem ser usados com sucesso. A alteração masculino/feminino/mais novo/maior
pede aleatoriamente em 25% das cartas que acompanham a mulher mais nova do agregado
familiar para preencher o questionário, num segundo aleatório 25% das cartas pede-se ao
homem mais novo para preencher o questionário questionário, e assim por diante.
Quando uma lista completa dos membros individuais da população-alvo
estiver disponível, como é o caso de pesquisas de grupos de interesse especial ou em países com bons
registros administrativos, uma amostra aleatória de nomes e endereços da população-alvo pode ser
extraída. Nesse caso, a cobertura e a amostragem são tão boas em pesquisas por correio quanto em
métodos de entrevista.
A ausência de um entrevistador também torna as pesquisas por correio a técnica de
coleta de dados menos flexível quando a complexidade do questionário é considerada. Em uma
pesquisa por correio, todos os respondentes recebem as mesmas instruções e são apresentados
com o mesmo questionário, sem sondagem adicional do entrevistador ou ajuda em casos
individuais. Assim, um questionário por correio deve ser totalmente auto-explicativo. Todas as
perguntas devem ser apresentadas em uma ordem fixa e apenas um número limitado de saltos e
ramificações simples pode ser usado. Para roteamentos, instruções escritas especiais e recursos
gráficos, como setas e cores, devem ser usados. Princípios de design visual e layout devem ser
usados para criar um caminho de navegação e guiar os respondentes através do questionário e
para garantir que os respondentes recebam o mesmo estímulo de pergunta da mesma maneira
(consulte a seção 13.3 e Dillman,
Uma vantagem das pesquisas por correio é que pistas e estímulos visuais estão disponíveis,
e com instruções bem desenvolvidas, questões bastante complexas e escalas de atitude podem
ser implementadas. Até mesmo listas de classificação ou classificação de itens são possíveis em
pesquisas por correio. A apresentação visual das perguntas possibilita o uso de todos os tipos de
perguntas gráficas (por exemplo, escada, rostos sorridentes, termômetro) e o uso de perguntas
com sete, nove ou mais categorias de resposta. Além do próprio questionário, folhetos
informativos ou amostras de produtos podem ser incluídos na correspondência. Em suma, os
questionários autoaplicáveis são muito flexíveis em relação ao tipo e formato da pergunta,
apenas perguntas abertas são difíceis de fazer em uma pesquisa por correio, pois nenhum
entrevistador está presente para obter mais detalhes.
Em geral, os questionários autoaplicáveis são menos invasivos e permitem mais privacidade e
induzem menos pressão de tempo. A ausência de um entrevistador pode ser uma vantagem real em
determinadas situações, especialmente quando perguntas delicadas ou socialmente desejáveis estão
sendo feitas. Outra vantagem é que as pesquisas por correio podem ser concluídas quando e onde o
respondente quiser. Os entrevistados podem consultar os registros, se necessário, o que pode melhorar
a precisão, especialmente em pesquisas domiciliares sobre renda e saúde. Para uma visão geral, consulte
de Leeuw (1992) e Dillman (2000).
Do ponto de vista logístico, as pesquisas por correio têm duas desvantagens: tamanho do
questionário e tempo de resposta. A presença pessoal dos entrevistadores em entrevistas face a
face proíbe interrupções e permite questionários mais longos do que em pesquisas por correio,
embora entrevistas por telefone ou pesquisas na web não tenham essa vantagem e também
devam ser curtas. O tempo de resposta nas pesquisas por correio pode levar várias semanas, pois
as pesquisas por correio são bloqueadas em um intervalo de tempo definido de datas de envio
com uma série programada de lembretes de acompanhamento e, portanto, podem
Questionários Auto-Aplicáveis 245
leva mais tempo do que pesquisas por telefone e pela web (consulte também o Capítulo 7 de Leeuw).
Logisticamente, as pesquisas por correio também têm duas grandes vantagens: equipe
pequena e custos baixos. Os requisitos organizacionais e de pessoal para uma pesquisa por correio são
muito menos exigentes do que para entrevistas: as habilidades necessárias são principalmente
habilidades administrativas generalizadas e não são necessários entrevistadores, embora seja necessário
um funcionário treinado para responder às perguntas dos entrevistados. Assim, o número de pessoas
necessárias para realizar uma pesquisa por correspondência é muito menor do que o necessário para
pesquisas por entrevista com tamanhos de amostra iguais. Os requisitos para a organização e pessoal
influenciam o custo da coleta de dados; conseqüentemente, as pesquisas por correio estão entre as
menos dispendiosas e podem ser o único meio acessível em certas situações.

13.4.2 O Método de Projeto Total

A maioria das pesquisas sobre pesquisas por correio se concentrou em melhorar a


taxa de resposta. Uma visão geral sistemática inicial é a meta-análise de Heberlein e
Baumgartner (1978); visões gerais mais recentes podem ser encontradas em Kanso,
2000; Groves, Dillman, Eltinge & Little (2001). Para melhorar a resposta, Dillman
(1978) desenvolveu uma abordagem chamada Total Design Method (TDM). Em
Dillman (2000, 2007) o TDM é renomeado como Tailored Design Method para
enfatizar a necessidade de adequar a abordagem às situações específicas em que é
empregado. O TDM é baseado na teoria da Troca Social, uma perspectiva
sociopsicológica que explica as ações sociais pelos retornos que se espera que elas
tragam; em outras palavras, baseia-se na troca e reciprocidade de favores. Três
elementos são centrais na teoria da troca social: (a) recompensas, é o que se espera
ganhar com uma determinada ação, (b) custos, o que se espera gastar ou desistir, e
(c) confiança, a crença de que as recompensas realmente virão e superarão os custos
(Dillman, 2000 ). A Figura 13.1 retrata a teoria da troca social. Os termos recompensa
e custo são mais gerais do que apenas o significado monetário; custos psicológicos,
como esperar uma obrigação futura, e recompensas, como sentir-se importante,
também estão incluídos.

Figura 13.1 Exemplo gráfico da teoria da troca social


246 Edith de Leeuw, Joop Hox

O TDM fornece instruções detalhadas para o projeto e implementação de uma


pesquisa por correio, tudo baseado em uma orientação teórica. A sustentação
teórica do TDM facilita a tradução dos princípios e prescrições em diferentes
situações e diferentes ambientes culturais e permite adaptar a abordagem às
necessidades específicas das populações-alvo em diferentes países. A
generalização intercultural do TDM é alta e tem sido aplicada com sucesso a
pesquisas de correspondência não apenas nos Estados Unidos e na Europa, mas
também no Japão e em outros países (cf. de Leeuw & Hox, 1988; Hippler &
Seidel, 1985; Jussaume & Yamada, 1990; de Rada, 2001; Dewar, 2006).
O TDM organiza o design e a implementação de uma pesquisa por correio
em torno dos princípios de maximizar as recompensas, minimizar os custos e
maximizar a confiança do respondente de que as recompensas realmente
acontecerão e que não há custos ocultos. O TDM compreende as seguintes medidas
para atingir esses objetivos:
1.Recompensas: Estes podem ser psicológicos e materiais. Os respondentes recebem
consideração positiva e sentem que são importantes para o estudo e que suas
opiniões particulares são realmente necessárias. Um apelo individual é feito aos
respondentes e o valor de sua contribuição é explicitamente reconhecido. Um
esforço especial é feito para tornar o questionário interessante e agradável de
responder. Um agradecimento explícito é transmitido e um sinal de
agradecimento ou recompensa é fornecido, como um resumo dos resultados ou
um incentivo (monetário) explícito. A inclusão de um pequeno incentivo
simbólico no envio de correspondência é um dos fatores que aumentam as taxas
de resposta em pesquisas por correio. O incentivo deve ser incluído na primeira
correspondência com o questionário porque um incentivo pré-pago evoca a
norma de reciprocidade mais do que um incentivo prometido que pode ou não
ser entregue. Somente se houver uma relação mais longa e/ou confiável com a
organização ou patrocinador da pesquisa, como em uma pesquisa de painel, um
incentivo prometido funcionará tão bem quanto um pré-pago.

2.custos: Novamente, estes podem ser psicológicos ou materiais; custos de esforço,


tempo e dinheiro são minimizados. O questionário é projetado para parecer fácil
de preencher e a tarefa é feita para parecer pequena e pouco exigente, exigindo
pouco esforço do respondente. Se forem incluídas perguntas delicadas,
sentimentos negativos ou embaraço são evitados tanto quanto possível por meio
de uma introdução e redação apropriadas. Solicitações de informações pessoais
são minimizadas. Custos monetários estão ausentes: o questionário pode ser
devolvido em um envelope especial selado e pré-endereçado.

3.Confiar: A carta com o questionário é explicitamente feita para parecer diferente dos
materiais de publicidade usuais. Papel timbrado oficial é usado para identificar o
estudo com umlegítimoorganização de pesquisa, como uma universidade ou um
órgão governamental. Informações de contato, como número de telefone e
endereço, destacam a legitimidade. Associar a pesquisa a um relacionamento
existente também pode melhorar o relacionamento de confiança, por exemplo,
quando os membros de uma organização existente são pesquisados. Por fim,
qualquer associação com lixo eletrônico, publicidade e SUGGING (venda sob o
disfarce de uma pesquisa)
Questionários Auto-Aplicáveis 247
deve ser evitado. Uma regra prática é dar uma boa olhada nas correspondências
e anúncios em massa recebidos recentemente e evitar essa imagem. Como um
questionário enviado pelo correio pode ser facilmente perdido ou jogado fora, ou
permanecer por dias despercebido e esquecido em uma mesa ou mesa da cozinha, é
necessário um sistema cuidadosamente planejado de lembretes e correspondências de
acompanhamento. De fato, pesquisas anteriores mostraram que o número de lembretes é
um dos determinantes mais poderosos de uma alta resposta em pesquisas por correio
(Heberlein e Baumgartner, 1978; de Leeuw e Hox, 1988; Dillman, 1991). Esses contatos
repetidos são adaptados à situação, devem parecer diferentes uns dos outros e cada um
deve acrescentar algo novo. No TDM, aproximadamente uma semana após o envio inicial,
um cartão postal de agradecimento é enviado a todas as unidades amostradas. O objetivo
deste cartão postal é agradecer a todos aqueles que responderam e gentilmente estimular
aqueles que não responderam. Duas semanas após este cartão postal, uma segunda
correspondência é enviada apenas para os não respondentes. Esta correspondência inclui
um questionário substituto e um envelope de retorno, e uma nova carta de apresentação
especialmente elaborada para encorajar os não respondentes a responder. Esta nova carta
é mais insistente do que as comunicações anteriores, e refere explicitamente que há cerca
de três semanas foi enviado um questionário, que ainda não foi devolvido. Também aborda
questões que alguns respondentes possam ter, com base em questões e problemas
encontrados em questionários já devolvidos (cf. Dillman, 2007, p.181-2). Em seu livro de
1978, Dillman recomenda um terceiro e último lembrete por correio especial, registrado ou
certificado, sete semanas após o primeiro envio do questionário. Isso aumenta o intervalo
de tempo para um TDM completo para 8 semanas. Para encurtar isso, foram sugeridas
variações, como deixar de fora o último lembrete ou substituí-lo por um telefonema uma
ou duas semanas após o segundo lembrete. Uma chamada telefónica também permite
comunicar pessoalmente com os inquiridos e perguntar se precisam de ajuda ou têm
dúvidas sobre o questionário.
O sistema de acompanhamentos é projetado para emular certos aspectos de
comportamento do entrevistador bem-sucedido em obter cooperação e conversão de recusa.
Portanto, cada correspondência de acompanhamento, e especialmente o texto da carta de
apresentação, é adaptada à fase da pesquisa (por exemplo, primeiro lembrete, segundo lembrete,
para exemplos anotados, consulte Dillman 1978, 2007). O envio de uma carta antecipada também
aumenta a resposta e funciona quase tão bem quanto um acompanhamento; esta pré-notificação
deve ser enviada a todas as unidades amostradas alguns dias a uma semana antes do primeiro
envio (Dillman, 2000, 2007). Embora uma carta de antecedência funcione em todos os casos, ela é
especialmente recomendada quando um TDM abreviado é usado, ou seja, quando um terceiro
lembrete é deixado de fora.
Para implementar lembretes de forma eficiente, um bom exemplo de status
administração, seja em papel ou informatizada, é necessária. Uma tabela simples com
números de respondentes como linhas e tipo de envio/acompanhamento como
colunas junto com um código direto (resposta, não resposta, endereço desconhecido,
etc.) é suficiente. O sistema TDM de lembretes especiais para não respondentes
também torna necessário identificar os questionários com um número de
respondente individual. Dillman (1978, 2007) aconselha ser bastante direto sobre isso
e declarar na carta de apresentação “Você pode ter certeza de total confidencialidade.
O questionário tem um número de identificação apenas para fins de envio... Seu
nome nunca será colocado no questionário (Dillman, 1978, p. 169; Salant & Dillman,
1994, p. 143). Esta afirmação é seguida quase
248 Edith de Leeuw, Joop Hox

imediatamente por um parágrafo afirmando que os pesquisadores ficariam felizes em


responder a quaisquer perguntas sobre o estudo, fornecendo explicitamente um número
de telefone e outras informações de contato. Ao fazer isso, o princípio da reciprocidade é
usado para estabelecer confiança. Para enfatizar a confidencialidade, um procedimento
especial é usado quando os respondentes desejam receber um resumo dos resultados. Um
cartão postal separado é adicionado à correspondência, no qual os respondentes podem
preencher um endereço de contato e enviá-lo de volta à organização da pesquisa
separadamente do questionário preenchido (Dillman, 1978, p. 179). Quando perguntas
sobre um tópico muito sensível são feitas, pode ser aconselhável omitir completamente um
número de identificação. Para essa situação, Dillman (2007, p. 166) propõe um
procedimento no qual é anexado um cartão postal de retorno separado com número de
identificação. Na carta de apresentação é afirmado que o questionário é totalmente
anónimo e não há identificação no questionário. Solicita-se também ao entrevistado que
assine e devolva o cartão-postal anexo separadamente para informar aos pesquisadores
que o questionário foi devolvido. O entrevistado tem a garantia de que, após devolver este
cartão postal, seu nome será excluído da lista de mala direta para garantir que nenhum
outro lembrete seja enviado.
Para todos os tipos de pesquisas, o pré-teste do questionário desempenha um
papel importante no desenho de pesquisas profissionais (cf., Campanelli, Capítulo 10).
No projeto de pesquisa de correio profissional, o pré-teste detodosmaterial de
pesquisa é importante. Isso inclui o pré-teste do texto do questionário (as perguntas
foram compreendidas, as categorias de respostas são suficientes, todas as respostas
podem ser marcadas, etc.), mas também o pré-teste das cartas de apresentação e de
apresentação (as palavras foram compreendidas, isso cria uma imagem positiva , os
entrevistados têm dúvidas sobre o texto), a atratividade do design da capa e a
atratividade e a imagem geral do pacote de correspondência completo (alguém
abriria o envelope, leria a carta, responderia ao questionário e por que (não)) ).

Quadro 13.1 Resumo da construção e implementação de uma pesquisa de


correspondência seguindo o TDM (após Hippler & Seidel, 1985; Dillman 2007).

CONSTRUÇÃO
QuestionárioLivreto pequeno e organizado. Capa atraente com título interessante
e um desenho ou imagem. Nome e endereço da organização de
pesquisa. No verso tem uma caixa para comentários e na parte inferior
um agradecimento.
Ordem das perguntasComece com perguntas simples e interessantes. Ordem
perguntas em uma sequência lógicapara o entrevistado.
Perguntas difíceis ou delicadas e questões biográficas
no final.
Disposição Compactar. Perguntas datilografadas em negrito, categorias de
respostas em letras normais (mais claras). As transições são marcadas
com uma pequena introdução. As instruções no local eram necessárias
no questionário e, se necessário, repetidas nas próximas páginas. Saltos
e ramificações são claramente indicados usando recursos gráficos,
como setas.
Questionários Auto-Aplicáveis 249

Caixa 13.1 Síntese da construção e implementação de um inquérito postal na


sequência do TDM (continuação).

EUIMPLEMENTAÇÃO
Carta antecipadaPapel timbrado oficial. Nome completo e endereço do respondente em
carta. Data completa correta. Anunciar questionário.
Diga do que se trata. Obrigado e assinatura Real. Se o
incentivo for usado, anuncie isso em ps
Carta de apresentação Papel timbrado oficial. Nome completo e endereço do respondente
na carta. Data completa correta. Tópico de solicitação e introdução
e sua importância. Enfatize a importância da participação, expresse
apreciação. Garantia de confidencialidade. Forneça informações de
contato. Obrigado e assinatura real. O envelope contém o
Pacote questionário, a carta de apresentação, o envelope de retorno (pré-
carimbado) e um cartão separado para solicitar o resumo.

Agendar Se a carta antecipada for usada, envie-a alguns dias a uma


semana antes do envio do pacote completo. Envie o pacote
completo no meio da semana. Evite feriados oficiais e férias de
verão. Após uma semana, cartão postal de agradecimento.
Duas semanas depois, um lembrete firme com pacote
completo. Quatro semanas depois, ou seja, sete semanas após
a postagem inicial, um lembrete gentil com pacote completo
por correio especial (por exemplo, certificado).
As variações são: (1) enviar uma carta com antecedência uma
semana antes do primeiro envio, (2) substituir o último lembrete
(após 7 semanas) por um telefonema quatro semanas após o envio
inicial, ou seja, duas semanas após o lembrete firme, ou (3)
deixando o terceiro lembrete completamente de fora.

As facetas importantes do TDM estão resumidas na caixa 13.1. Para exemplos


práticos de construção de questionários e texto da carta que os acompanha, ver
Salant e Dillman, 1994; Dillman, 2007.

13.4.3 Pesquisas por Correio: Resumindo

As pesquisas por correio são muito adequadas para situações em que um orçamento baixo e
equipe limitada estão disponíveis. Pesquisas por correio requerem um sistema postal confiável e
listas de endereços precisas para a população amostrada. Para alcançar uma alta taxa de
resposta, vários contatos são essenciais, incluindo um contato especial, seja correio especial ou
telefone. Este sistema de lembretes planejados implica que o tempo de resposta para pesquisas
por correio é fixado em 5 a 7 semanas, independentemente do tamanho da amostra. Além disso,
o pesquisador deve tornar a tarefa de responder o mais atraente possível. Em
250 Edith de Leeuw, Joop Hox

Os intangíveis TDM de Dillman são usados, como respeito, apreciação e um resumo


prometido dos resultados; além disso, recomenda-se o uso de um incentivo monetário de
token pré-pago. Se o orçamento permitir, um pequeno incentivo ajuda a aumentar ainda
mais a resposta.
As pesquisas por correio não têm suporte do entrevistador, o que limita a complexidade do
o questionário. Um bom design gráfico é importante para orientar os respondentes em um
questionário mais complexo. Como todos os questionários autoaplicáveis, as pesquisas por
correio têm a vantagem de serem menos intrusivas do que as pesquisas por entrevista.
Dillman (1978, 2007) salienta que não existe um truque de mágica para garantir uma alta
resposta e que o TDM deve ser visto como um sistema, o que significa que é importante
prestar atenção aos detalhes e permanecer consistente na abordagem dos respondentes.
As cartas devem ser cuidadosamente redigidas e o layout do questionário deve ser bem
elaborado com o uso consistente de ferramentas gráficas. Desde que seja feito um esforço
suficiente para obter todos os detalhes corretos, as pesquisas por correio podem fornecer
taxas de resposta aceitáveis (cf. Dillman, 1991) e dados de boa qualidade (de Leeuw, 1992).

13.5. PESQUISAS DE INTERNET E PAINÉIS DE ACESSO

As pesquisas pela Internet enfrentam muitos dos desafios das pesquisas por
correio. Em pesquisas baseadas na web, há pouco controle sobre quem
responde ao questionário e, embora a web por meio de autoentrevista assistida
por computador (CASI) forneça uma interface muito mais flexível do que um
questionário em papel e permita padrões complicados de pular, novamente não
há entrevistador presente para resolver as dificuldades. Todos os problemas que
um entrevistado pode encontrar devem ser antecipados quando o questionário
é programado, e uma solução deve ser planejada com antecedência. Por outro
lado, as pesquisas pela Internet têm a grande vantagem de todos os formulários
autoaplicáveis: a de eliminar efeitos indesejados do entrevistador e proporcionar
mais privacidade ao responder perguntas delicadas. Outras vantagens das
pesquisas na web são a pontualidade e os baixos custos. As pesquisas na
Internet são discutidas em detalhes no Capítulo 14;

O Capítulo 1 lista quatro tópicos como pilares da pesquisa de levantamento: cobertura,


amostragem, medição e ausência de resposta. As pesquisas pela Internet encontram grandes
obstáculos nas áreas de cobertura, amostragem e não resposta, que são discutidas primeiro;
questões de medição são discutidas mais tarde.

13.5.1 Cobertura, Amostragem e Não Resposta em Pesquisas na Internet

Coberturaainda é muito problemático em pesquisas na web da população em geral: nem todo


mundo tem acesso fácil à Internet, e a proporção de pessoas que têm acesso à Internet varia
muito de país para país Ainda assim, o acesso à Internet está crescendo em todo o mundo e é
provável que o ( o problema de sub-cobertura diminuirá no futuro. Um problema mais crítico é
que a Internet não está estruturada de forma a permitir que os pesquisadores construam
estruturas de amostragem bem definidas, ou seja, listas completas de usuários da Internet que
possam ser usadas para extrair amostras probabilísticas.
Questionários Auto-Aplicáveis 251
com características conhecidas. Além disso, a estrutura amplamente variável de endereços
de e-mail não permite a geração aleatória de endereços, de forma análoga aos números de
telefone gerados na discagem aleatória de dígitos.
Amostragemnão precisa ser um grande problema em pesquisas na Internet,
desde que a população possa ser definida e um bom quadro de amostragem esteja
disponível, a amostragem é direta. Se a população-alvo for a associação de uma
organização e uma lista de endereços de e-mail estiver disponível, os métodos de
computador para obter amostras probabilísticas serão fáceis de implementar. Em algumas
aplicações, como um estudo de satisfação do cliente para uma loja online, o público-alvo é
quem visita o site da loja. Desenhar uma amostra probabilística, por exemplo, oferecendo
um questionário a cada 100 visitantes desse site, é novamente simples de implementar.
Mas, em geral, estruturas de amostragem bem definidas não estão disponíveis para a
maioria das pesquisas na Internet.
Em reação aos problemas de cobertura e amostragem, muitas organizações de
pesquisa comercial agora mantêm padrões baseados na Internet.painéis de acesso. Um
painel de acesso é um rico banco de dados de entrevistados dispostos que é usado como
um quadro de amostragem para estudos de Internet. Como em todos os painéis, os
membros são solicitados a preencher questionários regularmente. O problema é que a
maioria dos painéis de acesso é formada por voluntários e é impossível determinar o quão
bem esses voluntários representam a população em geral. Se basicamente permitirmos
que qualquer pessoa que queira responder a um questionário o faça, podemos obter
amostras muito grandes a um custo relativamente baixo. Às vezes, esse grande tamanho
amostral é erroneamente visto como uma indicação de representatividade, principalmente
com base no argumento de que uma amostra grande tem mais chance de incluir todos os
segmentos da população. Um exemplo famoso é uma declaração feita emda National
GeographicSite da Survey2000: “Recebemos mais de 50.000 respostas — o dobro do
mínimo exigido para validade científica...”. Esta afirmação foi entusiasticamente
ridicularizada pelos metodologistas da pesquisa e logo foi retirada do site (Macer, 2001).
A inferência estatística aplica-se apenas a pesquisas de probabilidade, onde
cada elemento da população tem uma probabilidade conhecida e diferente de zero
de ser incluído na amostra (consulte de Leeuw, Hox, Dillman, Capítulo 1, e Lohr,
Capítulo 6 para uma discussão mais completa sobre isso emitir). Painéis voluntários
(opt-in) não são amostras probabilísticas e a aplicação de inferência estatística a
amostras não probabilísticas é questionável. A Associação Americana de Pesquisa de
Opinião Pública fornece um padrão inequívoco sobre como relatar amostras não
probabilísticas e como evitar referências enganosas a margens de erro (AAPOR,
2007). Uma boa solução para os problemas de cobertura e amostragem da maioria
dos painéis de acesso é usar um modo diferente de coleta de dados e amostras
probabilísticas (por exemplo, entrevistas por telefone RDD) para o recrutamento de
membros do painel e fornecer um computador e acesso à Internet para aqueles que
não têm. Este método foi iniciado com sucesso por Willem Saris e seu grupo (Saris,
1998). Atualmente, existem vários painéis que operam com esse princípio, como
CENTERdata e MESS na Holanda e Knowledge Networks nos Estados Unidos.

Não respostaé um problema sério para pesquisas na Internet. Em uma meta-análise


cuidadosamente conduzida, Lozar Manfreda (no prelo) estudou 45 comparações empíricas e
descobriu que, em média, as pesquisas na web geram uma taxa de resposta 11% menor do que
as pesquisas comparáveis por correio em papel e telefone. Cook, Heath,
252 Edith de Leeuw, Joop Hox

& Thompson (2000) fizeram uma meta-análise sobre a resposta de 68 pesquisas na web e
encontraram uma resposta média de 35% com um desvio padrão de 16%. A não resposta
não apenas diminui o número de questionários disponíveis, mas também pode influenciar
amostras de probabilidade (cf. Lynn, Capítulo 3). Por exemplo, suponha que realizamos
uma pesquisa de satisfação do cliente para um site. Cada centésimo visitante recebe uma
pesquisa pop-up e temos uma taxa de resposta de 20%. Estamos interessados na
satisfação com o site que acabamos de visitar. O viés de não resposta é uma função da taxa
de não resposta e da diferença entre os respondentes e os não respondentes na variável de
interesse. Se assumirmos que a probabilidade de responder à pesquisa é maior para
visitantes satisfeitos (visitantes frustrados abandonam o site), nossa pesquisa superestima
a satisfação do visitante.
Dillman (2007) recomenda seguir um Tailored Design Method (TDM), ou seja,
adaptar o que sabemos sobre o aumento das taxas de resposta em pesquisas por correio
para o ambiente da Internet. Assim, os princípios da teoria da troca social também podem
ser aplicados em pesquisas na Internet. Adaptar-se à Internet significa traduzir esses
princípios em equivalentes da Internet, levando em conta as características específicas da
situação da pesquisa, como conteúdo, população-alvo e patrocinador da pesquisa. Dadas
as comunicações baratas, pode-se sentir a tentação de aumentar o número de contatos por
e-mail, mas deve-se evitar sobrecarregar os respondentes porque isso pode ser facilmente
concebido comospam, que é uma das maiores irritações da web. Em um contexto de troca
social, a irritação e os sentimentos negativos são um fator de custo, o que pode levar a
taxas de resposta mais baixas, como Lozar et al (no prelo) apontam. Algumas evidências
disso são fornecidas na revisão de Cook, Heath e Thompson (2000), que descobriu que os
lembretes têm um efeito positivo na resposta em comparação com a ausência de
lembretes, mas há um efeito decrescente do número de contatos.

Além disso, o tempo dos lembretes deve ser adaptado aos costumes da web. Um
padrão típico para pesquisas na web é que as pesquisas concluídas são devolvidas quase
imediatamente, mas os retornos diminuem rapidamente, enquanto nas pesquisas por correio em
papel, os retornos aumentam mais lentamente e começam a diminuir após 3 a 5 dias. A Internet é
um meio mais dinâmico e os internautas leem muitas mensagens por dia. Uma pesquisa enviada
por e-mail a um entrevistado ontem é esquecida e excluída amanhã, mas um questionário
atraente em papel geralmente fica em casa por uma semana. Portanto, as pesquisas na Web
podem precisar de um intervalo de tempo menor entre a solicitação e o lembrete do que as
pesquisas por correio em papel. Um estudo de Crawford, Couper e Lamias (2001), de fato,
mostrou que um lembrete rápido após dois dias funciona melhor do que um lembrete após cinco
dias. Quantos lembretes são mais eficazes em pesquisas na Internet e como eles devem ser
cronometrados ainda é uma questão em aberto; pesquisa empírica é necessária para resolver
esta importante questão.
Personalização, lembretes e incentivos são respostas eficazes
indutores em pesquisas de correspondência em papel e podem ser traduzidos com sucesso para
um ambiente de Internet, como sugere a meta-análise de Cook et al (2000). Por exemplo,
suponha que uma universidade queira pesquisar a satisfação dos funcionários. Ele tem uma boa
lista de endereços de e-mail dos funcionários, portanto, cobertura e amostragem não são um
problema, mas a falta de resposta ainda é, e as seguintes medidas são tomadas para aumentar a
resposta. Os funcionários recebem uma carta em papel timbrado com um pequeno incentivo. Em
seguida, eles recebem um e-mail que os convida a responder a uma pesquisa na web, usando um
código de acesso (incluído como um link clicável para facilitar
Questionários Auto-Aplicáveis 253
acesso, novamente para reduzir os custos do respondente) incluído em um e-mail
personalizado. Schaefer e Dillman (1998; ver também Dillman, Tortora e Bowker, 1998)
discutem oportunidades de personalização em pesquisas na Internet. A Caixa 13.2 mostra
um exemplo de contato de e-mail personalizado e não personalizado.

Quadro 13.2 Exemplo de e-mail de contato personalizado versus não personalizado.

PPERSONALIZADO
De: John Doe [ jdoe@uni.edu ] Joop de Leeuw
Enviado: Quarta-feira, 9/8/2007

Para: [ jdlw@uni.edu ] Ajude-nos com nossa


Assunto: pesquisa de funcionários!
Mensagem: Caro Joop
<carta de apresentação incluindo código de acesso individual>

NPERSONALIZADO
De: surveyinfo@uni.edu Enviado: Quarta-feira, 9/8/2007

Para: jdlw@uni.edu
Assunto: Pesquisa com funcionários

Mensagem: Prezado funcionário


<carta de apresentação incluindo código de acesso individual>

Após este primeiro contato por e-mail, poderão ser utilizados e-mails de acompanhamento. Dillman
(2007) aconselha um lembrete personalizado de agradecimento por e-mail. Ao contrário do lembrete de
agradecimento com pesquisas por correio em papel, onde nenhum questionário de substituição é
adicionado, um lembrete de agradecimento para uma pesquisa na web deve sempre conter um convite
explícito e um link ativo para o questionário, pois o risco é muito alto de que respondentes de boa
vontade tenham já perdeu o convite e o link do e-mail original. Também ao contrário das pesquisas por
correspondência em papel, parece sensato não esperar uma semana inteira, mas enviar o lembrete mais
cedo.

13.5.2 Medição em Pesquisas na Internet

As pesquisas pela Internet são auto-administradas, portanto, não há nenhum entrevistador


presente para auxiliar o entrevistado quando surgem dificuldades. As pesquisas na Internet são,
por definição, assistidas por computador e compartilham todas as vantagens das pesquisas
assistidas por computador, o que significa que questionários complexos com roteamento
controlado (pular e ramificar) podem ser usados. Além disso, as pesquisas baseadas na Web são
baseadas em um meio visual rico, que permite adicionar cor e textura ao layout da página,
elementos gráficos, imagens, sons e outros conteúdos multimídia. Os questionários da Internet,
como todos os questionários autoaplicáveis, devem ser amigáveis para o respondente, e o
potencial visual da Internet como meio pode ser ao mesmo tempo uma vantagem e uma
desvantagem. Os entrevistados variam em habilidades de computador e, pelo menos, alguns
entrevistados têm habilidades mínimas de computador. Por isso, nem todos os entrevistados
sabem como operar as caixas do menu suspenso ou como marcar (ou corrigir) as respostas
usando os botões de opção. A rolagem geralmente é estranha. Todos
254 Edith de Leeuw, Joop Hox

os problemas que se desenvolvem a partir da falta de conhecimentos de informática se


traduzem em um maior esforço exigido dos respondentes e, portanto, aumentam os custos
do respondente. Isso não apenas aumenta a probabilidade de abandono da pesquisa,
resultando em não resposta (parcial), mas também diminui a atenção dada às perguntas
reais e, portanto, diminui a qualidade do processo pergunta-resposta.
Os efeitos das variações no design visual nas respostas em pesquisas
na Web foram relatados por Dillman (2000), Christian, Dillman e Smyth (2007),
Couper, Traugott e Lamias (2001) e DeRouvray e Couper (2002). A posição
assumida aqui é que as pesquisas na Web usam um meio que leva a formatos de
questionário que são distintamente diferentes dos questionários em papel (cf.
Couper, 2000). Mesmo assim, muitos dos princípios de design que se aplicam a
questionários em papel também se aplicam a questionários na Web (Dillman,
2007). Por exemplo, Schwarz et al. (Capítulo 2: 'A psicologia de fazer perguntas')
observe que os entrevistados usam rótulos verbais e numéricos de escalas como
ponto de referência para avaliar suas respostas. Dillman (2007) argumenta que a
linguagem gráfica que é usada em pesquisas na Web interage com o significado
verbal e numérico das categorias de perguntas e respostas. Ele enfatiza o design
amigável do respondente. Isso se refere a questões técnicas e psicológicas. O
design amigável ao respondente deve estar preocupado com os problemas que
alguns respondentes podem enfrentar com questionários avançados da Web,
que não podem ser recebidos ou facilmente respondidos devido a limitações de
equipamento, navegador ou transmissão de dados. Além disso, o design
amigável ao respondente deve levar em conta a lógica de como as pessoas
esperam que os questionários e os computadores operem. Isso requer atenção
e reflexão cuidadosa sobre a interação de estímulos verbais e numéricos e a
linguagem gráfica usada no questionário da Web.

Finalmente, os designers de questionários da web devem antecipar que seus


os questionários provavelmente serão usados em situações de pesquisa de modo misto.
Isso pode introduzir novas fontes de erro de medição quando diferentes formatos de
perguntas são usados em modos diferentes. Referimo-nos a de Leeuw, Hox e Dillman
(Capítulo 16) para uma discussão das questões envolvidas no desenho e medição de
questionários em pesquisas de modo misto.

13.5.3 Pesquisas na Internet: Resumindo

As pesquisas pela Internet são rápidas e de baixo custo. Por ser auto-administrado
não há efeitos do entrevistador, embora o uso de fotos e ilustrações visuais possa
influenciar as respostas dos respondentes. Os maiores problemas nas pesquisas pela
Internet são a cobertura e a falta de resposta. Frequentemente, a amostra em uma
pesquisa na Web não é uma amostra probabilística de uma população geral e não há
um bom método para gerar amostras aleatórias de endereços de e-mail. Além disso,
surgem problemas de medição porque os questionários podem parecer diferentes
em diferentes navegadores e monitores, e os respondentes podem ter diferentes
níveis de conhecimento em informática. A velocidade do tráfego de dados também
pode ser um problema, pois o acesso rápido à Internet não está disponível
universalmente. Apesar desses problemas, a Internet oferece grandes oportunidades
para pesquisas de opinião.
Questionários Auto-Aplicáveis 255
mudando rapidamente, muita pesquisa metodológica é necessária para entender seu impacto na
qualidade das pesquisas.

13.6. RESPOSTA DE VOZ INTERATIVA

Basicamente, a Resposta Interativa de Voz (IVR) é uma forma auto-administrada de


uma entrevista por telefone. É um sistema baseado em telefone que aceita entrada
de telefone de voz ou entrada de teclado de telefone por tom, para coletar
informações sem usar um entrevistador ao vivo. Normalmente, um sistema IVR
reproduz prompts de voz pré-gravados aos quais o respondente pode responder
pressionando um número no teclado do telefone para selecionar uma opção de
resposta ou falando claramente respostas simples como “sim”, “não” ou números
simples. Quando usado em pesquisas, um entrevistador ao vivo pode introduzir o IVR
e, em seguida, conectar os entrevistados dispostos ao computador e seu
entrevistador IVR virtual. Outros nomes para IVR são T-ACASI (Auto-entrevista
assistida por telefone e áudio por computador), TDE (Entrada de dados por tom por
toque), VRE (Entrada de reconhecimento de voz) e ASR (Resposta automática de fala).
A principal vantagem do IVR é a estrutura de baixo custo: não é necessário
entrevistador e, ao contrário de uma pesquisa por correio, não há custos de impressão.
Essas vantagens de custo são exatamente o motivo pelo qual o IVR se tornou popular em
marketing e pesquisa de mercado. Os escritórios de estatística usam técnicas de IVR,
geralmente referidas como TDE, para pesquisas de painel de estabelecimentos, quando
pequenos questionários sobre a estrutura do negócio devem ser respondidos
regularmente (cf. Nicholls, Baker e Martin, 1997).
As técnicas de coleta de dados autoadministradas têm a vantagem de evocar um
maior senso de privacidade e levar a uma maior abertura e auto-revelação. Para melhorar a
qualidade das respostas a perguntas sensíveis em entrevistas por telefone, foi
desenvolvido o T-ACASI, que pode ser visto como uma forma de IVR iniciada pelo
entrevistador. Como para perguntas específicas, os entrevistados não precisam se reportar
a um entrevistador, eles são mais propensos a relatar dados confidenciais com mais
precisão (Turner, Forsyth, O'Reilly, Cooley, Smith, Rogers & Miller, 1998).
Uma grande diferença com outras formas de questionários autoaplicáveis
(por exemplo, pesquisas por correio e pela Internet) é que o canal de informação
empregado pelo IVR é apenas auditivo. Na IVR, como nas entrevistas telefônicas
comuns, os únicos canais de comunicação disponíveis são o canal verbal (palavras
faladas) e o canal paralinguístico (timing, ênfase, tom emocional) e todas as formas
de comunicação não-verbal e visual são excluídas. Além disso, o canal auditivo é
sequencial e transitório, o que exige mais da capacidade de memória dos
respondentes (cf. Schwarz et al., Capítulo 2; de Leeuw, Capítulo 7). Como resultado,
apenas questionários curtos com perguntas simples e categorias de resposta
reduzidas podem ser usados.
IVR é uma forma híbrida entre pesquisas por telefone e auto-administradas. O
IVR requer conexões telefônicas de alta qualidade e aparelhos de discagem por tom, o que
pode levar a problemas de cobertura em pesquisas internacionais. Como a tecnologia IVR é
amplamente usada para vendas, marketing e suporte ao cliente, uma abordagem IVR pode
evocar o script e as associações erradas nos entrevistados e, assim, levar a uma taxa de
resposta muito baixa ou a interrupções prematuras.
256 Edith de Leeuw, Joop Hox

Os formulários iniciados pelo entrevistador, como o T-ACASI, assemelham-se em sua introdução


às entrevistas telefônicas comuns, o que resulta em taxas de resposta semelhantes. Como as
perguntas só podem ser apresentadas oralmente e devido às limitações da entrada de dados por
tom de toque e do software de reconhecimento de fala, há restrições quanto ao tipo de perguntas
que podem ser feitas. Os efeitos do entrevistador são eliminados, o que é uma vantagem quando
perguntas delicadas são feitas por telefone.

13.7. AUTOADMINISTRADO INICIADO PELO ENTREVISTADOR


QUESTIONÁRIOS

Em um esforço para combinar as vantagens das técnicas de coleta de dados administrados


pelo entrevistador e autoadministrados, várias formas de pesquisas autoadministradas
iniciadas pelo entrevistador foram desenvolvidas, as quais diferem na quantidade de
envolvimento do entrevistador.
Na primeira forma, os entrevistadores são usados como intermediários para amostrar e
selecionar os respondentes, explicar o objetivo do questionário e estimular a cooperação, embora
a coleta de dados em si seja totalmente autoadministrada. Exemplos são formulários de IVR,
questionários enviados por correio e questionários no local. Por exemplo, se nenhum quadro de
amostragem estiver disponível, os entrevistadores podem ser usados para elaborar técnicas de
amostragem, como amostragem probabilística de área, e entregar questionários nos endereços
selecionados. Isso torna possíveis os procedimentos de pesquisa por correio, mesmo quando os
nomes ou endereços da amostra-alvo são desconhecidos. Os questionários preenchidos podem
ser enviados de volta pelos respondentes ou recolhidos pelos entrevistadores em uma data
combinada para melhorar a resposta. Os visitantes de um museu ou parque nacional podem ser
solicitados a preencher um questionário e devolvê-lo pelo correio, ou até mesmo podem ser
solicitados a preencher um questionário autoaplicável assistido por computador no local. Os pais
de recém-nascidos podem ser solicitados a preencher um questionário em sua primeira visita a
um serviço de saúde infantil e assim por diante.

O uso da abordagem pessoal em combinação com os princípios de troca


social melhora a taxa de resposta (cf. Dillman, Dolson e Machlis, 1995), e o processo
de pergunta-resposta permanece totalmente autoadministrado. Certa vez, ao visitar o
museu Getty com crianças pequenas, uma jovem simpática nos pediu para avaliar se
o museu é adequado para crianças. Recebemos um questionário em papel para
enviar pelo correio, um cartão postal do museu Getty e livros de colorir para as
crianças, para garantir disse o entrevistador com um sorriso que poderíamos
preencher o questionário em paz. Isso ilustra como a abordagem do entrevistador e
os incentivos podem ser adaptados à situação da pesquisa.
Na segunda forma de questionários auto-administrados iniciados pelo
entrevistador, o processo de pergunta-resposta ainda é auto-administrado, mas o
entrevistador está disponível sempre que a assistência for necessária. Este é o caso quando
um segundo modo mais privado é usado para um subconjunto de perguntas especiais para
garantir mais auto-revelação e menos desejo social. Por exemplo, um questionário em
papel é entregue por um entrevistador e preenchido pelo respondente em particular, sem
a participação direta do entrevistador. Após a conclusão, o respondente pode selar o
questionário em um envelope e enviá-lo de volta ou devolvê-lo ao entrevistador. Em uma
entrevista pessoal assistida por computador, um procedimento semelhante é
Questionários Auto-Aplicáveis 257
usado. O entrevistador entrega o computador ao entrevistado quando perguntas delicadas
devem ser feitas, e o entrevistado pode responder com toda a privacidade enquanto o
entrevistador permanece a uma distância respeitosa, mas permanece disponível para
instruções e assistência. Quando um grande número de perguntas delicadas devem ser
feitas, o papel do entrevistador se restringe a selecionar e envolver o entrevistado, iniciar o
computador e permanecer disponível para assistência. Por exemplo, a Pesquisa Nacional
sobre Uso de Drogas e Saúde (NSDUH) dos Estados Unidos agora usa a auto-entrevista
assistida por computador (CASI), em que os entrevistados respondem à pergunta em
particular digitando a resposta diretamente no computador, e apenas algumas perguntas
não ameaçadoras são feitas por um entrevistador (NSDUH, 2005). Quando populações
especiais (por exemplo, deficientes visuais, pacientes hospitalizados) são investigados,
podem ser usados métodos autoadministrados assistidos por entrevistadores
personalizados. Para uma visão geral, consulte de Leeuw, Hox, Kef, 2003.

Os questionários autoadministrados iniciados pelo entrevistador combinam as


vantagens dos entrevistadores treinados (por exemplo, seleção do entrevistado,
oferecendo assistência quando necessário) com as vantagens dos questionários
autoadministrados (por exemplo, mais auto-revelação, menos desejo social).

13.8. ADMINISTRAÇÃO DE GRUPO

Os questionários autoaplicáveis iniciados pelo entrevistador são mais caros


do que as pesquisas por correio e pela Internet e, em alguns casos, podem
ser quase tão caros quanto uma entrevista. Economias substanciais de
custos podem ser obtidas quando questionários autoaplicáveis são
aplicados a grupos maiores de pessoas simultaneamente, como crianças em
idade escolar, estudantes, pacientes em hospitais ou centros de exames de
saúde. A administração em grupo de pesquisas autoadministradas é usada
principalmente no contexto de pesquisa organizacional ou educacional,
onde a população contém grupos naturais de respondentes, o que a torna
uma forma muito eficiente de coleta de dados. Além de por razões de
eficiência ou custos, as pesquisas administradas em grupo também são
usadas quando são pesquisados grupos especiais, que podem precisar de
atenção e tempo extras, e o design pede uma abordagem auto-
administrada. Por exemplo,

13.8.1 Logística da Administração do Grupo.

A administração em grupo de questionários autoaplicáveis é uma situação especial


que precisa ser bem organizada. Exatamente como a administração do questionário é
organizada depende do grupo específico que é pesquisado. A administração em
grupo de uma pesquisa da população em geral é incomum. O uso típico de
administração de grupo é direcionado a grupos naturais existentes que podem ser
abordados como tal. Questionários autoaplicáveis são então administrados ao grupo
como um todo, com uma pessoa viva presente para fazer a introdução, esclarecer
problemas e auxiliar no processo de pesquisa.
258 Edith de Leeuw, Joop Hox

Os administradores da pesquisa não precisam ser entrevistadores totalmente


qualificados, por exemplo, em pesquisa em sala de aula, pode ser o professor e, em uma clínica
de saúde, pode ser uma enfermeira. Obviamente, os procedimentos administrativos são
importantes para motivar os respondentes e aumentar a qualidade das respostas. Portanto, os
procedimentos de administração devem ser cuidadosamente planejados e os administradores da
pesquisa precisam ter informações suficientes sobre os objetivos do estudo e a questão da
pesquisa para administrar a pesquisa corretamente. O pesquisador deve preparar uma
introdução da pesquisa que os administradores usam em seu discurso introdutório. Esta
introdução contém basicamente os mesmos tópicos de uma boa carta de apresentação: uma
introdução amigável, explicando quem está fazendo a pesquisa, qual é o objetivo e a utilidade do
estudo, por que os entrevistados são selecionados, e uma garantia de confidencialidade. Além
disso, pode ser dada uma estimativa da duração usual e o administrador pode perguntar se
houver alguma dúvida (Dornyei, 2003). Um incentivo pode ser mencionado e em todos os casos é
necessário um agradecimento explícito. Além disso, os administradores da pesquisa devem
entender bem o questionário, para que possam ajudar os respondentes quando surgirem
problemas, e é aconselhável preparar um livreto de ajuda para os administradores com
instruções específicas, não muito diferente de um guia do entrevistador com perguntas e
respostas (freqüentemente feitas).
Quando um grupo específico é direcionado para administração em grupo de um auto-
questionário administrado, é importante adaptar não só o questionário,
mas também o procedimento de pesquisa para a situação específica. Por
exemplo, quando as unidades corporativas são pesquisadas em um estudo
de satisfação no trabalho, os pesquisadores podem entrar em contato com
o chefe de cada grupo organizacional ou unidade administrativa para
marcar uma data para a coleta de dados e recrutar os entrevistados. Em
seguida, eles presumivelmente enviariam um administrador de pesquisa à
organização para realmente coletar os dados, supondo que, se o chefe do
grupo ou departamento organizacional realizasse a coleta de dados,
poderiam surgir problemas de privacidade. Mesmo que a confidencialidade
das respostas dos entrevistados seja garantida, eles ainda podem se sentir
intimidados e fornecer respostas socialmente desejáveis às perguntas da
pesquisa.
Um bom exemplo de alfaiataria é o estudo de Molitor, Kravitz, To e Fink
(2001). Molitor e seus colegas realizaram uma pesquisa longitudinal de indivíduos
sem-teto que vivem em moradias transitórias. A administração da primeira pesquisa
usou uma entrevista face a face e, por razões de custo, a segunda coleta de dados
usou a administração em grupo. Para a segunda coleta de dados, os residentes foram
recrutados para se encontrarem em locais específicos (como o refeitório de um
abrigo). A coleta de dados utilizou um questionário autoaplicável. Dado este grupo
especial, onde podem ser esperados problemas de leitura, o administrador da
pesquisa lia em voz alta cada pergunta e as categorias de resposta, enquanto uma
cópia da página atual era exibida com um retroprojetor. Neste estudo, não houve
indicações de que a administração do grupo afetasse a qualidade dos dados.

Em vez de questionários de papel e lápis, a autoavaliação assistida por computador


entrevistas (CASI) são frequentemente usadas em ambientes de grupo, como laboratórios de
informática em escolas (Beebe, Davern, McAlpine, Call e Rockwood, 2005). Em estudos de saúde
sobre temas delicados, como uso de álcool e drogas, comportamento sexual, HIV,
Questionários Auto-Aplicáveis 259
auto-entrevistas assistidas são frequentemente administradas em um local central fora da
casa do entrevistado (por exemplo, em uma clínica, um centro de saúde, uma van móvel).
Mais uma vez, a administração pode ser adaptada com sucesso aos entrevistados, como
mostram Thornberry, Bhaskar, Krulewitch, Wesley, Hubbard, Das, Foudin & Adamson
(2002). Em seu estudo, eles combinaram tecnologias de áudio e tela sensível ao toque em
auto-entrevistas assistidas por computador de mulheres grávidas jovens e com baixa
escolaridade. O computador administrava as questões gravadas por meio de fones de
ouvido e ao mesmo tempo as exibia na tela. As opções de resposta foram destacadas na
tela quando ouvidas nos fones de ouvido e os respondentes respondiam tocando na
resposta de sua escolha na tela do computador.

Quando a administração de grupo é usada, os pesquisadores devem considerar a


natureza do problema de pesquisa juntamente com as características do grupo
saliente e adequar a logística e o procedimento de pesquisa a elas. O primeiro passo
essencial é uma análise do problema de pesquisa e do grupo a ser pesquisado. O que
torna o problema de pesquisa especial? Por que o grupo em estudo é especial? Para
uma discussão dessas questões, consulte de Leeuw et al, (2003).

13.8.2. escolas de topografia

A pesquisa escolar muitas vezes usa questionários auto-aplicáveis, e estes são freqüentemente na
forma de administração de grupo, onde uma classe inteira preenche um questionário ou um teste
educacional ao mesmo tempo. A maioria dos estudos escolares que são realizados dessa maneira
compartilham várias características metodológicas.
Ao elaborar o questionário, o pesquisador deve tomar cuidado para que
a extensão do questionário cabe no tempo normal da aula. Deve-se ter em mente os leitores mais
lentos ao estimar o tempo e também levar em consideração o tempo necessário para instrução,
entrega e coleta de questionários. Na pesquisa escolar, os pesquisadores também precisam
adaptar seu questionário para as faixas etárias especiais. A idade de sete anos pode ser vista
como um importante ponto de virada no desenvolvimento das crianças; nessa idade, a linguagem
se expande, as habilidades de leitura são adquiridas e as crianças começam a distinguir diferentes
pontos de vista. Na segunda infância (7-12 anos), as crianças adquirem a habilidade para
operações mentais concretas; eles ainda têm problemas com o pensamento abstrato e não têm
capacidade para o pensamento lógico formal, mas, com a adaptação adequada, eles podem ser
entrevistados e, com habilidades de leitura suficientes, podem preencher um questionário. No
início da adolescência (12-16) o funcionamento cognitivo já está bem desenvolvido e é possível
usar questionários padronizados semelhantes aos questionários para adultos. A capacidade de
memória agora está totalmente desenvolvida, mas a velocidade da memória não. Mesmo nessa
faixa etária mais avançada, deve-se permitir bastante tempo para responder às perguntas. Além
do desenvolvimento cognitivo, o desenvolvimento emocional e social da faixa etária pretendida
deve ser levado em consideração, especialmente na adolescência, quando a pressão dos colegas
e a auto-apresentação estão se tornando importantes. A partir dos 16 anos, o adolescente pode
ser considerado adulto no que diz respeito ao desenvolvimento cognitivo e processamento de
informações. Mas a resistência à pressão dos colegas ainda é muito baixa e os adolescentes mais
velhos têm suas próprias normas de grupo e sociais. Para uma visão geral dos problemas em
pesquisas com crianças
260 Edith de Leeuw, Joop Hox

e adolescentes, ver de Leeuw, 2005. O pré-teste de questionários e procedimentos de


pesquisa é especialmente importante ao pesquisar crianças e adolescentes, e os pré-
testes precisam levar em conta que os métodos de pré-teste também devem ser
adaptados à faixa etária em questão. Referimo-nos a de Leeuw, Borgers e Smits
(2004) para uma discussão mais aprofundada sobre o desenho da pesquisa e
questionários de pré-teste para crianças e adolescentes.
Antes que a coleta de dados real possa ocorrer, devem ser tomadas
medidas importantes para garantir a cooperação total. Conseguir a cooperação de
uma escola é extremamente importante, se uma escola não cooperar, isso pode
significar a perda de centenas de respondentes. As escolas são sistemas hierárquicos,
e a cooperação motivada em todos os níveis é importante, começando com o diretor
da escola e a administração, os professores envolvidos e, finalmente, os próprios
alunos. Além disso, em vários países, um pesquisador também deve obter o
consentimento dos pais para pesquisar crianças. A abordagem de cada ator deve ser
adaptada ao grupo específico. Por exemplo, ao abordar os pais para obter o
consentimento dos pais, uma carta de recomendação do diretor da escola e a
cooperação do professor dos alunos ajudam. Ao abordar o diretor da escola e os
professores, uma carta de apresentação de uma pessoa conhecida junto com
informações específicas sobre o estudo em si ajuda. Os professores geralmente estão
muito ocupados e uma abordagem pessoal, juntamente com a ênfase na utilidade do
próprio professor, ajuda. Prometer e dar feedback aos atores envolvidos é um bom
incentivo à cooperação. Para o diretor, este pode ser o resultado geral da escola em
comparação com os resultados gerais (anônimos) da pesquisa; para os professores,
isso pode assumir a forma de um perfil da turma em comparação com turmas
semelhantes ou padrões de teste. A cooperação dos professores é crucial para o
sucesso da pesquisa e a atitude dos professores é muito importante para motivar os
alunos, por isso vale a pena investir tempo nos professores.
Após a obtenção da permissão, o pesquisador entrega o material em
escolas com instruções, como uma espécie de questionário drop-off-pick-up e os
professores atuam como intermediários entre o pesquisador e os alunos. Isso tem
implicações para a logística do estudo. Primeiro, deve haver algum procedimento para
descartar o pacote de pesquisa (incluindo questionários e instruções) e estes devem ser
distribuídos, recolhidos novamente e devolvidos. Em escolas grandes pode ser
aconselhável ter um coordenador de local responsável por esse processo, seja um dos
professores ou um assistente do pesquisador. Em segundo lugar, se os professores forem
os administradores do questionário, eles devem ser motivados e instruídos a se esforçar
para obter uma alta taxa de retorno e dados de boa qualidade. É necessário um guia
cuidadosamente escrito com instruções e, quando possível, uma reunião pessoal com os
professores para explicar os procedimentos, discutir a diretriz e motivar os professores.
Durante o período de campo, deve haver um helpdesk disponível para lidar com quaisquer
problemas que possam surgir. Finalmente, quando se investigam temas delicados ou
quando tanto alunos como professores respondem, questões de privacidade precisam ser
resolvidas. Para uma discussão sobre confidencialidade e outras questões éticas, consulte
Dorneyi, (2003) e de Leeuw, Borgers e Smits (2004)
Um bom exemplo das questões envolvidas na pesquisa escolar é relatado por van
Hattum e de Leeuw (1999). Uma pesquisa de disco por correio foi implementada em uma
amostra aleatória de 106 escolas primárias na Holanda. Os entrevistados foram 6.428
alunos com idades entre 8 e 12 anos, e o tema do estudo foi o bullying.
Questionários Auto-Aplicáveis 261
Por se tratar de um tema delicado, os pesquisadores buscaram um método que combinasse o custo-benefício da administração em grupo com a privacidade

proporcionada pela autoadministração. Além disso, dada a faixa etária dos alunos da amostra, o questionário deveria ser de fácil preenchimento. O procedimento que eles

usaram foi uma auto-entrevista assistida por computador com os professores atuando como intermediários. Os professores receberam um disco que continha um

procedimento de configuração automatizada para o software de pesquisa. Um segundo disco continha o procedimento automático para coletar os arquivos de dados do

disco rígido dos computadores. Os professores tinham de instalar o software num ou mais computadores da escola e alocar os alunos para responderem aos

questionários no computador, enquadrando-o no horário normal das aulas. Ao final de cada semana, o segundo disco foi usado para copiar os dados e foi enviado de volta

aos pesquisadores. Caso a coleta de dados ainda estivesse em andamento, os professores recebiam um novo disco de coleta de dados. Os alunos tinham um cartão

amarelo com instruções, principalmente o uso das teclas Enter e Backspace, e a instrução de digitar um 9 caso não soubessem a resposta (essa opção de resposta não era

mostrada na tela). Os alunos receberam feedback positivo do sistema em intervalos regulares para mantê-los motivados (“você está indo bem”). Um helpdesk por telefone

estava disponível durante todo o período de coleta de dados, e vários laptops da universidade estavam disponíveis como backup. O estudo foi precedido por um estudo

piloto para pré-testar o questionário e os procedimentos de coleta de dados. os professores receberam um novo disco de coleta de dados. Os alunos tinham um cartão

amarelo com instruções, principalmente o uso das teclas Enter e Backspace, e a instrução de digitar um 9 caso não soubessem a resposta (essa opção de resposta não era

mostrada na tela). Os alunos receberam feedback positivo do sistema em intervalos regulares para mantê-los motivados (“você está indo bem”). Um helpdesk por telefone

estava disponível durante todo o período de coleta de dados, e vários laptops da universidade estavam disponíveis como backup. O estudo foi precedido por um estudo

piloto para pré-testar o questionário e os procedimentos de coleta de dados. os professores receberam um novo disco de coleta de dados. Os alunos tinham um cartão

amarelo com instruções, principalmente o uso das teclas Enter e Backspace, e a instrução de digitar um 9 caso não soubessem a resposta (essa opção de resposta não era

mostrada na tela). Os alunos receberam feedback positivo do sistema em intervalos regulares para mantê-los motivados (“você está indo bem”). Um helpdesk por telefone

estava disponível durante todo o período de coleta de dados, e vários laptops da universidade estavam disponíveis como backup. O estudo foi precedido por um estudo

piloto para pré-testar o questionário e os procedimentos de coleta de dados. e a instrução para digitar um 9 caso não soubesse a resposta (essa opção de resposta não era

mostrada na tela). Os alunos receberam feedback positivo do sistema em intervalos regulares para mantê-los motivados (“você está indo bem”). Um helpdesk por telefone

estava disponível durante todo o período de coleta de dados, e vários laptops da universidade estavam disponíveis como backup. O estudo foi precedido por um estudo piloto para pré-testar o questio

13.9 CONCLUSÃO

Existem muitos tipos de questionários autoaplicáveis, dos quais os mais conhecidos são os
questionários por correio e pela Internet. Os questionários autoaplicáveis podem ser
administrados individualmente (como em casa, por meio de pesquisa pelo correio) ou em
grupo (como em uma sala de aula na escola). Uma segunda dimensão na qual os
questionários autoaplicáveis podem diferir é o nível de disponibilidade do entrevistador;
isso varia de nenhum (pesquisa por correio) a entrevista assistida (por exemplo, um
questionário autoaplicável distribuído durante uma entrevista de pacientes hospitalizados).
A Caixa 13.3 contém uma visão geral esquemática dos diferentes tipos de questionários
autoaplicáveis.
O comum a todos os questionários autoaplicáveis é que os respondentes são o
locus de controle e completam as perguntas sem o envolvimento do entrevistador no
processo de pergunta-resposta. Como resultado, não apenas as categorias de perguntas e
respostas, mas tambémtodas as informaçõesinformações sobre o estudo e o questionário
devem ser acompanhadas do próprio questionário e da carta de apresentação ou das
instruções que o acompanham. A estratégia geral de coleta de dados é fazer com que as
demandas do respondente sejam as mais baixas possíveis, tornando o questionário
simples e atraente e fácil de preencher, além de fornecer aos respondentes recompensas
apropriadas. Para ter sucesso, todos esses elementos devem ser adaptados à população
em estudo e todos os elementos (como convite, instruções, questionário, lembretes)
precisam ser pré-testados para a situação específica da pesquisa.
262 Edith de Leeuw, Joop Hox

Caixa 13.3. Tipologia de Questionários Auto-Aplicáveis


Administração
Nível do entrevistador
Individual Grupo
envolvimento
Nenhum

Nenhum entrevistador, ou inquérito correio postal



intermediário de pesquisa na internet
pesquisador presente
Alguns
URA
O entrevistador seleciona
Drop off-pick up
respondente e psicológico ou
questionários
introduz pesquisa, mas teste educacional
SAQ no local, por exemplo, interceptação em
processo de pergunta-
shopping ou aeroporto
resposta é auto-administrado
Entrevistador restrito
Questionário em papel
assistido
entregue durante
Pergunta-resposta em
entrevista Pesquisas escolares
princípio de si mesmo
A-CASI Grupos especiais
administrado, mas
Vídeo- A-CASI
assistência disponível se
necessário

GLOSSÁRIO DE PONTOS-CHAVE

Painel de acesso.Um painel de acesso é basicamente uma rica base de dados de entrevistados dispostos, que é
usado como uma estrutura de amostragem para estudos de Internet, mas também pode ser usado para outros
procedimentos de coleta de dados. Os membros do painel são convidados e selecionados de várias maneiras, por
meio de auto-seleção por meio de sites, por aquisição por outros membros do painel, ao final de entrevistas
presenciais ou telefônicas bem-sucedidas, etc.
Comunicação Auditiva.O método de fornecer informações a outra pessoa que
depende de falar e ouvir, por meio do qual as perguntas são comunicadas
inteiramente em entrevistas por telefone e, em grande parte, em entrevistas
face a face.
Autoentrevista assistida por computador (CASI). Também conhecido como
Questionários Auto-Administrados Assistidos por Computador (CSAQ).A característica
definidora é que o entrevistado opera o computador: as perguntas são lidas na tela do
computador e as respostas são inseridas diretamente no computador. Uma das formas
mais conhecidas de CASI é a pesquisa na web.
URA. O acrônimo para Interactive Voice Response, que é uma tecnologia de
coleta de dados na qual o computador reproduz uma gravação da pergunta para
o respondente pelo telefone, e o respondente indica a resposta pressionando as
teclas apropriadas no teclado do telefone de discagem por tom. Questionário
Auto-Aplicável (SAQ).As perguntas são administradas e respondidas sem a
ajuda de um entrevistador. Existem várias formas de SAQ, por exemplo,
questionários em papel em pesquisas por correio, grupos administrados
Questionários Auto-Aplicáveis 263
questionário nas escolas (testes), questionários individuais que são preenchidos durante
uma entrevista para garantir a privacidade e questionários entregues, onde os
pesquisadores entregam os questionários pessoalmente, mas os respondentes preenchem
o questionário por conta própria e os devolvem pelo correio ou os guardam para o
agrimensor para coletar.
Metainformações em pesquisas:Informações sobre a pesquisa e as perguntas. Isso inclui
explicações sobre o objetivo e o conteúdo do estudo e instruções sobre como responder a
perguntas específicas. Em pesquisas com entrevistas, isso é transmitido principalmente
pelo entrevistador. Em questionários auto-administrados, isso deve ser feito explicitamente
por escrito. Em pesquisas na Web e outras formas de autoentrevista assistida por
computador, essas informações também podem estar (parcialmente) disponíveis no
sistema de ajuda.
Para informações:Informação que acompanha a informação textual e
acrescenta significado à informação textual. Por exemplo, enfatizar uma palavra
para dar-lhe mais importância é necessário para-informação. Nas entrevistas,
isso é obtido por meio de informações paralinguísticas (por exemplo, tom de
voz); em questionários autoaplicáveis por meio de linguagem gráfica (por
exemplo, fontes, layout).
Perguntas sensíveis. As perguntas são consideradas delicadas quando tratam de
assuntos privados, estressantes ou sagrados, e ao respondê-las tende a gerar
respostas emocionais, ou potencial medo de estigmatização por parte da pessoa ou
de seu grupo social.
Teoria da Troca Social. Uma teoria psicológica social que afirma que as ações dos
indivíduos são motivadas pelos retornos que se espera que essas ações tragam.
Comunicação visual.O método de fornecer informações a outra pessoa que depende
do que se vê, que é o meio pelo qual as perguntas são principalmente comunicadas
aos entrevistados por correio e pesquisas na web.
Design visual:Utilizar linguagem gráfica e layout de forma planejada e consistente
para facilitar a comunicação (visual) e transmitir as informações necessárias. O design
visual incorpora ferramentas de linguagem gráfica, como composição de fundo de
figura, localização e espaçamento, mudanças de tamanho, variações de brilho e
mudanças na similaridade e regularidade.
Pesquisa na Web (Internet).As pesquisas na Web são uma forma de questionários
autoaplicáveis, nos quais um computador administra um questionário em um site da Web. As
perguntas da pesquisa são visualizadas e respondidas usando um navegador da Web padrão
em um PC. As respostas são transferidas através da Internet para o servidor.

Você também pode gostar