Deve ser simples fazer a alguém uma pergunta factual simples e receber uma resposta confiável. Perguntas como: “Você tem filhos?” “Você frequenta a igreja toda semana?” ou “Você possui uma conta bancária?” parece fácil e claro.
No entanto, no momento em que começamos a escrever até essas perguntas aparentemente simples da pesquisa, descobrimos rapidamente ambiguidade e possíveis complicações. Por exemplo, ao perguntar: “Você tem filhos?” Também queremos dizer filhos adultos? Contamos crianças que vivem principalmente com um ex-cônjuge? Torna -se tentador adicionar especificações elaboradas para definir com precisão o que queremos dizer.
Mas aqui está o problema: as especificações excessivamente detalhadas geralmente levam diretamente a erros de medição substanciais.
Este ponto foi claramente ilustrado por dois pesquisadores acadêmicos em um artigo intitulado “Uma pergunta simples percorre um longo caminho”, publicado no Jornal de Estatística e Metodologia da Pesquisa. Os pesquisadores replicaram uma série de perguntas sobre a propriedade dos ativos financeiros de um estudo de saúde e saúde de longa data. Os entrevistados foram questionados pela primeira vez sobre possuir ações, títulos, seguidos por CDs, títulos de poupança do governo ou projetos de tesouro – nessa sequência. Finalmente, os participantes receberam aleatoriamente uma das três versões de uma pergunta sobre a propriedade de contas bancárias:
- Versão A (mais complicado): “Além de qualquer coisa que você já mencionou, você ou seu cônjuge/parceiro têm alguma conta de verificação ou poupança ou fundos do mercado monetário? Por favor, não inclua CDs.”
- Versão B (moderadamente complicada): “Você ou seu cônjuge/parceiro têm contas de verificação ou poupança ou fundos do mercado monetário?”
- Versão C (menos complicada): “Você ou seu cônjuge/parceiro têm alguma conta de verificação ou poupança? Você ou seu cônjuge/parceiro têm algum fundos do mercado monetário?”
Os resultados foram impressionantes:
- Versão A (mais complicado): 74% relataram possuir uma conta bancária.
- Versão B (moderadamente complicada): 85% relataram possuir uma conta bancária.
- Versão C (menos complicada): 92% relataram possuir uma conta bancária.
Essas diferenças são enormes! Dados os dados do Federal Reserve mostrando que aproximadamente 94% dos adultos realmente possuem uma conta bancária, a pergunta mais simples (versão C) se aproxima mais de capturar com precisão a realidade. Além disso, os pesquisadores demonstraram que o mecanismo causal é que questões mais simples facilitam para pessoas com níveis mais baixos de capacidade cognitiva de responder corretamente. Isso é verdade mesmo ao controlar a idade, a educação e a alfabetização financeira.
A implicação prática é clara: se você deseja minimizar o erro de medição, mantenha suas perguntas sobre a pesquisa super simples. Resista à tentação de esclarecer ou inserir excessivamente advertências excessivas. Se uma pergunta da pesquisa se tornar complicada devido a uma necessidade legítima de nuances, divida -a em peças menores e mais simples. Garantir que cada parte seja fácil, direta e clara, melhorará significativamente a validade e a confiabilidade dos resultados da sua pesquisa.
–Joe HopperPh.D.