A confiabilidade e validade de 28 painéis em 14 países.
A qualidade da amostra é crítica, especialmente em pesquisas com vários países. A amostra ruim fornece resultados enganosos, derrotando o objetivo de fazer pesquisas. A amostra de baixa qualidade acrescenta insulto à lesão, causando um golpe na reputação de nossa indústria.
Identificar uma boa amostra do Bad fará ou quebrará seu projeto. Neste artigo, transmitimos descobertas importantes de uma confiabilidade e validade de 28 painéis e 14 países, envolvendo mais de 28.000 pessoas. Relatamos as lições aprendidas e propomos perguntas críticas para fazer fornecedores em potencial.
É sabido que algumas fontes de amostra são melhores que outras e que, em alguns países, é mais difícil obter amostras representativas. Mas onde está a evidência além da experiência anedótica? O que deve orientar as decisões de compra? A reputação do fornecedor? Preço? Usando um fornecedor consistente em vários mercados? Todas as amostras on -line cobrem basicamente a mesma população, certo?
Para responder a essas perguntas e muito mais, realizamos um estudo de 28 painéis em 14 países. Queríamos saber se os painéis eram confiáveis, então executamos duas ondas e avaliamos a confiabilidade do teste de teste. Também precisávamos entender se esses painéis eram verdadeiramente representativos das nações que cobriam. Portanto, avaliamos a validade dos critérios, comparando os resultados da pesquisa com dados do censo local, pesquisas domésticas do governo e outras fontes de dados confiáveis.
As nações pesquisadas foram austrália, Brasil, China, França, Alemanha, Índia, Itália, Japão, México, Rússia, Cingapura, Espanha, África do Sul e Tailândia. Em cada país, obtivemos a amostra de dois fornecedores presumidos como provedores de qualidade com base em reputação e experiência anterior. Cada pesquisa teve amostras de 500 ou mais pessoas de cada painel. Repetimos o mesmo estudo uma semana ou mais após a primeira onda. Em países com populações muito altas da Internet, estabelecemos cotas para garantir que a população fosse demograficamente representativa da população. Em países com população relativamente baixa da Internet, definimos cotas para garantir a representatividade daqueles com acesso à Internet. A pesquisa foi amigável para dispositivos móveis.
Com este estudo, aprendemos várias lições importantes sobre o que procurar e-mais importante-do que observar ao adquirir amostras de vários países. Propomos uma lista de verificação de perguntas para fazer fornecedores ao adquirir amostras de vários países, porque os insights valiosos que nossas organizações precisam só podem ser derivados de uma amostra válida e confiável.
Para saber mais sobre a confiabilidade e validade dos painéis em todo o mundo, leia nosso whitepaper.
