Você ainda acha que margem de erro mede tudo que pode dar errado numa pesquisa eleitoral?

Margem de erro é o número mais citado quando alguém tenta avaliar se uma pesquisa eleitoral é confiável. Três pontos percentuais, quatro pontos, cinco pontos: esses números aparecem em todo relatório e toda divulgação de pesquisa. E a maioria das pessoas interpreta a margem de erro como uma medida geral de qualidade da pesquisa. Quanto menor, melhor. Quanto maior, menos confiável. O problema é que essa interpretação está errada.

O que a margem de erro realmente mede

A margem de erro mede apenas uma coisa: a variação esperada nos resultados por conta da aleatoriedade da amostragem. Em linguagem simples, ela responde à pergunta: se eu repetisse essa pesquisa com outra amostra do mesmo tamanho, o quanto os resultados poderiam variar?

Uma pesquisa com margem de 3 pontos e resultado de 40% para um candidato significa que, com 95% de probabilidade, o valor verdadeiro no eleitorado está entre 37% e 43%. Isso é tudo que a margem de erro diz. O que ela não diz é igualmente importante.

O que a margem de erro não cobre

A margem de erro não captura erros sistemáticos. E são esses erros que, na prática, comprometem mais pesquisas do que a variação amostral aleatória.

Questionário mal estruturado com perguntas na ordem errada, viés do entrevistador que induz respostas durante a coleta, zona rural ignorada na distribuição da amostra, cotas não cumpridas no campo: nenhum desses problemas aparece na margem de erro declarada.

Uma pesquisa com margem de 3 pontos e zona rural ignorada tem um erro de cobertura que pode ser muito maior do que 3 pontos. Mas o relatório vai continuar mostrando margem de 3 pontos como se nada estivesse errado.

A distinção que muda tudo

Existe uma diferença fundamental entre uma pesquisa tecnicamente perfeita e uma pesquisa mal executada.

A pesquisa tecnicamente perfeita tem margem de erro. Ela resulta da impossibilidade de entrevistar todo o eleitorado e da variação natural que qualquer amostragem introduz. Essa margem é esperada, quantificável e declarada.

A pesquisa mal executada pode ter erros sistemáticos muito mais graves que nunca aparecem em nenhum número do relatório. O viés de cobertura de uma zona rural ignorada, o viés de ancoragem de um questionário com sequência errada, o viés de seleção de cotas descumpridas: esses erros são silenciosos e muitas vezes maiores do que a margem de erro declarada.

Como avaliar uma pesquisa de verdade

A margem de erro é uma condição necessária para avaliar uma pesquisa. Mas não é suficiente. Avaliar uma pesquisa eleitoral com seriedade exige verificar também como o questionário foi estruturado, se a zona rural está representada proporcionalmente, se as cotas de sexo e faixa etária foram respeitadas e se os entrevistadores foram supervisionados durante a coleta.

Uma pesquisa com margem de 4 pontos e metodologia sólida é muito mais confiável do que uma pesquisa com margem de 3 pontos e zona rural ignorada.

O número que aparece no rodapé do relatório é apenas o começo da avaliação, não o fim.

Saiba como executar uma pesquisa com metodologia sólida do início ao fim: eleicoes.hashdata.com.br