Como verificar se uma pesquisa online foi adulterada

3

Eu votei em um site (não meu), sobre uma questão ontem. O resultado foi um lado (ou seja, mais de 90% das pessoas responderam Yes no momento da votação, cerca de 9k pessoas votaram em uma pesquisa de uma semana naquela época). No entanto, hoje, quando verifiquei o resultado, apenas 50% das pessoas responderam Yes . Como é possível que em um dia mais de 9 mil pessoas votassem quando o número médio de pessoas que votaram nos últimos dias fosse de apenas 1k?

Existe alguma maneira de verificar se a pesquisa on-line de terceiros foi moderada? Eu não tenho acesso a logs, e não monito de perto a "série temporal" dos votos. Mas ainda assim, há outras maneiras de verificar isso?

    
por Graviton 11.08.2009 / 13:21

4 respostas

12

Não assuma que qualquer pesquisa online é válida.

    
por 11.08.2009 / 13:25
4

A adulteração é difícil o suficiente para detectar se você tem acesso total ao servidor, do lado de fora seria quase impossível.

Mas há um problema mais amplo do que adulteração.

Mesmo se você pudesse garantir 100% de que a pesquisa não tivesse sido adulterada, ainda assim não seria válida.

Pense nisso dessa maneira - coloque a mesma enquete sobre o Linux versus o Windows (diga "Qual é o melhor, Linux ou Windows") no Slashdot e no Microsoft.com. Você acha que conseguiria os mesmos resultados? Claro que não.

O motivo é (e isso se aplica a todas as pesquisas on-line que não sejam feitas por organizações de pesquisa por convite):

1) O grupo que você está pesquisando é auto-selecionado. Nem todos terão escolhido votar, portanto, a opinião dos que estão no meio termo é perdida ou sub-representada, já que aqueles com opiniões extremas têm maior probabilidade de votar

2) Terá um viés intrínseco baseado no site fazendo a pesquisa (como no exemplo acima). Um site pode apelar para aqueles com uma visão específica ou apenas para um grupo demográfico específico que não seja representativo do mundo como um todo. O que leva a ...

3) Os resultados não serão ponderados para torná-lo representativo de todo o grupo em questão. Então, se o seu site é popular entre os homens, mas você está interessado na opinião da população como um todo, você precisa equilibrar isso para que os votos dos homens representem apenas 50% do total. Como isso é conseguido em uma pesquisa on-line? Simplesmente não é.

4) (Graças a @TFM) A questão pode ser tendenciosa. Por exemplo, perguntas com um encorajamento negativo: "Você consideraria o Linux mesmo que fosse complicado de instalar?"

Essencialmente, as pesquisas on-line não informam nada em que você possa confiar. Se eles estão certos, é provável que seja sorte como qualquer outra coisa.

    
por 11.08.2009 / 13:38
2

Isso não é trivial nem para o proprietário do site que executa a pesquisa.

Para você como um estranho, esqueça. Não há como você verificar se os votos são reais. Tal como acontece com a maioria das informações na Internet, tudo depende da confiança.

    
por 11.08.2009 / 13:27
1

O que significa "não moderado"? Através do twitter e do co, é possível direcionar uma enorme quantidade de pessoas para a página que votará de maneira predeterminada e, portanto, destruirá qualquer representatividade da pesquisa.

    
por 11.08.2009 / 23:51

Tags