• Principal
  • Notícia
  • Perguntas e respostas: o que significa a decisão da votação do New York Times

Perguntas e respostas: o que significa a decisão da votação do New York Times

O jornal New York Timese a CBS News foi uma grande notícia no mundo das pesquisas neste fim de semana quando anunciaram que começarão a usar painéis de pesquisa online do YouGov como parte de sua cobertura eleitoral. YouGov, uma empresa de pesquisa com sede no Reino Unido fundada em 2000, usa tais painéis em vez de pesquisas por telefone tradicionais; o painel oVezese a CBS está usando tem mais de 100.000 membros. oVezes,citando preocupações sobre a escassez de dados de pesquisa não partidários de alta qualidade, particularmente em nível estadual, diz que planeja incluir os resultados do YouGov como parte de 'um conjunto diversificado de pesquisas que empregam metodologias diversas'.


Keeter

Embora os painéis tenham sido usados ​​há muito tempo por pesquisadores de mercado, eles são relativamente novos no campo da pesquisa de opinião e as opiniões sobre eles estão nitidamente divididas. Pedimos a Scott Keeter, o diretor de pesquisa do Pew Research Center, para explicar as questões em jogo e nos dar suas idéias preliminares.

O que há de diferente nas pesquisas do painel YouGov em relação às pesquisas anteriormente usadas pelo Times, CBS e Pew Research?

Existem duas grandes diferenças. Uma delas é que são conduzidas inteiramente online, entre usuários da Internet. Pessoas que não usam a Internet não estão incluídas (mais sobre isso abaixo). A outra - e provavelmente a maior - diferença é que as amostras para essas pesquisas são selecionadas usando os chamados métodos de amostragem não probabilística. Durante décadas, apenas amostras probabilísticas - ou aleatórias - foram geralmente aceitas como uma forma científica de produzir amostras precisas e representativas para pesquisas.

Explique a diferença entre uma amostra probabilística e uma não probabilística.


A American Association for Public Opinion Research, a associação líder de profissionais de pesquisa de opinião, explicou isso bem. Aqui está como sua Força-Tarefa sobre Amostragem de Não Probabilidade colocou em seu relatório principal do ano passado: 'Em uma amostra de probabilidade, todos na população de interesse (por exemplo, todos os eleitores registrados em uma pesquisa política) têm a chance de ser selecionados para um entrevista. Saber essas chances é fundamental para criar estimativas estatísticas válidas ”. As amostras não probabilísticas, ao contrário, 'são aquelas em que os participantes são escolhidos ou se escolhem de forma que a chance de serem selecionados não seja conhecida'.



É assim queTimes ’Nate Cohn explicou como o YouGov monta seu painel online: A empresa 'tenta construir um painel grande e diversificado e, em seguida, combinar seus painelistas com respondentes demograficamente semelhantes da American Community Survey…. Esta etapa tem como objetivo simular a amostragem probabilística. Mas pode exigir suposições significativas sobre a composição do eleitorado, incluindo o partidarismo ”.


Os maiores benefícios da amostragem probabilística são (1) o fato de que os pesquisadores estão selecionando os respondentes, em vez de permitir que os respondentes sejam voluntários para participar, e (2) que conhecer as chances de selecionar um indivíduo nos permite estimar quanto custa uma determinada amostra provavelmente será diferente do que teríamos encontrado se tivéssemos entrevistado todos na população. Isso aparece como a 'margem de erro' de uma pesquisa. Não há margem de erro comparável para amostras não probabilísticas.

Então, por que o Times e a CBS buscariam métodos não probabilísticos? Os métodos baseados em probabilidade, como pesquisas por telefone de discagem de dígitos aleatórios (RDD), têm seus próprios problemas?


Na verdade eles fazem. Como nossa pesquisa anterior sobre não respostas à pesquisa mostrou, é cada vez mais difícil alcançar e entrevistar pessoas. Mas há dois pontos importantes a serem observados. Em primeiro lugar, as pesquisas por telefone - incluindo as nossas - em geral fizeram um bom trabalho ao prever as eleições em 2012 e nos anos anteriores. Nossas amostras continuam a se parecer muito com a população na maioria dos indicadores para os quais temos dados confiáveis ​​do Censo e outras fontes de alta qualidade.

Em segundo lugar, os problemas enfrentados por um método de pesquisa não podem, por si só, ser usados ​​para justificar a adoção de uma alternativa. A alternativa tem de provar ser suficientemente precisa e precisa para os fins aos quais aplicamos atualmente pesquisas telefônicas RDD. O campo sabe muito sobre os preconceitos e problemas com nossos métodos atuais. Há um entendimento muito menos completo dos preconceitos e problemas com métodos não probabilísticos, mas tenho esperança de que obteremos esse entendimento por meio de um processo de experimentação cuidadosa

O que significa para o jornalismo, e para o mundo das pesquisas em geral, que o Times e a CBS, de todas as organizações de notícias, decidiram usar o painel do YouGov? Você esperaria que outras organizações de notícias o seguissem agora que aqueles dois quebraram o gelo?

Este é um grande negócio no mundo das pesquisas. Até agora, nenhuma grande organização de notícias colocou sua marca no uso de pesquisas baseadas em métodos não probabilísticos. A mudança desencadeou um debate muito animado no Twitter entre jornalistas e pesquisadores. Existem fortes opiniões sobre a questão das amostras não probabilísticas. Aqui está uma visão, deWashington Postpesquisador Scott Clement:


Notícias do fim de semana: @nytimes e @CBSNewsPoll abandonam décadas de métodos de pesquisa de qualidade.

- Scott Clement (@sfcpoll) 27 de julho de 2014

E uma visão diferente de Amy Walter, editora nacional do Cook Political Report:

Esta é a realidade: a pesquisa apenas por telefone / celular está morrendo quase que totalmente. O único Q é o que o substitui

- amy walter (@amyewalter) 28 de julho de 2014

Não posso prever o que outras organizações farão, mas espero que isso estimule mais experimentação - e isso é bom para o campo. Porque oVezese a CBS News tem boa reputação em transparência, espero que aprenderemos muito mais sobre a metodologia YouGov nas próximas semanas. Isso também é bom.

Como uma pesquisa baseada apenas em usuários da Internet pode fornecer uma representação precisa de todo o público?

É importante lembrar que nem todo mundo está online: de acordo com nossas estimativas mais recentes, 89% dos adultos nos EUA usam a Internet. A boa notícia do ponto de vista das pesquisas é que esse número está aumentando constantemente - era de 79% há apenas cinco anos -, portanto, o viés potencial de excluir os usuários de fora da Internet é cada vez menor.

Ainda acontece que as pessoas que não usam a Internet são diferentes em muitas maneiras das que usam - em particular, são mais velhas, mais pobres e menos educadas. Mas seus números cada vez menores significam que sua ausência em uma pesquisa não fará uma grande diferença nas conclusões da maioria das perguntas. Ainda assim, pensamos que é importante ser capaz de descrever nossas amostras como 'representativas nacionalmente' e tentar garantir que sejam, sempre que possível.

Se isso se provar um esforço bem-sucedido para o Times e a CBS News, isso significa que outras pesquisas irão adotar a amostragem não probabilística?

Não necessariamente. É importante ter em mente que os painéis não probabilísticos online variam em qualidade, assim como as pesquisas baseadas em probabilidade. Um dos pontos mais importantes no relatório da Força-Tarefa AAPOR é que não há um método de consenso único para a realização de 'amostragem não probabilística'. Existem muitas abordagens diferentes, e a maioria delas não tem o registro público de desempenho do YouGov. O YouGov vem realizando pesquisas públicas nas eleições há muitos anos. Como resultado, eles têm um histórico que pode ser comparado com pesquisas baseadas em probabilidade. Até que tenhamos mais organizações conduzindo pesquisas antes das eleições e explicando seus métodos em detalhes, acredito que a adoção da amostragem não probabilística para as pesquisas políticas ocorrerá lentamente.

A Pew Research não está usando um painel online agora?

Temos um painel - é chamado 'The American Trends Panel' - mas é muito diferente daquele que oVezese CBS estão usando. É baseado em uma amostra probabilística e, embora a maioria das entrevistas seja conduzida online, também temos painelistas que não usam a Internet. Entrevistamos essas pessoas por correio ou telefone. Aqui está um link para mais detalhes.

A Pew Research algum dia usará o tipo de painel não probabilístico online que o Times e a CBS estão usando?

Sim, vamos - mas a verdadeira questão é para que vamos usá-lo. Nossos padrões atuais permitem o uso de amostras não probabilísticas para determinados fins, como a realização de experimentos ou entrevistas em profundidade. Além disso, embarcamos em um programa de pesquisa para nos ajudar a entender melhor as condições sob as quais amostras não probabilísticas podem fornecer dados cientificamente válidos. Também estamos explorando como utilizar fontes de dados que não sejam de pesquisa, que por sua própria natureza tendem a vir de 'amostras' que não são aleatórias. Mas até que entendamos os prós e contras desses métodos muito melhor, teremos muito cuidado ao incorporá-los em nossa pesquisa.