偽回答者を排除しても誤差は消えない、Pew Research Centerが3手法を比較
No Easy Fix for Bogus Respondents in Online Opt-In Polls
Pew Research Centerが11,114人を対象にオンライン・オプトイン調査を実施し、偽回答者を排除する3つの手法を比較した。トラップ質問、CloudResearchのSentryによる事前スクリーニング、有権者ファイルとの照合のいずれも、データ品質をある程度改善するものの、確実な解決策にはならないことが判明。特に有権者ファイル照合は、名前や住所の提供を拒否した正直な回答者まで排除し、誤差をわずかに増加させた。3手法はいずれも2024年大統領選で民主党支持を過大評価する傾向を強めたが、これは党派バイアスではなく、偽回答者が当選者（トランプ氏）に投票したと答える傾向によるものだという。
有権者ファイルとの照合は、主に善良な回答者（例えば、単に名前や住所の提供を拒否した人々）を排除することで、誤差をわずかに増加させた。
HNでの議論
37- 0points
そしてここで私は、2009年のTime Magazineのパーソン・オブ・ザ・イヤー投票を4chanのユーザーが偽装して、上位当選者のイニシャルで「MARBLECAKE, ALSO THE GAME」と綴った時点で、これはあらゆる合理的な疑いを超えて証明されていたと思っていたんだが：
https://techcrunch.com/2009/04/27/time-magazine-throws-up-it...
あるいは2012年にKim Jong Unが勝って、「KJUGASCHAMBER」と綴った時とか：
https://observer.com/2012/12/4chan-successfully-votes-kim-jo...
- noduerme
回答者の10%が国際宇宙ステーションを訪れたことがあると主張したという話は面白かった。これはこの nugget[0] を思い出させた。この話題に詳しくない人向けに言うと、これはユダヤ人の20%がイエスを信じているという意味ではない……世論調査の回答者の20%が、正気でないか混乱しているか、はっきりした理由もなくユダヤ人だと自称したという意味だ。「ビーガンの5人に1人が肉を食べると言う」のと似ている。
https://www.timesofisrael.com/jews-for-jesus-poll-15-of-jewi...
- tokioyoyo
友人の間では、世論調査とテクノロジーをめぐる複数のアイデアについて時折議論してきた。なぜなら、政府の意思決定に関して「人々が何を望んでいるか」を知る「信頼できる」方法は本当に存在しないからだ。これは「リーチとインセンティブ」の非常に難しい問題で、意見を尋ねること自体が、質問の仕方次第で意見そのものを変えてしまう可能性もある。とはいえ、一般的事柄について、過度にサンプリングされたバージョンではなく、人々の本音の意見を見られたら cool だろうな。
- rsktaker
オンラインのオプトイン式世論調査なんて、やらなければいいだけでは？
あの体験を楽しむ人なんていない。私自身、個人的には「偽の」回答者だ。
- nilamo
世論調査には一切同情しない。お前らが勝手にSMSを送るのはTCPA違反だし、私をこれほど軽んじる組織に答えるつもりはない。