[論文レビュー] Ideology-driven polarisation in online ratings: the review bombing of The Last of Us Part II

Giulio Giacomo Cantone, Venera Tomaselli+1 more|arXiv (Cornell University)|Apr 2, 2021

Misinformation and Its Impacts被引用数 7

ひとこと要約

本研究は、Metacriticにおける『The Last of Us Part II』のイデオロギー的駆動レビュー爆破を分析し、政治的に動機づけられたユーザーによる協調的で否定的なレーティングが、反対勢力からの草の根的反爆発を引き起こしたことを明らかにした。テキストマイニングとセンチメント分析を用いて、メタ意見とイデオロギー的極端化を同定し、レビュー爆破が単に誤情報に起因するという考えを疑問視しつつ、プラットフォームの客観性とユーザー主導の価値判断の根本的不一致を浮き彫りにした。

ABSTRACT

A review bomb is a large and quick surge in online reviews about a product, service, or business, coordinated by a group of people willing to manipulate public opinion about that entity. This study challenges the assumption that review bombing is solely a phenomenon of misinformation and connects motivations and substantial content of online reviews with the broader theory of judgement of facts and of value. These theories are verified in a quantitative analysis of the most prominent case of review bombing, which involves the video game The Last of Us Part II. It is discovered that ideology-driven ratings are followed by a grassroots counter-bombing, aimed at mitigating the effects of the negative ratings. The two factions of bombers, despite being politically polar opposites, are very similar in terms of other metrics. Evidence suggests the theoretical framework of political disinformation is insufficient to explain this case of review bombing. In light of the need to re-frame review bombing, recommendations are proposed for the preventive management of future cases.

研究の動機と目的

• 『The Last of Us Part II』のレビュー爆破の動機を調査し、こうした出来事が単に誤情報に起因するとする仮定に疑問を呈すること。
• オンラインレーティングにおける構造的・イデオロギー的ダイナミクスを分析し、とりわけ事実に基づく判断と価値に基づく判断の相互作用を明らかにすること。
• 極端に分極化したオンラインレーティング環境において、他のレビューを評価・批判する『メタ意見』のレビューがどのように出現するかを調査すること。
• 誤情報やフェイクレビュー検出モデルが、イデオロギー的動機によるが真実性のあるユーザー行動を捉えるのにどの程度限界を示すかを評価すること。
• レビュー爆破を、技術的・悪意ある問題としてではなく、プラットフォーム設計とユーザーの自己決定権との間にある根本的不一致の兆候として再定式化すること。

提案手法

• Metacriticの『The Last of Us Part II』のユーザーレビューとレーティングについて、時系列的パターンとセンチメントの変化に注目して定量的分析を実施した。
• テキストマイニングとセンチメント分析を適用し、レビューを肯定的、否定的、またはメタ意見に分類し、イデオロギー的コンテンツと修辞的戦略を同定した。
• NLP技術を用いて、議論的・評価的言語を検出することで、他のレビューを批判・評価する『メタ意見』の出現を追跡した。
• 初期のレビュー爆破者とその後の反爆発者という2つの対立するユーザー集団を特定し、行動的・言語的類似性を分析した。
• センチメント分析と語彙的分析を用いてイデオロギー的極端化を検出し、事実に基づく批判と価値に基づく判断の違いを明確にした。
• 現在のフェイクレビュー検出モデルが、イデオロギー的動機によるが真実性のあるユーザー生成コンテンツを同定するのにどの程度限界を示すかを評価した。

実験結果

リサーチクエスチョン

• RQ1 オンラインプラットフォームにおける協調的レビュー爆破の動機は何であり、その行動が誤情報ではなくイデオロギー的動機によって駆動される程度はどの程度か？
• RQ2 極端に分極化したオンラインレーティング環境において、他のレビューを評価する『メタ意見』のレビューはどのように機能するか？
• RQ3 レビュー爆破における対立する派閥どうしがイデオロギー的に反対であっても、行動的・言語的パターンにどの程度類似性を示すか？
• RQ4 従来のフェイクレビュー検出モデルを適用しても、なぜイデオロギー的動機によるレビュー爆破をプラットフォームは検出できないのか？
• RQ5 事実に基づく判断と価値に基づく判断の区別が、オンラインレビューの分極化ダイナミクスにどのように影響を与えるか？

主な発見

• 『The Last of Us Part II』のレビュー爆破は誤情報ではなくイデオロギー的動機によって引き起こされた。4chanなどのプラットフォームで政治的に動機づけられたユーザーによる協調的で否定的なレーティングが原因だった。
• 初期の否定的レーティングの影響を緩和するために、反対勢力のユーザーが草の根的反爆発を開始し、一時的に肯定的レーティングの波が発生した。
• イデオロギー的に反対であっても、両グループのレビュー量、タイミング、言語的スタイルという点で、顕著な類似性を示した。
• メタ意見——他のレビューを批判・評価するレビュー——は広く存在し、否定的および肯定的レーティングの正当性を形成する上で中心的な役割を果たした。
• 本研究では、従来のフェイクレビュー検出モデルが、イデオロギー的動機によるが真実性のあるユーザー行動を同定するのに不十分であることが判明し、新たな検出フレームワークの必要性が示唆された。
• 研究結果は、プラットフォームが客観的なレーティング集約を求める目標と、ユーザーの自己決定権や道徳的判断に基づく動機の間にある根本的不一致を示している。