[論文レビュー] Reliability of Content and Echo Chambers on YouTube during the COVID-19 Debate

Niccolò Di Marco, Matteo Cinelli+1 more|arXiv (Cornell University)|Jun 16, 2021

Misinformation and Its Impacts被引用数 6

ひとこと要約

本研究では、68のニュースチャンネルからのデータを用いて、COVID-19パンデミック期のYouTubeにおけるエンゲージメントを分析し、情報理論を応用して、ユーザーが政治的バイアスおよびコンテンツの信頼性に基づいてエコー・チェンバーを形成することを示した。結果は、ユーザーの相互作用に非ランダムなクラスタリングが存在することを示しており、実際のネットワークにおける結合エントロピーはランダム化された対照群よりも高いことが確認され、政治的および事実的次元の両方において、持続的なエコー・チェンバーの存在が裏付けられた。

ABSTRACT

The spread of inaccurate and misleading information may alter behaviours and complicate crisis management, especially during an emergency like the COVID-19 pandemic. This paper aims to investigate information diffusion during the COVID-19 pandemic by evaluating news consumption on YouTube. First, we analyse more than 2 million users' engagement with 13,000 videos released by 68 YouTube channels, labelled with a political bias and fact-checking index. Then, we study the relationship between each userÕs political preference and their consumption of questionable (i.e., poorly fact-checked) and reliable information. Our results, quantified using measures from information theory, provide evidence for the existence of echo chambers across two dimensions represented by political bias and the trustworthiness of information channels. We observe that the echo chamber structure cannot be reproduced after properly randomising the users' interaction patterns. Moreover, we observe a relation between the political bias of users and their tendency to consume highly questionable news.

研究の動機と目的

• COVID-19パンデミック期におけるYouTube上での情報拡散に、政治的バイアスとコンテンツ信頼性がどのように影響を与えるかを調査すること。
• ユーザー参加行動パターンに、政治的および事実的次元の両方においてエコー・チェンバーが存在するかどうかを特定すること。
• 情報理論的指標を用いて、ユーザー相互作用の非ランダム構造を定量化すること。
• 実際のネットワークとランダム化された対照群を比較することで、観察されたエコー・チェンバー効果が統計的に有意であるかどうかを評価すること。

提案手法

• 2019年12月から2020年9月にかけて、68のYouTubeニュースチャンネルが公開した12,933本の動画から、合計1090万件のコメントを収集した。
• メディア・バイアス・ファクト・チェック（MBFC）の評価を用いて、チャンネルに政治的バイアスと事実的報道スコアを割り当てた。政治的バイアスは-1（極左）から1（極右）の範囲、事実的報道スコアは0（非常に低い）から1（非常に高い）の範囲で数値化した。
• ユーザーと動画の共同コメントネットワーク（二部グラフ）を構築し、ユーザー参加行動のパターンをモデル化した。
• マスロフ＝スネッペン法を用いて、元の次数分布を保持したままネットワークのリンクをランダム化し、実際のネットワークとの比較を可能にした。
• 政治的バイアスとコンテンツ信頼性の分布の結合エントロピーを計算し、ユーザー相互作用パターンにおける不確実性と構造を定量化した。
• グリッドベースの量子化（解像度0.01）を用い、理論的最大値で正規化したエントロピー値を用いて、実際のネットワークとランダム化されたネットワークを比較した。

実験結果

リサーチクエスチョン

• RQ1 COVID-19パンデミック期のYouTubeにおいて、政治的バイアスおよびコンテンツ信頼性に基づいてエコー・チェンバーが存在するか？
• RQ2 観察されたエコー・チェンバー構造は、統計的に非ランダムなものであり、それらがランダムなユーザー参加行動パターンから生じる可能性はあるか？
• RQ3 実際のネットワークとランダム化されたネットワークの両方において、ユーザー参加行動における政治的バイアスと事実的報道の結合分布はどのように異なるか？
• RQ4 ユーザーの政治的傾向が、信頼性が低い（事実チェックが低い）コンテンツの消費にどの程度相関しているか？
• RQ5 ユーザー参加行動パターンにおける不確実性（結合エントロピー）の情報理論的測度は何か？ また、実際のネットワークとランダム化されたネットワークの間でどのように異なるか？

主な発見

• マスロフ＝スネッペンによるランダム化が、政治的バイアスおよびコンテンツ信頼性における観察されたクラスタリングを再現できなかったことから、ユーザー参加におけるエコー・チェンバー構造が非ランダムであることが確認された。
• 政治的バイアスの結合エントロピーは、実際のネットワークで0.3863、ランダム化されたバージョンで0.3338であった。これは、実データにおいて不確実性が高く、より構造的なクラスタリングが存在することを示している。
• コンテンツの持続性（信頼性）に関しては、実際のネットワークで0.4297、ランダム化されたバージョンで0.3338であった。実際のユーザー行動において、より強い構造的パターンが存在することが示された。
• 極端な政治的傾向を示すユーザーは、事実的報道スコアが低いチャンネルからのコンテンツを、顕著に多く消費する傾向を示しており、政治的バイアスとコンテンツの信頼性の間の一致が確認された。
• 政治的および事実的次元の両方においてエコー・チェンバーが持続していることから、アルゴリズムのキュレーションとユーザーの好みが、イデオロギー的および認識論的分離を強化していることが示唆された。
• 結果から、パンデミックのような危機期におけるYouTube上での情報エコシステムはランダムではなく、体系的に構造化されており、公衆衛生のコミュニケーションやメディアリテラシーに影響を及ぼす可能性があることが示された。