[論文レビュー] Yourfeed: Towards open science and interoperable systems for social media

Ziv Epstein, Hause Lin|arXiv (Cornell University)|Jul 15, 2022

Digital Marketing and Social Media被引用数 10

ひとこと要約

Yourfeed は、滞在時間の追跡とモジュラー設計を備えた、本物のニュースフィード環境をシミュレートすることで、生態的妥当性のあるソーシャルメディア研究を可能にするオープンで相互運用可能な研究プラットフォームです。研究者は、コンテンツ露出、アルゴリズム効果、ユーザー行動を、制御可能で透明性があり、倫理的に適切な方法でテストでき、ソーシャルメディア研究におけるオープンサイエンスを前進させます。

ABSTRACT

Existing social media platforms (SMPs) make it incredibly difficult for researchers to conduct studies on social media, which in turn has created a knowledge gap between academia and industry about the effects of platform design on user behavior. To close the gap, we introduce Yourfeed, a research tool for conducting ecologically valid social media research. We introduce the platform architecture, as well key opportunities such as assessing the effects of exposure of content on downstream beliefs and attitudes, measuring attentional exposure via dwell time, and evaluating heterogeneous newsfeed algorithms. We discuss the underlying philosophy of interoperability for social media and future developments for the platform.

研究の動機と目的

• 学術的研究と企業のソーシャルメディアプラットフォームの間の知識格差を埋めるために、生態的妥当性のある研究を可能にすること。
• 従来の調査ツール（例：Qualtrics）やプラットフォームAPIの制限といった既存の研究手法の限界を乗り越えるために、本物のニュースフィード環境をシミュレートすること。
• 研究者が利用可能なモジュラーでオープンソースのプラットフォームを提供することで、ソーシャルメディア研究における透明性と再現可能性を促進すること。
• サードパーティによるアルゴリズム、インターフェース、コンテンツフィードの開発を可能にすることで、ソーシャルメディアシステムにおける相互運用性を促進すること。
• 制御されたが現実的で、かつリアルな環境において、アルゴリズム設計が注目、共有行動、信念形成に与える影響を研究できるようにすること。

提案手法

• 研究者がウェブベースの設定を通じて実験条件、コンテンツ属性、インターフェースコンポーネントを定義できるモジュラーなアーキテクチャを採用している。
• 各実験には固有のURLが割り当てられ、ユーザーがプラットフォームにアクセスした際にランダムに条件に割り当てられる。
• プラットフォームは、実際のソーシャルメディアプラットフォームを模倣したスクロール可能で時系列順のレイアウトを持つシミュレートされたニュースフィードインターフェースをレンダリングする。
• 各投稿の滞在時間（dwell time）がリアルタイムで追跡され、注目と関与度を測る重要な指標が得られる。
• 研究者は、ランク付けアルゴリズム、刺激セット、UI干渉など、特定のデザイン効果をテストできるカスタムコンポーネントを統合できる。
• フィード環境における無作為化比較試験（RCT）をサポートしており、コンテンツ露出とユーザー行動に関する因果推論が可能になる。

実験結果

リサーチクエスチョン

• RQ1 特定の種類のコンテンツにさらされた場合、ユーザーのその後の信念や態度にどのような影響が生じるのか、現実的なフィード環境において。
• RQ2 異なるニュースフィードアルゴリズムは、滞在時間という指標で測定した場合、ユーザーの注目にどの程度影響を与えるのか。
• RQ3 インターフェースの変更やアルゴリズム的ランク付けといったデザイン介入は、ユーザーの共有行動や関与度にどのような影響を与えるのか。
• RQ4 モジュラーで相互運用可能なソーシャルメディアシステムは、独占的プラットフォームよりも透明性と再現性に優れた研究を可能にするのか。
• RQ5 ユーザーがアルゴリズムやインターフェースを選択可能にする場合、自律性、プラットフォームの多様性、そしてソーシャルメディアにおける民主的参加にどのような意味を持つのか。

主な発見

• Yourfeed は、伝統的な調査プラットフォームではほとんど欠落している「投稿ごとの滞在時間」を追跡することで、本物のソーシャルメディアの注目ダイナミクスを効果的にシミュレートしている。
• プラットフォームは、Qualtrics のようなツールで見られる「1件ずつ提示」の制限を克服し、フィードレイアウト上でランダム化実験を実施できる。
• Yourfeed は、多様なニュースフィードアルゴリズムやUIデザインのテストを可能にし、それらの行動的影響を直接比較できる。
• システムは、制御された、オープンで再現可能な研究環境において、注目的露出とユーザーの相互作用パターンを捉える可能性を示している。
• 予備データでは、投稿の順位が下がるほど平均滞在時間が短くなる傾向が確認されており、低ランクのコンテンツには著しく時間が割かれないことが示された。
• プラットフォームは、コンテンツ露出が共有やブックマーク行動に与える影響を評価できるようになっており、実際のソーシャルメディア利用と整合的なパターンが得られた。