[논문 리뷰] Yourfeed: Towards open science and interoperable systems for social media

Ziv Epstein, Hause Lin|arXiv (Cornell University)|2022. 07. 15.

Digital Marketing and Social Media인용 수 10

한 줄 요약

Yourfeed는 실시간 체류 시간 추적과 모듈식 설계를 통해 실제 뉴스피드 환경을 시뮬레이션함으로써 생태학적으로 타당한 소셜 미디어 연구를 가능하게 하는 개방적이고 상호운용성 있는 연구 플랫폼입니다. 연구자들이 제어된, 투명하고 윤리적으로 안전한 방식으로 콘텐츠 노출, 알고리즘 영향, 사용자 행동을 테스트할 수 있으며, 이는 소셜 미디어 연구 분야에서 개방 과학을 발전시킵니다.

ABSTRACT

Existing social media platforms (SMPs) make it incredibly difficult for researchers to conduct studies on social media, which in turn has created a knowledge gap between academia and industry about the effects of platform design on user behavior. To close the gap, we introduce Yourfeed, a research tool for conducting ecologically valid social media research. We introduce the platform architecture, as well key opportunities such as assessing the effects of exposure of content on downstream beliefs and attitudes, measuring attentional exposure via dwell time, and evaluating heterogeneous newsfeed algorithms. We discuss the underlying philosophy of interoperability for social media and future developments for the platform.

연구 동기 및 목표

• 학술 연구와 기업 소셜 미디어 플랫폼 간의 지식 격차를 해소하기 위해 생태학적으로 타당한 연구를 가능하게 하기 위해.
• 기존 연구 방법의 한계—예를 들어 설문 기반 도구(예: Qualtrics)와 플랫폼 API 제한—을 극복하기 위해 실제 뉴스피드 환경을 시뮬레이션하기 위해.
• 연구자들이 접근할 수 있는 모듈식이고 오픈소스 플랫폼을 제공함으로써 소셜 미디어 연구의 투명성과 재현 가능성을 증진하기 위해.
• 제3자 개발자가 알고리즘, 인터페이스, 콘텐츠 피드를 개발할 수 있도록 허용함으로써 소셜 미디어 시스템 간의 상호운용성을 촉진하기 위해.
• 제어된 그러나 현실적인 환경에서 알고리즘 설계가 주의 집중, 공유 행동, 신념 형성에 미치는 영향을 연구할 수 있도록 하기 위해.

제안 방법

• 연구자들이 웹 기반 설정을 통해 실험 조건, 콘텐츠 속성, 인터페이스 구성 요소를 정의할 수 있는 모듈식 아키텍처를 사용합니다.
• 각 실험에는 고유한 URL이 할당되며, 사용자가 플랫폼에 접속할 때 무작위로 조건에 할당됩니다.
• 플랫폼은 실제 소셜 미디어 플랫폼을 모방한 스크롤 가능한 시간순 레이아웃을 가진 시뮬레이션된 뉴스피드 인터페이스를 渲색합니다.
• 각 게시물에 대한 체류 시간이 실시간으로 추적되어 주의 집중과 참여도를 측정하는 핵심 지표가 됩니다.
• 연구자들은 순위 알고리즘, 자극 세트, UI 간섭 요소와 같은 맞춤형 구성 요소를 통합하여 특정 설계 효과를 테스트할 수 있습니다.
• 시스템은 피드 환경에서의 무작위 대조 실험(RCT)을 지원하여 콘텐츠 노출과 사용자 행동에 대한 인과적 추론을 가능하게 합니다.

실험 결과

연구 질문

• RQ1 특정 유형의 콘텐츠에 노출될 경우 사용자의 후속 신념과 태도는 실재적인 피드 환경에서 어떻게 영향을 받는가?
• RQ2 다양한 뉴스피드 알고리즘이 체류 시간 측정을 통해 사용자 주의 집중에 얼마나 큰 영향을 미치는가?
• RQ3 인터페이스 변경이나 알고리즘 순위 조정과 같은 설계 간섭 요소는 사용자 공유 및 참여 행동에 어떤 영향을 미치는가?
• RQ4 모듈식이고 상호운용성 있는 소셜 미디어 시스템은 기업 전용 플랫폼보다 더 투명하고 재현 가능한 연구를 가능하게 할 수 있는가?
• RQ5 사용자가 알고리즘과 인터페이스 선택을 직접 제어할 경우, 자율성, 플랫폼 다양성, 소셜 미디어에서의 민주적 참여에 어떤 영향을 미치는가?

주요 결과

• Yourfeed는 게시물당 체류 시간을 추적함으로써 실제 소셜 미디어 주의 집중 역학을 성공적으로 시뮬레이션하였으며, 이는 전통적인 설문 플랫폼에서 거의 결여된 지표입니다.
• 플랫폼은 설문 도구(예: Qualtrics)에서의 한 번에 하나씩의 콘텐츠 제시 방식의 한계를 극복하고 피드 레이아웃에서 무작위 실험을 수행할 수 있도록 했습니다.
• Yourfeed는 이질적인 뉴스피드 알고리즘과 UI 디자인의 테스트를 지원하여 그 행동적 영향을 직접 비교할 수 있도록 했습니다.
• 시스템은 제어된, 개방적이고 재현 가능한 연구 환경에서 주의 집중 노출과 사용자 상호작용 패턴을 캡처하는 데 가능성을 입증했습니다.
• 초기 데이터에 따르면 평균 체류 시간은 피드 내 게시물 순위가 낮아질수록 감소하며, 하위 순위 콘텐츠에 대해 사용자가 훨씬 적은 시간을 소비하는 것으로 나타났습니다.
• 플랫폼은 연구자들이 콘텐츠 노출이 공유 및 북마크 행동에 어떤 영향을 미치는지 평가할 수 있도록 하여, 실제 소셜 미디어 사용과 일치하는 패턴을 드러냈습니다.