[논문 리뷰] A Reddit Dataset for the Russo-Ukrainian Conflict in 2022

Yiming Zhu, Ehsan-ul Haq외 3명|arXiv (Cornell University)|2022. 06. 10.

Opinion Dynamics and Social Influence인용 수 13

한 줄 요약

이 논문은 2022 러시아-우크라이나 전쟁에 초점을 맞춘 공개된 Reddit 데이터셋을 처음으로 소개한다. 12개의 정제된 서브레딧에서 30만 건이 넘는 게시글과 800만 개가 넘는 댓글을 수집하였다. 연구 결과, 특히 이모지 사용과 콘텐츠 톤에서 강한 프로-우크라이나 성향 편향이 드러났으며, '군사 관련' 게시글은 일반 전쟁 논의보다 더 높은 참여도를 보였지만, 낮은 긍정성과 함께 나타났다.

ABSTRACT

Reddit consists of sub-communities that cover a focused topic. This paper provides a list of relevant subreddits for the ongoing Russo-Ukrainian crisis. We perform an exhaustive subreddit exploration using keyword search and shortlist 12 subreddits as potential candidates that contain nominal discourse related to the crisis. These subreddits contain over 300,000 posts and 8 million comments collectively. We provide an additional categorization of content into two categories, "R-U Conflict", and "Military Related", based on their primary focus. We further perform content characterization of those subreddits. The results show a surge of posts and comments soon after Russia launched the invasion. "Military Related" posts are more likely to receive more replies than "R-U Conflict" posts. Our textual analysis shows an apparent preference for the Pro-Ukraine stance in "R-U Conflict", while "Military Related" retain a neutral stance.

연구 동기 및 목표

• 2022 러시아-우크라이나 전쟁을 위한 공개된, 주제별로 특화된 Reddit 데이터셋의 부족을 보완하기 위해.
• 키워드 기반 탐색과 콘텐츠 필터링을 통해 관련성이 높은 12개의 서브레딧을 식별하고 정제하기 위해.
• 언어학적, 참여도, 정서 분석 기법을 사용하여 이러한 서브레딧 내의 논의를 특성화하기 위해.
• 지역적 갈등 기간 동안 소셜 미디어 분석, 의견 특성화, 오락성 탐지 분야의 향후 연구를 지원하기 위해.

제안 방법

• 우크라이나, 러시아, 푸틴, 제렌스키 등과 같은 용어와 갈등 관련 단어를 포함한 키워드 목록을 사용하여 서브레딧 탐색을 철저히 수행하였다.
• 관련성, 활동도, 콘텐츠 품질을 기준으로 12개의 서브레딧을 선정하였으며, 일반 전쟁 논의와 군사 중심 논의를 모두 포함하도록 하였다.
• Pushshift.io API를 통해 게시글과 댓글을 수집하였으며, 2022년 2월부터 4월까지의 데이터에 집중하였다.
• 콘텐츠를 두 가지 유형으로 분류: 'R-U 갈등'(일반 논의)과 '군사 관련'(전술적, 전략적, 운영적 콘텐츠).
• 어휘 빈도, 평균 텍스트 길이, 이모지 사용 패턴을 사용하여 정서와 입장을 탐지하기 위한 언어학적 분석을 수행하였다.
• VADER 정서 분석을 적용하여 복합 점수 기반으로 게시글의 정서를 긍정, 부정, 중립으로 분류하였다.

실험 결과

연구 질문

• RQ1 2022 러시아-우크라이나 전쟁에 대한 공개 논의를 가장 잘 대변하는 Reddit 서브레딧은 무엇인가?
• RQ2 전쟁의 초기 단계 동안 Reddit에서 논의의 규모와 정서는 어떻게 변화했는가?
• RQ3 'R-U 갈등'과 '군사 관련' 서브레딧 간의 언어적 특징, 참여도, 정서에는 어떤 차이가 있는가?
• RQ4 이 데이터셋은 이모지 사용과 콘텐츠 톤에서 어느 정도 프로-우크라이나 입장을 반영하고 있는가?

주요 결과

• 이 데이터셋은 12개의 정제된 서브레딧에서 수집된 30만 건이 넘는 게시글과 800만 개가 넘는 댓글을 포함하며, 러시아의 침공이 2022년 2월 24일에 발생한 후 활동이 급격히 증가하였다.
• '군사 관련' 서브레딧의 게시글은 'R-U 갈등' 서브레딧의 게시글보다 훨씬 더 많은 댓글을 받았으며, 이는 전술적·전략적 주제에서 더 높은 참여도를 보임을 시사한다.
• 이모지 사용에서 강력한 프로-우크라이나 성향 편향이 관찰되었으며, '우크라이나 심장'(❤️‍🩹), '해바라기'(🌻), '러시아 코미디언'(🤡) 등의 기호를 자주 사용하여 지지와 경멸을 표현하였다.
• 'R-U 갈등' 카테고리의 평균 정서 점수는 0.22로 '군사 관련' 카테고리(0.18)보다 더 높은 긍정성 비율을 보였지만, 부정 정서 수준은 유사하였다.
• '군사 관련' 카테고리의 부정 정서 빈도 변동성(σ = 0.07)은 'R-U 갈등'(σ = 0.04)보다 더 높았으며, 특히 2022년 4월 21일 이후로 두드러졌다.
• 이 데이터셋에는 러시아(russia) 및 러시아정치(russiapolitics)와 같은 격리된 서브레딧의 콘텐츠가 포함되어 있지 않으며, API 제약으로 인해 삭제된 게시글/댓글도 누락되어 있다.