[논문 리뷰] A Warm Welcome Matters! The Link Between Social Feedback and Weight Loss in /r/loseit

Tiago Oliveira Cunha, Ingmar Weber외 1명|arXiv (Cornell University)|2017. 01. 18.

Social Media and Politics참고 문헌 34인용 수 9

한 줄 요약

이 연구는 /r/loseit 서브레딧에서 첫 번째 게시물에 대해 사회적 피드백(댓글)을 받는 것이 체중 감량 결과에 미치는 영향을 분석하기 위해 매칭 기반 원인 인과 추론 프레임워크를 제안한다. 관찰 데이터를 사용하여, 최소 4개의 댓글을 받은 사용자는 댓글을 받지 않은 사용자보다 66% 더 높은 확률로 재방문하며, 활동 증가나 더 긴 커뮤니티 소속 기간과는 무관하게 평균 9파운드 더 많은 체중 감량을 보였다.

ABSTRACT

Social feedback has long been recognized as an important element of successful health-related behavior change. However, most of the existing studies look at the effect that offline social feedback has. This paper fills gaps in the literature by proposing a framework to study the causal effect that receiving social support in the form of comments in an online weight loss community has on (i) the probability of the user to return to the forum, and, more importantly, on (ii) the weight loss reported by the user. Using a matching approach for causal inference we observe a difference of 9 lbs lost between users who do or do not receive comments. Surprisingly, this effect is mediated by neither an increase in lifetime in the community nor by an increased activity level of the user. Our results show the importance that a "warm welcome" has when using online support forums to achieve health outcomes.

연구 동기 및 목표

• 온라인 체중 감량 커뮤니티에서 첫 번째 게시물에 대해 사회적 피드백(댓글)을 받는 것이 사용자 재방문 행동과 체중 감량에 미치는 인과적 영향을 조사하기 위해.
• 참여 지표를 넘어서 실제 건강 결과에 영향을 주는 온라인 사회적 지지의 영향을 이해하는 데서 발생하는 격차를 메우기 위해.
• 관찰 데이터에서 교란 요인을 보정하기 위해 매칭 기반 원인 인과 추론 프레임워크를 개발하고 적용하기 위해.
• 댓글을 받은 사용자에서 관찰된 체중 감량 증가가 더 긴 커뮤니티 생활 기간이나 높은 활동 수준에 의해 매개되는지 확인하기 위해.

제안 방법

• 첫 번째 게시물에 ≥4개의 댓글이 달린 사용자(치료군)를 LDA 주제, LIWC 특징, 정서 분석, 질문 중심 단어, 게시글 길이를 기반으로 유사한 사용자(대조군, <4개 댓글)와 매칭하는 방식을 사용한다.
• 유사도 기준(컷오프)을 0.7로 설정하여 매칭된 쌍 간의 게시글 내용이 유사하도록 보장한다.
• 통계적 매칭을 통해 공변량을 균형화하고 교란 요인을 줄이며, 댓글 수 이외의 사용자 프로필이 유사하도록 한다.
• 커뮤니티 생활 기간과 활동 수준이 체중 감량 차이에 미치는 매개 효과를 평가하기 위해 소벨 검정(Sobel test)을 적용한다.
• 결과를 측정하기 위해 커뮤니티의 배지 시스템에서 수집한 자가 보고 체중 감량 데이터를 사용한다.
• 다른 방법을 통해 게시글 내용으로부터 체중 감량을 유추하는 대안적 방법을 사용하여 결과를 검증하였으며, 이로 인한 효과 크기는 약 ~9.5%의 차이로 일관된 결과를 보였다.

실험 결과

연구 질문

• RQ1 첫 번째 게시물에 사회적 피드백(댓글)을 받는 것은 /r/loseit 커뮤니티에 재방문할 가능성을 높이는가?
• RQ2 첫 번째 게시물에 댓글을 받는 것은 재방문한 사용자의 자가 보고 체중 감량을 더 크게 만드는가?
• RQ3 관찰된 체중 감량 차이가 증가한 커뮤니티 생활 기간이나 높은 활동 수준에 의해 매개되는가?
• RQ4 게시글 내용과 사용자 글쓰기 스타일과 같은 교란 요인을 고려할 때 인과 효과는 얼마나 견고한가?

주요 결과

• 첫 번째 게시물에 최소 4개의 댓글을 받은 사용자는 댓글을 받지 않은 사용자보다 66% 더 높은 확률로 /r/loseit 커뮤니티에 재방문했다.
• 재방문한 사용자 중에서 댓글을 받은 사용자는 대조군 대비 평균 9파운드 더 많은 체중 감량을 보였다(46파운드 대비 37파운드).
• 9파운드의 체중 감량 차이는 증가한 커뮤니티 생활 기간이나 높은 활동 수준에 의해 통계적으로 매개되지 않았으며, 생활 기간이 효과의 5%만 설명했고 p=.1 수준에서 유의미하지 않았다.
• 게시글 내용으로부터 체중 감량을 유추하는 대안적 방법을 사용했을 때도 효과 크기는 일관되게 유지되었으며, 약 9.5%의 차이를 보였다.
• 결과는 체중 감량 증가의 주요 원인이 더 긴 참여 기간이나 높은 활동 수준가 아니라, 아마도 초기 사회적 확인의 심리적 영향일 가능성이 높다는 것을 시사한다.
• 자료의 희소성과 잠재적 미관측 교란 요인과 같은 제한점이 존재하지만, 효과 크기가 충분히 크기 때문에 이 영향이 숨겨진 커뮤니티 규범 적응에 의해 완전히 설명되지 않는다는 점을 시사한다.