[论文解读] The Effect of Social Feedback in a Reddit Weight Loss Community

Tiago Oliveira Cunha, Ingmar Weber+2 more|arXiv (Cornell University)|Feb 25, 2016

Social Media and Politics参考文献 15被引用 4

一句话总结

本研究对 Reddit 论坛 r/loseit 的 37,278 篇初始帖子应用马氏距离匹配（Mahalanobis Distance Matching），发现用户首篇帖子获得社会反馈（如点赞或正面评论）后，其回归的可能性提高约 18%，即使在控制语言差异后依然成立。该效应随后续帖子减少，表明社会反馈在初始互动阶段最为关键。

ABSTRACT

It is generally accepted as common wisdom that receiving social feedback is helpful to (i) keep an individual engaged with a community and to (ii) facilitate an individual's positive behavior change. However, quantitative data on the effect of social feedback on continued engagement in an online health community is scarce. In this work we apply Mahalanobis Distance Matching (MDM) to demonstrate the importance of receiving feedback in the "loseit" weight loss community on Reddit. Concretely we show that (i) even when correcting for differences in word choice, users receiving more positive feedback on their initial post are more likely to return in the future, and that (ii) there are diminishing returns and social feedback on later posts is less important than for the first post. We also give a description of the type of initial posts that are more likely to attract this valuable social feedback. Though we cannot yet argue about ultimate weight loss success or failure, we believe that understanding the social dynamics underlying online health communities is an important step to devise more effective interventions.

研究动机与目标

• 调查在线减肥社区中用户首篇帖子获得社会反馈是否能提高其留存率。
• 确定社会反馈的影响是否随时间推移而减弱，尤其是跨多篇帖子时。
• 识别吸引社区更高社会反馈的首篇帖子特征。
• 理解语言和情感线索在健康导向在线论坛中推动社区互动的作用。

提出的方法

• 应用马氏距离匹配（Mahalanobis Distance Matching, MDM）创建具有相似初始帖子特征但接收反馈水平不同的用户对比组。
• 使用 VADER 情感分析将评论分类为支持性或打击性，尽管研究指出标签准确度可能存在局限。
• 通过测量用户在首篇帖子后是否再次在子版块发帖，追踪其回归行为。
• 对评论数排名前 10% 和后 10% 的帖子进行定性分析，识别与更高反馈相关的语言和内容模式。
• 分别分析反馈类型：点赞和正面评论，以评估其对回归概率的独立影响。
• 使用统计匹配方法减少因用词、词汇和帖子内容差异带来的混杂效应。

实验结果

研究问题

• RQ1 在 r/loseit 社区中，用户首篇帖子获得社会反馈是否能提高其未来返回子版块的概率？
• RQ2 对后续帖子的社会反馈是否与首篇帖子的反馈一样具有维持用户参与度的效果？
• RQ3 哪些首篇帖子的特征与社区更高水平的社会反馈相关？

主要发现

• 即使在控制语言内容差异后，首篇帖子获得较多社会反馈的用户，未来返回 r/loseit 子版块的概率仍高出约 18%。
• 社会反馈对回归概率的积极影响随后续帖子显著减弱，表明存在‘收益递减’现象。
• 包含来自 imgur 的图片（通常是前后体型对比照）的帖子，显著更可能吸引社会反馈，表明视觉内容能增强互动。
• 尽管使用了自动化情感分析，研究发现即使是语气负面的评论（例如：'你这该死的瘦子'）也常具有支持性语气，表明社区整体文化普遍积极。
• 研究未发现广泛存在‘体型羞辱’或有害评论的证据，表明尽管存在此类行为的潜在可能，社区环境整体仍具支持性。
• 当用户收到约 4–5 次反馈后，其回归概率增长趋于平稳，表明存在一个饱和点，超过此点额外反馈带来的额外收益极小。