[论文解读] Random Voting Effects in Social-Digital Spaces: A case study of Reddit Post Submissions

Maria Glenski, Thomas J. Johnston+1 more|arXiv (Cornell University)|Jun 5, 2015

Social Media and Politics参考文献 8被引用 11

一句话总结

本研究在 Reddit 上开展了一项真实环境实验，旨在考察随机投票操纵对帖子受欢迎程度的影响。研究发现，单次随机点赞平均使最终帖子得分提高 11.02%，使帖子获得 2000 次以上点赞的可能性提高 24.6%；而单次随机点踩则使得分平均下降 5.15%，表明社交数字投票系统中存在显著的从众效应。

ABSTRACT

At a time when information seekers first turn to digital sources for news and opinion, it is critical that we understand the role that social media plays in human behavior. This is especially true when information consumers also act as information producers and editors by their online activity. In order to better understand the effects that editorial ratings have on online human behavior, we report the results of a large-scale in-vivo experiment in social media. We find that small, random rating manipulations on social media submissions created significant changes in downstream ratings resulting in significantly different final outcomes. Positive treatment resulted in a positive effect that increased the final rating by 11.02% on average. Compared to the control group, positive treatment also increased the probability of reaching a high rating (>=2000) by 24.6%. Contrary to the results of related work we also find that negative treatment resulted in a negative effect that decreased the final rating by 5.15% on average.

研究动机与目标

• 探究随机评分操纵如何影响社交数字平台中的后续投票行为。
• 评估初始随机投票是否引发从众效应，从而改变 Reddit 上帖子的最终受欢迎程度。
• 确定正面与负面处理对帖子得分的影响是否对称。
• 考察处理时机与子版面特征对投票结果的影响。
• 揭示由于低投票参与度及易受人工影响，社交媒体排名系统存在的潜在漏洞。

提出的方法

• 通过在实时帖子发布中插入随机点赞或点踩，在 Reddit 上开展真实环境实验。
• 在多个子版面中随机分配处理措施，确保用户对操纵行为事先不知情。
• 对比处理组（点赞、点踩）与对照组的最终帖子得分及评分分布。
• 分析不同子版面中的处理效果，包括最活跃的前 8 个和前 500 个子版面。
• 使用统计建模评估处理效果的显著性，包括置信区间与 p 值。
• 测量处理时机（延迟间隔）和一天中时间对结果变异的影响。

实验结果

研究问题

• RQ1 单次随机点赞是否显著提高 Reddit 上帖子的最终得分？
• RQ2 单次随机点踩是否显著降低 Reddit 上帖子的最终得分？
• RQ3 正面与负面处理在得分分布上的影响是否对称？
• RQ4 处理时机（立即 vs. 延迟）如何影响从众效应的强度？
• RQ5 子版面特征（如发帖量）是否与处理效果的显著性相关？

主要发现

• 与对照组相比，单次随机点赞使平均最终帖子得分提高 11.02%。
• 由于正面处理，帖子获得 2000 次以上点赞的概率提高了 24.6%。
• 与对照组相比，单次随机点踩使平均最终得分下降 5.15%。
• 尽管平均效应存在不对称性，负面处理并未显著降低帖子在得分分布上端达到高分的可能性。
• 在最频繁使用的前 10 个子版面中，处理效果显著，其中 22% 的子版面显示出显著的点赞处理效应，21.6% 显示出显著的点踩处理效应。
• 未发现子版面发帖量与处理效果显著性之间存在显著相关性，表明受欢迎程度并不能预测其对操纵的易感性。