[论文解读] Quasi-experimental Designs for Assessing Response on Social Media to Policy Changes

Yijun Tian, Rumi Chunara|arXiv (Cornell University)|Mar 30, 2020

Smoking Behavior and Cessation参考文献 25被引用 4

一句话总结

本文提出使用准实验设计（QEDs）分析社交媒体对快速烟草政策变化（如电子烟口味禁令和征税）的反应，控制时间与地点的混杂因素。通过将QEDs应用于Twitter和Reddit数据，研究揭示了公众对政策及政府行动的强烈负面情绪，提供了与传统调查互补的实时洞察。

ABSTRACT

Regulation of tobacco products is rapidly evolving. Understanding public sentiment in response to changes is very important as authorities assess how to effectively protect population health. Social media systems are widely recognized to be useful for collecting data about human preferences and perceptions. However, how social media data may be used, in rapid policy change settings, given challenges of narrow time periods and specific locations and non-representative the population using social media is an open question. In this paper we apply quasi-experimental designs, which have been used previously in observational data such as social media, to control for time and location confounders on social media, and then use content analysis of Twitter and Reddit posts to illustrate the content of reactions to tobacco flavor bans and the effect of taxation on e-cigarettes. Conclusions distill the potential role of social media in settings of rapidly changing regulation, in complement to what is learned by traditional denominator-based representative surveys.

研究动机与目标

• 解决传统调查在捕捉快速变化的烟草政策公众情绪方面存在的局限性。
• 评估利用社交媒体数据在时间敏感的监管背景下评估政策反应的可行性。
• 应用准实验设计，控制观察性社交媒体数据中的时间与地点混杂因素。
• 通过分析Twitter和Reddit的内容，研究公众对电子烟口味禁令和征税的情绪。
• 证明社交媒体可作为传统调查在公共卫生政策评估中的及时、补充性信号。

提出的方法

• 将准实验设计（QEDs）应用于观察性社交媒体数据，以减少时间与地点带来的混杂影响。
• 使用内容分析对与烟草政策变化相关的Twitter和Reddit帖子进行情绪分类与量化。
• 聚焦特定政策事件：美国的电子烟口味禁令和电子烟征税。
• 在各平台上采用基于关键词的数据收集方法，涵盖电子烟产品、政策及相关术语。
• 使用合成控制法比较政策实施前后的情绪趋势。
• 通过与现有调查数据对比验证研究发现，以 contextualize 社交媒体情绪。

实验结果

研究问题

• RQ1 社交媒体公众情绪如何响应电子烟口味禁令的实施？
• RQ2 在Twitter和Reddit等平台上，公众对电子烟征税的情绪性质与方向如何？
• RQ3 准实验设计在多大程度上可减少社交媒体数据在政策评估中的混杂因素？
• RQ4 社交媒体情绪与传统代表性调查在烟草政策上的发现相比如何？
• RQ5 实时社交媒体数据在何种程度上可为公共卫生政策决策提供支持？

主要发现

• 社交媒体对电子烟口味禁令和征税的反应表现出对政策和政府行动的强烈负面情绪。
• 公众对监管干预的反应尤为强烈，表明对自上而下政策变化存在抵制或怀疑情绪。
• 尽管代表性存在局限，社交媒体仍提供了公众反应的实时数据，捕捉到调查常遗漏的即时反应。
• 研究未发现社交媒体话语中存在广泛支持口味禁令的证据，这与部分报告更高支持率的调查结果形成对比。
• 准实验设计有效控制了时间与地点的混杂因素，使从观察性社交媒体数据中得出更可靠的推论成为可能。
• 结果表明，社交媒体可作为公众情绪的及时预警信号，尤其适用于快速实施且公众高度关注的政策。