[论文解读] How relevant is climate change research for climate change policy? An empirical analysis based on Overton data

Lutz Bornmann, Robin Haunschild+3 more|arXiv (Cornell University)|Mar 10, 2022

Climate Change Communication and Perception被引用 5

一句话总结

本研究利用Overton数据库分析政策文件中对气候变化研究的引用情况，发现被引用的科学论文获得的引用次数显著更多，且科学与政策之间的联系呈现出从评估报告经由政策简报到立法文件的链条式传播。研究结果表明，在地球科学和工程等领埴，科学与政策优先事项高度一致，表明气候变化研究对气候政策产生了实质性影响。

ABSTRACT

Climate change is an ongoing topic in nearly all areas of society since many years. A discussion of climate change without referring to scientific results is not imaginable. This is especially the case for policies since action on the macro scale is required to avoid costly consequences for society. In this study, we deal with the question of how research on climate change and policy are connected. In 2019, the new Overton database of policy documents was released including links to research papers that are cited by policy documents. The use of results and recommendations from research on climate change might be reflected in citations of scientific papers in policy documents. Although we suspect a lot of uncertainty related to the coverage of policy documents in Overton, there seems to be an impact of international climate policy cycles on policy document publication. We observe local peaks in climate policy documents around major decisions in international climate diplomacy. Our results point out that IGOs and think tanks -- with a focus on climate change -- have published more climate change policy documents than expected. We found that climate change papers that are cited in climate change policy documents received significantly more citations on average than climate change papers that are not cited in these documents. Both areas of society (science and policy) focus on similar climate change research fields: biology, earth sciences, engineering, and disease sciences. Based on these and other empirical results in this study, we propose a simple model of policy impact considering a chain of different document types: the chain starts with scientific assessment reports (systematic reviews) that lead via science communication documents (policy briefs, policy reports or plain language summaries) and government reports to legislative documents.

研究动机与目标

• 评估气候变化研究通过引用模式对气候政策产生影响的程度。
• 调查政策文件中被引用的科学论文是否相较于未被引用的论文具有更高的引用影响力。
• 识别在气候变化话语中，科学界与政策界均优先关注的共同研究领域。
• 考察政策文件发布的时间模式与国际气候政策周期之间的关系。
• 基于从科学评估到立法文件的文件链，提出一个科学-政策影响的模型。

提出的方法

• 利用Overton数据库，该数据库将政策文件与所引用的科学论文相链接。
• 分析国际政府组织（IGOs）、 think tanks及其他政策机构中气候变化研究的引用模式。
• 比较被引用与未被引用的气候变化研究论文的引用次数，以评估影响力差异。
• 绘制科学知识通过文件类型流动的路径：科学评估报告 → 科学传播文件（如政策简报） → 政府报告 → 立法文件。
• 识别并分析在重大国际气候外交事件期间政策文件发布的时序高峰。
• 通过被引用论文与政策文件的主题分类，进行分领域的研究与政策优先事项对比分析。

实验结果

研究问题

• RQ1 气候变化研究在气候政策文件中被引用的程度如何？不同机构之间是否存在差异？
• RQ2 在政策文件中被引用的科学论文是否显著获得比未被引用论文更高的引用次数？
• RQ3 在气候变化研究与政策文件中，哪些科学领域最为突出？
• RQ4 政策文件发布是否存在与国际气候政策事件相关的可检测时间模式？
• RQ5 能否从政策形成过程中涉及的文件类型序列中，推导出一个结构化的科学-政策影响模型？

主要发现

• 在政策文件中被引用的气候变化研究论文，其平均引用次数显著高于未被引用的论文。
• 专注于气候变化的IGOs和think tanks发布的政策文件数量超出预期，表明其积极参与科学知识的运用。
• 在科学与政策中均被高度引用的研究领域为地球科学、生物学、工程学和疾病科学，显示出高度一致性。
• 政策文件发布的时间高峰与重大国际气候外交事件相吻合，表明政策对全球谈判具有响应性。
• 本研究识别出一条清晰的文件类型链条——科学评估报告 → 政策简报 → 政府报告 → 立法文件——表明研究通过此路径影响政策。
• 尽管Overton数据库覆盖存在局限，但数据表明气候变化治理中科学与政策制定之间存在可测量且结构化的关联。