[論文レビュー] How relevant is climate change research for climate change policy? An empirical analysis based on Overton data

Lutz Bornmann, Robin Haunschild+3 more|arXiv (Cornell University)|Mar 10, 2022

Climate Change Communication and Perception被引用数 5

ひとこと要約

本研究は、Overtonデータベースを用いて、気候変動研究の政策文書における引用を分析し、引用された科学論文が著しく高い引用数を獲得していること、科学と政策のつながりが、評価レポートから政策要約、立法文書に至る連鎖的流れを示していることを明らかにした。研究結果は、地球科学や工学分野において、科学的・政策的優先分野の整合性が強く、気候変動政策に意味のある研究の影響が及んでいることを示している。

ABSTRACT

Climate change is an ongoing topic in nearly all areas of society since many years. A discussion of climate change without referring to scientific results is not imaginable. This is especially the case for policies since action on the macro scale is required to avoid costly consequences for society. In this study, we deal with the question of how research on climate change and policy are connected. In 2019, the new Overton database of policy documents was released including links to research papers that are cited by policy documents. The use of results and recommendations from research on climate change might be reflected in citations of scientific papers in policy documents. Although we suspect a lot of uncertainty related to the coverage of policy documents in Overton, there seems to be an impact of international climate policy cycles on policy document publication. We observe local peaks in climate policy documents around major decisions in international climate diplomacy. Our results point out that IGOs and think tanks -- with a focus on climate change -- have published more climate change policy documents than expected. We found that climate change papers that are cited in climate change policy documents received significantly more citations on average than climate change papers that are not cited in these documents. Both areas of society (science and policy) focus on similar climate change research fields: biology, earth sciences, engineering, and disease sciences. Based on these and other empirical results in this study, we propose a simple model of policy impact considering a chain of different document types: the chain starts with scientific assessment reports (systematic reviews) that lead via science communication documents (policy briefs, policy reports or plain language summaries) and government reports to legislative documents.

研究の動機と目的

• 気候変動研究が引用パターンを通じて気候変動政策にどの程度影響を与えているかを評価すること。
• 政策文書に引用された科学論文が、引用されていない論文と比較して著しく高い引用インパクトを示すかどうかを調査すること。
• 気候変動議論において、科学的・政策的アクターの両方が優先する共通の研究分野を同定すること。
• 国際的な気候政策サイクルと関連した政策文書の発表の時間的パターンを調べること。
• 科学的評価レポートから立法文書に至る文書連鎖に基づき、科学-政策影響の構造的モデルを提示すること。

提案手法

• 政策文書と引用された科学論文をリンクするOvertonデータベースを活用した。
• 国際政府機関（IGOs）、シンクタンク、その他の政策機関における気候変動研究の引用パターンを分析した。
• 引用された論文と引用されていない論文の引用数を比較し、影響の差を評価した。
• 科学的知識の流れを文書タイプの流れとしてマッピングした：科学的評価レポート → 科学的コミュニケーション文書（例：政策要約） → 政府報告書 → 立法文書。
• 国際的な気候交渉の主要イベントの周辺で観察される政策文書発表の時間的ピークを同定し、分析した。
• 引用された論文および政策文書の分野分類を用いて、分野別に科学的優先順位と政策的優先順位の比較分析を実施した。

実験結果

リサーチクエスチョン

• RQ1 気候変動研究は、どの程度政策文書に引用されており、機関ごとにその傾向はどのように異なるか？
• RQ2 政策文書に引用された科学論文は、引用されていない論文と比較して著しく高い引用数を獲得しているか？
• RQ3 気候変動研究および政策文書において、最も顕著に代表されている科学的分野は何か？
• RQ4 国際的な気候政策イベントと関連した、政策文書発表の検出可能な時間的パターンは存在するか？
• RQ5 政策形成に参加する文書タイプの順序から、科学-政策影響の構造的モデルを導き出せるか？

主な発見

• 政策文書に引用された気候変動研究論文は、引用されていない論文と比較して平均して著しく高い引用数を獲得していた。
• 気候変動に焦点を当てたIGOsおよびシンクタンクは、期待されるよりも多くの政策文書を発表しており、科学的研究への積極的な関与が示された。
• 科学的分野および政策分野の両方で最も多く引用された分野は、地球科学、生物学、工学、疾病科学であり、両者の整合性が強く示された。
• 国際的な気候交渉の主要イベントの時期に、政策文書の発表が時間的ピークを示しており、政策が国際交渉に応答していることが示唆された。
• 本研究は、科学的評価レポート → 政策要約 → 政府報告書 → 立法文書という明確な文書タイプの連鎖が、研究が政策に影響を与える経路として存在することを特定した。
• Overtonのカバー範囲の制限が存在するものの、データは気候変動ガバナンスにおける科学的研究所と政策形成との間の測定可能で構造的な関連性を示している。