[論文レビュー] A global exploratory comparison of country self-citations 1996-2019

Alberto Baccini, Eugenio Petrovich|arXiv (Cornell University)|Mar 14, 2023

Advanced Text Analysis Techniques参考文献 88被引用数 4

ひとこと要約

本研究は、1996年から2019年までのスコパス・データを用いて50か国における国自体の被引用を分析し、大多数の国が自己被引用傾向を低下させている一方で、イタリア、イラン、サウジアラビアを含む12か国が異常な増加を示すことを明らかにした。これらの異常は、研究者への報酬が被引用数に基づく業績指標と直接結びついている国家レベルの科学政策と強く関連しており、評価インcentiveシステムに組み込まれた文献計測指標が、科学的被引用行動を急速に歪めることを示している。

ABSTRACT

Self-citations are a key topic in evaluative bibliometrics because they can artificially inflate citation-related performance indicators. Recently, self-citations defined at the largest scale, i.e., country self-citations, have started to attract the attention of researchers and policymakers. According to a recent research, in fact, the anomalous trends in the country self-citation rates of some countries, such as Italy, have been induced by the distorting effect of citation metrics-centered science policies. In the present study, we investigate the trends of country self-citations in 50 countries over the world in the period 1996-2019 using Scopus data. Results show that for most countries country self-citations have decreased over time. 12 countries (Colombia, Egypt, Indonesia, Iran, Italy, Malaysia, Pakistan, Romania, Russian Federation, Saudi Arabia, Thailand, and Ukraine), however, exhibit different behavior, with anomalous trends of self-citations. We argue that these anomalies should be attributed to the aggressive science policies adopted by these countries in recent years, which are all characterized by direct or indirect incentives for citations. Our analysis confirms that when bibliometric indicators are integrated into systems of incentives, they are capable of affecting rapidly and visibly the citation behavior of entire countries.

研究の動機と目的

• 1996年から2019年までの50か国の国自体の被引用傾向の時間的推移を調査すること。
• グローバルな傾向から逸脱する顕著な自己被引用傾向を示す国を同定すること。
• こうした異常傾向が、文献計測業績を重視する国家レベルの科学政策と関連しているかどうかを検討すること。
• 業績に基づく資金配分制度が大規模な被引用行動に与える影響を評価すること。
• キャリアの進歩や財務的報酬と結びつけられた被引用指標が、科学的行動に及ぼす影響の程度を評価すること。

提案手法

• 1996年から2019年までのスコパス・データを用いた国自体の被引用率の時系列分析。
• 2つの自己被引用率の計算：SR^I（1年間の被引用ウィンドウ）およびSR^II（5年間の被引用ウィンドウ）。
• 国ごとの自己被引用トレースの類似性を可視化するための多次元尺度構成法（MDS）。
• 出版数のデータ（対数スケール）を用いて被引用傾向を正規化し、出力量の影響を制御すること。
• 被引用項目と被引用者項目の両方に1年間のウィンドウを設定し、時間的整合性を確保すること。
• 異常傾向を示す国々の政策枠組みを比較分析し、共通するインcentive構造を同定すること。

実験結果

リサーチクエスチョン

• RQ1 国自体の被引用率は、時間経過とともに一貫したグローバルな傾向を示すのか、それとも顕著な逸脱が見られるのか？
• RQ2 どの国々が自己被引用の異常な増加を示しており、それらは他の国々と何が異なるのか？
• RQ3 こうした異常な傾向が、被引用数に基づく業績指標を重視する国家レベルの科学政策とどの程度関連しているのか？
• RQ4 被引用インcentiveが研究者のキャリアに近接するほど、自己被引用行動にどのような影響を及ぼすのか？
• RQ5 文献計測指標が研究評価システムに統合されると、国家レベルの被引用パターンに顕著な変化が生じるのか？

主な発見

• 大多数の国において、1996年から2019年の間に国自体の自己被引用率が低下しており、外部被引用への依存度が高まっている一般的な傾向を示している。
• コロンビア、エジプト、インドネシア、イラン、イタリア、マレーシア、パキスタン、ルーマニア、ロシア連邦、サウジアラビア、タイ、ウクライナの12か国が、自己被引用の異常な上行傾向を示した。
• これらの12か国の異常な傾向は、被引用業績が研究者のキャリア進歩や財務的報酬と直接結びついている科学政策と強く関連している。
• 間接的または機関レベルの被引用インcentive（例：ベルギー、スウェーデン、ブルガリア）を持つ国々は、同様の自己被引用の異常を示さなかったことから、インcentiveが個人のキャリアに近接していることが主な駆動要因であると考えられる。
• 本研究では、政策変更と自己被引用行動の変化との間に強い時間的関連性が確認され、研究者がインcentive構造に応じて被引用行動を調整することが示された。
• 結果として、被引用指標が評価システムに組み込まれると、中立的な指標ではなく、科学的行動を実際に形作る要因となることが示唆された。