[論文レビュー] Universal Behavior of a Research Productivity Index

Pablo Diniz Batista, Mônica G. Campiteli+2 more|ArXiv.org|Oct 14, 2005

scientometrics and bibliometrics research被引用数 19

ひとこと要約

本稿では、分野特有のバイアスを低減するために共同研究者の影響を考慮した修正された研究生産性指標hIを提案する。ブラジルの研究者データを用いて、分野を越えて公平な学術的インパクトと生産性の比較が可能である、普遍的なスケーリング則が存在することを示している。

ABSTRACT

Indexes that account for good representations of an individual's productivity are theme of major importance for the evaluation and comparison among researchers. Recently, a new index was proposed combining productivity with impact such that a researcher with index h has h papers with at least h citations. A drawback of this is the sensitivity to the research field. Here we propose a new index (hI) that accounts for the coauthorship effect. The statistics of h and hI are presented for Brazilian research. We have found a universal curve for different disciplines, allowing a comparison among scientists of different research areas.

研究の動機と目的

• 分野に依存するhインデックスの限界を是正することにより、分野間比較を困難にしている問題に対処する。
• 共同研究者数を補正することで、個人の研究貢献をより正確に反映する新しい指標（hI）を開発する。
• hI指標を用いることで、異なる科学的分野にわたる普遍的なスケーリング行動が存在するかどうかを調査する。
• 標準化された指標を用いて、多様な分野の研究者をより公平に評価・比較することを可能にする。
• ブラジルの大学機関からの実証データを用いて、新しい指標の妥当性と普遍性を検証する。

提案手法

• 各出版物の共同研究者数を考慮してhインデックスを正規化する修正インデックスhIを提案する。
• さまざまな科学的分野にまたがるブラジルの研究者データセットにhI指標を適用する。
• 統計的分析を用いて、異なる分野および機関におけるhI値の分布を検証する。
• hI値が分野を越えて適合する普遍的なスケーリング曲線を特定する。
• hI指標と従来のhインデックスとの間で、分野独立性および一貫性の観点から性能を比較する。
• 補足データおよび図を用いて、観察された普遍的行動の妥当性を検証する。

実験結果

リサーチクエスチョン

• RQ1 共同研究者の影響が研究生産性評価に与えるバイアスを低減するために、修正された研究インデックス（hI）は有効であるか？
• RQ2 hIインデックスは、異なる科学的分野にわたって普遍的であると見なせるか？ これにより、分野間比較が可能になるか？
• RQ3 ブラジルの多様な研究分野において、hI値の分布は従来のhインデックスとどのように異なるか？
• RQ4 hIインデックスは、生産性指標における分野依存のばらつきをどの程度低減するか？
• RQ5 異なる学術分野にわたるhI値の分布を記述する普遍的なスケーリング則が存在するか？

主な発見

• hI指標は、研究分野に依存する生産性指標の感度を著しく低減し、より公平な比較を可能にした。
• ブラジルの多様な科学的分野において、hI値に普遍的なスケーリング曲線が観察された。これは共通の統計的パターンを示している。
• hI指標は分野を越えて一貫性を示し、分野間評価において従来のhインデックスよりもより頑健であることが示された。
• データから、共同研究者数の影響がhインデックスに著しい歪みをもたらすことが判明したが、hI指標によってその歪みは効果的に是正された。
• hIの普遍的曲線は、異なる分野の研究者が単一の正規化された指標を用いて意味的に比較可能であることを示唆している。
• ブラジルの研究データを用いた実証的検証により、hI指標が機関および分野を越えて安定的かつ普遍的であることが確認された。