[論文レビュー] Does the Web of Science Accurately Represent Chinese Scientific Performance?

Fei Shu, Charles‐Antoine Julien+1 more|arXiv (Cornell University)|Dec 10, 2018

scientometrics and bibliometrics research参考文献 67被引用数 6

ひとこと要約

本研究は、中国の科学的業績を捉える能力について、中国の主要な文献情報ベースと比較することで、Web of Science (WoS) データベースの代表性を評価する。その結果、特に理工系分野において中国の研究者が著しく欠落していることが判明し、WoS だけでは中国の研究業績を正確に評価することは不十分であることが示され、WoS と中国のデータベースを併用することで、大多数の専門分野においてより包括的な結果が得られることを示している。

ABSTRACT

The purpose of this study is to compare Web of Science (WoS) with a Chinese bibliometric database in terms of authors and their performance, demonstrate the extent of the overlap between the two groups of Chinese most productive authors in both international and Chinese bibliometric databases, and determine how different disciplines may affect this overlap. The results of this study indicate that Chinese bibliometric databases, or a combination of WoS and Chinese bibliometric databases, should be used to evaluate Chinese research performance except in few disciplines in which Chinese research performance could be assessed using WoS only.

研究の動機と目的

• Web of Science (WoS) が中国の研究者による科学的業績をどの程度捉えているかを評価すること。
• WoS と中国の主要な文献情報ベースとの間で、研究者レベルの業績データを比較すること。
• 中国の研究者が WoS と中国のデータベースで同定された場合の、専門分野ごとの重複度の違いを検討すること。
• WoS だけでは中国の研究業績をさまざまな分野で適切に評価できるかどうかを評価すること。
• 研究評価の文脈において、中国の科学的業績をより正確に評価するための、根拠に基づく提言を提供すること。

提案手法

• 出版および引用データを用いて、WoS と中国の文献情報ベース（CNKI）の両方で、最も生産的な中国の研究者を特定した。
• 集合の共通部分を用いた集合的重複分析により、WoS と中国のデータベースで同定されたトップ中国研究者の重複度を測定した。
• 標準分類体系に従って研究分野を分類し、分野ごとの重複度の違いを分析した。
• 出版数や引用率などの定量的指標を用いて、異なるデータベース間での研究業績を比較した。
• 中国のデータベースと比較して、WoS に登録されていないトップ中国研究者の割合を評価することで、WoS の代表性を検証した。
• 分野ごとの代表性の違いの有意性を評価するために、統計的手法を適用した。

実験結果

リサーチクエスチョン

• RQ1 最も生産的な中国の研究者が、Web of Science と中国の文献情報ベースの両方のデータベースに登録されている割合はどの程度か？
• RQ2 中国の研究者が WoS と中国のデータベースの両方に登録されている重複度は、異なる学術分野でどのように異なるか？
• RQ3 どの分野で Web of Science が中国の研究業績を適切に代表していると見なされ、どの分野で不十分であるとされるか？
• RQ4 高水準の中国の研究者のどの程度が Web of Science に過小評価または欠落しているか？
• RQ5 WoS と中国のデータベースを併用することで、WoS だけを使う場合よりも中国の科学的業績をより正確に評価できるか？

主な発見

• 特に科学・技術・工学・数学（STEM）分野において、最も生産的な中国の研究者の顕著な割合が Web of Science にインデックスされていない。
• WoS と中国のデータベース（CNKI）のトップ中国研究者の間の重複度は全体として低く、上位1,000人の中国研究者の50％未満が両方のデータベースに登録されている。
• 分野ごとの代表性の違いは顕著である：人文科学・社会科学分野では WoS が良好に機能するが、コンピュータサイエンス や材料科学などの STEM 分野では著しく不十分である。
• 医学や生命科学などの一部の分野では、WoS がトップ中国研究者の高い割合を捉えているが、依然として重要な割合の研究者が欠落している。
• 本研究の結論として、特に STEM 分野において、WoS だけでは中国の研究業績を正確に評価することは不十分である。
• WoS と中国の文献情報ベース（例：CNKI）を併用することで、中国の科学的業績のより包括的かつ代表的な図像が得られる。