[論文レビュー] Toward alternative metrics of journal impact: A comparison of download and citation data

Johan Bollen, Herbert Van de Sompel+2 more|ArXiv.org|Mar 3, 2005

Web visibility and informetrics参考文献 43被引用数 6

ひとこと要約

本稿では、ISIインパクトファクターのような伝統的な引用ベースの指標と比較して、ダウンロードベースのソーシャルネットワーク指標を代替のジャーナルインパクト指標として使用することを提案している。ダウンロードから導かれるネットワークは、グローバルで引用に焦点を当てたISI IFとは著しく異なる、局所的で関連性の高いジャーナルインパクトの形を明らかにしている。これは、使用データが学術的インパクトの構造的・情報に基づいた補完的視点を提供することを示唆している。

ABSTRACT

We generated networks of journal relationships from citation and download data, and determined journal impact rankings from these networks using a set of social network centrality metrics. The resulting journal impact rankings were compared to the ISI IF. Results indicate that, although social network metrics and ISI IF rankings deviate moderately for citation-based journal networks, they differ considerably for journal networks derived from download data. We believe the results represent a unique aspect of general journal impact that is not captured by the ISI IF. These results furthermore raise questions regarding the validity of the ISI IF as the sole assessment of journal impact, and suggest the possibility of devising impact metrics based on usage information in general.

研究の動機と目的

• 引用ベースのISIインパクトファクターよりも進んだジャーナルインパクトの代替指標を探索すること。
• デジタル図書館におけるダウンロードパターンが、構造的に意味のあるジャーナルインパクトランク付けを生成できるかどうかを調査すること。
• これらの使用ベースのランク付けを、広く使われているISIインパクトファクターや引用ベースのネットワーク指標と比較すること。
• ダウンロードベースの指標が、広義のジャーナルインパクト（Ig）の概念の実装として、有効で補完的であるかどうかを評価すること。

提案手法

• ジャーナル引用記録（JCR）から著者生成ネットワーク（AGN）を構築し、引用ベースのジャーナル関係をモデル化した。
• デジタル図書館の連続的ダウンロードログからリーダー生成ネットワーク（RGN）を構築し、リトリーブ整合性仮説を適用してジャーナル関係を推定した。
• 両方のネットワーク（AGNおよびRGN）に社会的ネットワーク中心性指標（例：固有ベクトル中心性）を適用し、ジャーナルインパクトランクを導出した。
• RGNとAGNの得られたランクをISIインパクトファクターや基準値と比較し、乖離度と相関関係を評価した。
• 指標間の比較可能性を確保するため、ISI JCRに属するジャーナルの代表的サンプルを用いた。
• OAI-PMHなどの標準を用いて、複数機関の使用データを集約するスケーラブルなフレームワークを提案し、グローバルに代表されるRGNの構築を目指した。

実験結果

リサーチクエスチョン

• RQ1 ダウンロードデータから導かれるジャーナルインパクトランクは、引用ベースの指標やISIインパクトファクターよりもどのように異なるか？
• RQ2 ダウンロードベースのネットワークに適用された社会的ネットワーク中心性指標は、妥当で意味のあるジャーナルインパクトの形を反映していると見なせるか？
• RQ3 使用ベースの指標は、ISI IFのような引用ベースの指標が捉え損なうジャーナルインパクトの側面を捉えることができるか？
• RQ4 RGN（ダウンロードベースのネットワーク）の構造的性質は、AGN（引用ベースのネットワーク）とどのように異なるか？
• RQ5 局所的なデジタル図書館コミュニティからの使用データは、グローバルに代表されるジャーナルインパクト指標に一般化可能か？

主な発見

• ダウンロードデータ（RGN）から導かれるジャーナルインパクトランクは、ISIインパクトファクターよりも顕著な乖離を示し、インパクトの別種の局所的視点を示している。
• 引用ベースのネットワーク（AGN）に適用された社会的ネットワーク中心性指標は、ISI IFと強く相関しており、伝統的インパクトの測定としての妥当性が裏付けられた。
• ダウンロードベースのネットワークは、引用数では捉えきれないジャーナルインフルエンスの構造的パターンを明らかにした。これは、学術的インパクトの別次元を示唆している。
• 研究では、局所的なリーダーのコミュニティが、ISI IFが反映するグローバルな合意とは異なるジャーナルインパクトの見方を持っている可能性があると判明した。
• 結果として、特にデジタル図書館のログからの使用データは、ISI IFに包含されない意味のある代替指標を提供でき、ジャーナルインパクトの新たな側面を明らかにした。
• 著者らは、複数機関の共有使用ログを統合することで構築できるグローバルに集約されたRGNが、新しく、オープンで、より包括的なインパクト指標を生み出す可能性があると提言している。