[論文レビュー] Do Mendeley readership counts help to filter highly cited WoS publications better than average citation impact of journals (JCS)?

Zohreh Zahedi, Rodrigo Costas+1 more|arXiv (Cornell University)|Jul 8, 2015

scientometrics and bibliometrics research参考文献 3被引用数 7

ひとこと要約

本研究では、Mendeleyの閲覧者数が、ジャーナル・キャシオン・スコア（JCS）よりも、Web of Science（WoS）のハイコート論文を特定する能力に優れているかどうかを評価する。5つの科学分野のデータを用いて、Mendeleyの閲覧者数は、すべての分野および大多数のユーザー層において、上位10%のハイコート論文をJCSよりも効果的に特定していることが判明した。科学者ユーザーとの相関が強く、受容が早く、受容速度も顕著に優れていた。

ABSTRACT

In this study, the academic status of users of scientific publications in Mendeley is explored in order to analyse the usage pattern of Mendeley users in terms of subject fields, citation and readership impact. The main focus of this study is on studying the filtering capacity of Mendeley readership counts compared to journal citation scores in detecting highly cited WoS publications. Main finding suggests a faster reception of Mendeley readerships as compared to citations across 5 major field of science. The higher correlations of scientific users with citations indicate the similarity between reading and citation behaviour among these users. It is confirmed that Mendeley readership counts filter highly cited publications (PPtop 10%) better than journal citation scores in all subject fields and by most of user types. This result reinforces the potential role that Mendeley readerships could play for informing scientific and alternative impacts.

研究の動機と目的

• Mendeleyの閲覧者数が、従来のジャーナル・キャシオン・スコア（JCS）よりも、ハイコート論文をより効果的に特定できるかどうかを評価すること。
• さまざまな科学分野におけるMendeleyユーザーの学術的属性と使用パターンを分析すること。
• Web of Scienceデータベース内の上位コート論文を特定する際の、Mendeley閲覧者数とJCSのフィルタリング能力を比較すること。
• 論文の影響力の特定における閲覧者数とキャシオンの時間的ダイナミクスを評価すること。
• Mendeley閲覧者数が科学的インパクトの代理指標として、および代替指標としての可能性を検討すること。

提案手法

• Web of Science（WoS）データベースから、5つの主要な科学分野における論文のMendeley閲覧者数データとキャシオン数を収集した。
• ユーザーの学術的状態およびプロファイル情報に基づき、Mendeleyユーザーを分類（例：科学者、非科学者）した。
• ジャーナル・キャシオン・スコア（JCS）を、論文が出版されたジャーナルの平均キャシオンインパクトとして算出した。
• Mendeley閲覧者数とJCSが、各分野における上位10%のハイコート論文を特定する能力を比較した。
• 特に科学者ユーザーにおいて、閲覧者数とキャシオンの相関を分析した。
• 初の閲覧者数受容と初のキャシオン受容の時間差を評価し、受容速度を分析した。

実験結果

リサーチクエスチョン

• RQ1 Mendeley閲覧者数は、ジャーナル・キャシオン・スコア（JCS）よりも、上位10%のハイコートWoS論文を特定する能力に優れているか？
• RQ2 Mendeley閲覧者数とキャシオンの相関は、特に科学者ユーザーにおいて、どのように異なるか？
• RQ3 Mendeley閲覧者数の受容パターンは、キャシオン蓄積と比較して、どのような時間的パターンを示すか？
• RQ4 Mendeley閲覧者数は、多様な科学分野において、科学的インパクトをどの程度反映しているか？
• RQ5 Mendeley閲覧者数は、従来のジャーナルレベル指標よりも、信頼性があり迅速に科学的影響を示す指標として機能できるか？

主な発見

• Mendeley閲覧者数は、5つの主要な科学分野すべてにおいて、ジャーナル・キャシオン・スコア（JCS）よりも、上位10%のハイコートWoS論文をより効果的に特定している。
• 科学者ユーザーは、閲覧行動とキャシオン行動の間で高い相関を示しており、閲覧とキャシオンの行動が一致していることを示している。
• Mendeley閲覧者数は、キャシオンよりも早い受容時間を示しており、出版ライフサイクルの初期段階で信号が発生している。
• Mendeley閲覧者数のフィルタリング能力は、大多数のユーザー層においてJCSを上回っており、補完的インパクト指標としての可能性を裏付けている。
• 本研究では、Mendeley閲覧者数が、特にハイインパクト論文の早期特定において、頑丈な科学的インパクト指標であることが確認された。
• 結果は、Mendeley閲覧者数を代替指標（altmetrics）フレームワークに統合することで、研究インパクトを評価するのに役立つことを支持している。