[論文レビュー] Practice meets Principle: Tracking Software and Data Citations to Zenodo DOIs

Stephanie van de Sandt, Lars Holm Nielsen+7 more|arXiv (Cornell University)|Nov 1, 2019

Scientific Computing and Data Management参考文献 21被引用数 5

ひとこと要約

本研究は、2019年1月のZenodoホスティングソフトウェアおよびデータへの5,456件の引用を分析し、Asclepias Brokerを用いて現在の引用実践とFORCE11ソフトウェア引用原則との整合性を評価した。研究では、推奨される実践と実際の実践との間で広範な不一致が見られ、ソフトウェア引用の82％が自己引用であった。DOIベースのバージョン管理とコンセプトDOIを活用した実用的措置の提案により、影響の追跡を改善することが可能となる。

ABSTRACT

Data and software citations are crucial for the transparency of research results and for the transmission of credit. But they are hard to track, because of the absence of a common citation standard. As a consequence, the FORCE11 recently proposed data and software citation principles as guidance for authors. Zenodo is recognized for the implementation of DOIs for software on a large scale. The minting of complementary DOIs for the version and concept allows measuring the impact of dynamic software. This article investigates characteristics of 5,456 citations to Zenodo data and software that were captured by the Asclepias Broker in January 2019. We analyzed the current state of data and software citation practices and the quality of software citation recommendations with regard to the impact of recent standardization efforts. Our findings prove that current citation practices and recommendations do not match proposed citation standards. We consequently suggest practical first steps towards the implementation of the software citation principles

研究の動機と目的

• 実際のソフトウェアおよびデータ引用実践とFORCE11ソフトウェア引用原則との整合性を評価すること。
• 最近の標準化施策が引用品質および追跡の正確性に与える影響を評価すること。
• ZenodoのコンセプトDOIおよびバージョンDOIシステムが、ソフトウェアの複数バージョンにわたる引用影響を集約する役割を果たすかを調査すること。
• 推奨される引用形式と学術的出版物における現実の引用行動との間の乖離を特定すること。
• 実証的な引用データに基づき、ソフトウェア引用実践を改善するための実行可能な提言を提供すること。

提案手法

• Asclepias Brokerを用いて、ADS、Europe PMC、Crossref Event Dataの公開APIを介してZenodoオブジェクトへの5,456件の引用リンクを収集した。
• Spearmanの順位相関を用いて、ZenodoおよびGitHub（スター、フォーク、ウォッチャー）の使用メトリクス（固有の閲覧数、ダウンロード数）と引用数の関係を評価した。
• 引用速度が0または1の代表的サンプル352件を用い、引用論文と引用対象のZenodoオブジェクトの著者リストを比較することで、自己引用を同定した。
• Venn図を用いて、発見サービス（ADS、Europe PMC）間の引用重複度を可視化し、カバレッジと重複度を評価した。
• 25件の高引用ソフトウェアコンセプトのGitHubおよびドキュメンテーションにおける引用推奨事項を分析し、推奨事項の質の時間的変化を追跡した。
• ZenodoのコンセプトDOIおよびバージョンDOIインfra構造を活用し、ソフトウェアバージョンにわたる引用の分布を追跡し、影響の集約を推定した。

実験結果

リサーチクエスチョン

• RQ1 実際のソフトウェアおよびデータ引用が、FORCE11ソフトウェア引用原則とどの程度整合しているか。
• RQ2 現在の引用推奨事項は、著者が適切な引用実践をとるよう導くのにどの程度効果的か。
• RQ3 ソフトウェアおよびデータ引用における自己引用の割合はどの程度で、それが影響測定にどのように影響するか。
• RQ4 発見サービス（例：ADS、Europe PMC）は、Zenodoホスティングのソフトウェアおよびデータへの引用をどの程度カバーしているか。
• RQ5 コンセプトDOIは、ソフトウェアの複数バージョンにわたる引用影響の集約と追跡をどの程度改善できるか。

主な発見

• Zenodoにホスティングされたソフトウェアの82％が自己引用であり、推奨される実践と実際の実践との間で顕著な不一致が示された。
• 4,060件の引用の引用速度が0または1であったため、引用されたソフトウェアが発表後1年以内に引用されたことを意味し、自己引用率の高さを示唆した。
• Spearmanの順位相関により、引用数と使用メトリクス（例：固有の閲覧数、ダウンロード数）との間に弱いから中程度の相関が確認され、使用と引用の影響の間の整合性が限定的であることが示された。
• 引用を検出できる著者論文のうち48％しかADSとEurope PMCの両方で検出されず、引用発見サービスのカバレッジの欠落が浮き彫りになった。
• 25件の高引用ソフトウェアコンセプトのうち、68％は安定的でバージョン管理された引用推奨事項がなく、40％はバージョンの変更に伴い推奨事項が変化していた。これは一貫性の欠如を示唆した。
• コンセプトDOIの使用により、バージョンにわたる引用の集約が可能になったが、引用されたソフトウェアバージョンのうち36％しか正しいコンセプトDOIにリンクされておらず、影響追跡が制限された。