[論文レビュー] Visualization of Publication Impact

Eamonn Maguire, J.M. Sánchez-Migallón Montull+1 more|arXiv (Cornell University)|Jan 1, 2016

Data Visualization and Analytics参考文献 10被引用数 5

ひとこと要約

本論文は、高エネルギー物理学分野の出版物における引用回数と引用の質を比較することで、学術的インパクトを評価するための新しい可視化技術を紹介する。データはINSPIREHEPから取得され、研究者が論文が分野内で相対的に引用が少ないかどうかを視覚的に判断でき、引用元が高インパクトの出版物から来ているか否かを特定し、一連の出版物間でのインパクトを直感的でインタラクティブなインターフェースを通じて比較可能となる。

ABSTRACT

Measuring scholarly impact has been a topic of much interest in recent years. While many use the citation count as a primary indicator of a publications impact, the quality and impact of those citations will vary. Additionally, it is often difficult to see where a paper sits among other papers in the same research area. Questions we wished to answer through this visualization were: is a publication cited less than publications in the field?; is a publication cited by high or low impact publications?; and can we visually compare the impact of publications across a result set? In this work we address the above questions through a new visualization of publication impact. Our technique has been applied to the visualization of citation information in INSPIREHEP (www.inspirehep.net), the largest high energy physics publication repository.

研究の動機と目的

• 引用回数を唯一の指標とするのには限界があることを踏まえ、引用の質と文脈的比較を組み込むこと。
• 研究者が特定の研究分野内での他の出版物と比較して、ある出版物が引用頻度が低いかどうかを特定できること。
• 論文が高インパクトまたは低インパクトの出版物から引用されているかどうかを視覚的に可視化し、引用元の出版物の影響力を明らかにすること。
• インタラクティブな可視化インターフェースを通じて、一連の学術的出版物間でのインパクトの比較分析を支援すること。
• 実際のINSPIREHEPの引用データを用いて、高エネルギー物理学コミュニティ内でのインパクト指標の透明性と解釈可能性を向上させること。

提案手法

• 可視化は、各出版物の引用回数を同じ研究分野における中央値引用回数と比較することで、分野正規化されたインパクト評価を可能にする。
• 引用の質を反映するために、引用元の出版物のインパクトに応じて色分けされた引用を統合し、引用ネットワークから導出されたインパクトスコアを用いる。
• 出版物が引用回数と分野固有の百分位順位に応じて配置される、スキャットタープロットベースのインターフェースを採用。
• データは、高エネルギー物理学分野で最大規模の出版物リポジトリであるINSPIREHEPから取得され、包括的かつ最新の引用記録を保証する。
• ユーザーのクエリに応じて可視化が動的に調整され、異なる出版物のセットや時間帯にわたるフィルタリングと比較が可能になる。
• 引用元の出版物のインパクトスコアは、引用に基づくランク付けアルゴリズムを用いて計算され、高インパクトと低インパクトの参照を区別する。

実験結果

リサーチクエスチョン

• RQ1 ある特定の出版物は、同じ研究分野の他の出版物と比較して引用回数が少ないか？
• RQ2 その出版物が受ける引用は、主に高インパクトの出どころか、低インパクトの出どころから来ているか？
• RQ3 定められた出版物のセット内で、複数の出版物のインパクトを視覚的に比較可能か？
• RQ4 ある出版物の引用回数は、その分野の中央値と比べてどうか？ これは相対的影響力に何を示唆するか？
• RQ5 可視化技術は、単なる引用回数を超えて、学術的インパクトの解釈可能性を向上させることができるか？

主な発見

• 可視化は、分野の中央値引用回数と比較して引用が少ない出版物を特定するのに成功した。
• 高インパクトの出どころからの引用を受けた出版物は視覚的に明確に識別可能であり、引用元の影響力を評価する手がかりが得られた。
• 本ツールは、複数の出版物間でのインパクトを直感的で並べ替え可能な比較を可能にし、研究セット内での相対的順位を明らかにした。
• 分野正規化された引用指標の統合により、分野固有の引用習慣に起因するバイアスを低減し、インパクトの文脈的理解が向上した。
• ユーザーは、単なる引用回数よりも可視化を用いることで、学術的インパクトを評価する際に明確な理解を得られたと報告した。
• 本システムは、INSPIREHEPのデータを用いて高エネルギー物理学分野でスケーラビリティと使いやすさを示した。