[論文レビュー] Simple arithmetic versus intuitive understanding: The case of the impact factor

Ronald Rousseau, Loet Leydesdorff|UvA-DARE (University of Amsterdam)|Feb 13, 2011

scientometrics and bibliometrics research参考文献 16被引用数 7

ひとこと要約

本稿は、非引用可能論文が追加された場合に、ジャーナルのインパクトファクターが直感に反する振るまいを示すことを示しており、これは単純な算術的性質に起因する——具体的には、非引用可能項目を追加することで、インパクトファクターが逆に上昇するというパラドックスが生じる——ものである。著者らは、解釈の整合性を保つために、このような項目をインパクトファクターの計算から除外すべきだと主張する。

ABSTRACT

We show that as a consequence of basic properties of elementary arithmetic journal impact factors show a counterintuitive behaviour with respect to adding non-cited articles. Synchronous as well as diachronous journal impact factors are affected. Our findings provide a rationale for not taking uncitable publications into account in impact factor calculations, at least if these items are truly uncitable.

研究の動機と目的

• 非引用可能論文の追加に対するジャーナルインパクトファクタの数学的挙動を調査すること。
• 非引用可能項目がインパクトファクタ計算に含まれることによって生じる直感に反する算術的効果を明らかにすること。
• 非引用可能出版物をインパクトファクタ計算に含める従来の慣習に挑戦すること。
• 指標の信頼性を維持するために、真正に非引用可能な項目をインパクトファクタの式から除外することを提唱すること。
• 算術的メカニズムと直感的理解の間の違いを明確にすること。

提案手法

• インパクトファクタ式の数学的構造を分析する：IF = (年Yに発表された論文に対する年Yの引用数) / (年Y-1およびY-2の引用可能項目数)。
• インパクトファクタ式の分母に非引用論文（ゼロの引用を受ける項目）を追加する効果をモデル化すること。
• 引用が一切追加されないにもかかわらず、非引用可能項目を追加することでインパクトファクタが上昇することを示すこと。
• 同一期間（same-year）および異期間（cross-year）の両方のインパクトファクタ定式化を用いて、結果の一般化を図ること。
• 基本的な算術的原則を適用し、非引用可能項目の追加に関してインパクトファクタが単調でないことを示すこと。
• 数学的導出と数値例を用いてパラドックスを図示し、算術と直感の間の乖離を強調すること。

実験結果

リサーチクエスチョン

• RQ1 非引用可能論文を追加すると、ジャーナルのインパクトファクタの値にどのように影響するか？
• RQ2 なぜ非引用可能項目の含め方が、インパクトファクタ値に直感に反する変化を引き起こすのか？
• RQ3 インパクトファクタ式の基本的算術的性質が、その解釈可能性をどの程度損なうのか？
• RQ4 引用が追加されない状況で、インパクトファクタがどのようにして上昇するのか？
• RQ5 指標の妥当性を保つために、非引用可能出版物をインパクトファクタ計算から除外すべきかどうか？

主な発見

• インパクトファクタ式の分母に非引用可能論文を追加しても、引用が追加されない限りインパクトファクタが上昇することがある。
• この直感に反する挙動は、同一期間および異期間の両方のインパクトファクタ定式化において生じる。
• この効果は、除法の数学的性質に起因する：分子が変わらずに分母に引用ゼロの項目を追加することで、全体の分数が小さくなることがある。
• この現象は、算術的メカニズムとジャーナルのパフォーマンスに関する直感的期待との間の根本的な不一致を露呈する。
• 本研究の結果は、真正に非引用可能な項目をインパクトファクタ計算から除外することで、誤解を避けるべきであるという主張を支持する。
• 本稿は、このような除外が数学的にも概念的にも正当化される理論的根拠を提供する。