[論文レビュー] Analyzing Linguistic Complexity and Scientific Impact

Chao Lu, Yi Bu+7 more|arXiv (Cornell University)|Jul 27, 2019

Topic Modeling参考文献 43被引用数 7

ひとこと要約

本研究は、36,400編の生物学分野および1,797編の心理学分野の全文論文を対象に、12の言語的複雑さの特徴を用いて、言語的複雑さと科学的インパクトの関係を調査した。複数のテクストの複雑さの指標を分析したが、いずれの分野においても言語的複雑さと引用に基づくインパクトの段階との間には実質的に有意な相関が見つからず、これらのデータセット内では言語的複雑さが科学的影響力に与える影響は最小限であることが示唆された。

ABSTRACT

The number of publications and the number of citations received have become the most common indicators of scholarly success. In this context, scientific writing increasingly plays an important role in scholars' scientific careers. To understand the relationship between scientific writing and scientific impact, this paper selected 12 variables of linguistic complexity as a proxy for depicting scientific writing. We then analyzed these features from 36,400 full-text Biology articles and 1,797 full-text Psychology articles. These features were compared to the scientific impact of articles, grouped into high, medium, and low categories. The results suggested no practical significant relationship between linguistic complexity and citation strata in either discipline. This suggests that textual complexity plays little role in scientific impact in our data sets.

研究の動機と目的

• 科学的論文における言語的複雑さが、ハイイmpactジャーナルにおける学術的インパクトと相関するかどうかを検討すること。
• 全文科学論文に内在する12の特定の言語的複雑さの特徴を特定・測定すること。
• 生物学および心理学の分野において、高・中・低引用数の段階に分けた論文間でこれらの言語的特徴を比較すること。
• テクストの複雑さが、科学的インパクトの主要指標である引用数に影響を与えるかどうかを評価すること。

提案手法

• 本研究は、36,400編の全文生物学論文および1,797編の全文心理学論文から、12の言語的複雑さの特徴を抽出した。
• 言語的複雑さは、文の長さ、語彙頻度、構文の多様性などの構文的・語彙的・話法的特徴を用いて測定された。
• 論文は引用数に基づいて、高・中・低の引用数の段階に分類された。
• 統計的分析により、引用カテゴリ間での言語的特徴の有意差を検出するための比較が行われた。
• 非パラメトリック検定を用いて、インパクトレベルごとの言語的複雑さの差の実用的有意性を評価した。
• 包括的な言語的特徴抽出を保証するため、本研究は全文論文に焦点を当てた。

実験結果

リサーチクエスチョン

• RQ1 生物学および心理学の論文において、言語的複雑さと科学的インパクトの間に有意な関係があるか。
• RQ2 引用数の多い論文は、引用数の少ない論文と比較して、より高い言語的複雑さを示すか。
• RQ3 どの特定の言語的特徴が引用に基づくインパクトと最も強く関連しているか。
• RQ4 言語的複雑さと科学的インパクトの関係は、科学分野によって異なるか。
• RQ5 言語的複雑さは、学術出版における学術的インパクトの意味のある予測因子であるか。

主な発見

• 生物学および心理学の両分野において、言語的複雑さと引用段階との間に実質的に有意な関係は見つからなかった。
• 12の言語的複雑さの特徴は、両分野の高・中・低引用グループ間で最小限のばらつきを示した。
• 統計的検定では、高引用論文に特徴的な複雑さの増加傾向は一貫して認められなかった。
• 引用レベルごとの言語的複雑さの差の効果量は無視できるほど小さく、実用的有意性が低いことを示した。
• 言語的複雑さは、分析されたデータセットにおいて科学的インパクトの信頼できる予測因子とはならなかった。
• 結果から、新規性や方法論的厳密さなどのテキストの複雑さを超えた要因が、科学的インパクトを決定づけている可能性が示唆された。