[论文解读] Altmetrics (Chapter from Beyond Bibliometrics: Harnessing Multidimensional Indicators of Scholarly Impact)
本文提出替代计量（altmetrics）作为一种多维度的学术影响力衡量方法，超越传统引文，通过追踪Twitter、Mendeley和博客等平台上的在线互动来衡量学术影响力。研究表明，替代计量能够捕捉更广泛、更实时的影响，尤其是在早期职业研究和跨学科研究中，同时也指出了其在应用和解读方面存在的局限性及未来研究需求。
This chapter discusses altmetrics (short for "alternative metrics"), an approach to uncovering previously-invisible traces of scholarly impact by observing activity in online tools and systems. I argue that citations, while useful, miss many important kinds of impacts, and that the increasing scholarly use of online tools like Mendeley, Twitter, and blogs may allow us to measure these hidden impacts. Next, I define altmetrics and discuss research on altmetric sources--both research mapping the growth of these sources, and scientometric research measuring activity on them. Following a discussion of the potential uses of altmetrics, I consider the limitations of altmetrics and recommend areas ripe for future research.
研究动机与目标
- 解决传统文献计量学在捕捉学术影响力全貌方面的局限性。
- 识别并分析社交媒体和参考文献管理工具中学术影响力替代指标，如社交媒体提及和参考文献管理器中的记录。
- 评估替代计量在衡量早期职业研究影响力和跨学科影响力方面的潜力。
- 评估替代计量来源在科学评价背景下的可靠性与有效性。
- 概述改进替代计量方法论及将其整合到研究评估中的未来研究方向。
提出的方法
- 本文将替代计量定义为来自Mendeley、Twitter和博客等平台的学术互动数字痕迹。
- 综述了现有研究中替代计量来源在不同学术学科中的增长与采用情况。
- 分析了测量替代计量平台活动水平的科学计量研究，以评估其与传统影响力指标的相关性。
- 该方法涉及将来自不同在线来源的活动数据聚合并归一化，形成综合影响力评分。
- 通过考察其时效性、粒度和对不同类型研究产出的敏感性，评估了在研究评估中使用替代计量的可行性。
- 该方法还包括对替代计量局限性的批判性反思，如潜在偏差和缺乏标准化。
实验结果
研究问题
- RQ1替代计量在衡量学术影响力方面，如何补充或扩展基于引文的传统指标？
- RQ2哪些类型的学术产出和研究群体在替代计量中表现出最高的参与度？
- RQ3替代计量分数与传统影响力指标（如引文和期刊影响因子）的相关程度如何？
- RQ4在研究评估中使用替代计量时，存在哪些方法论和解读上的挑战？
- RQ5为提高基于替代计量的影响力评估的可靠性和公平性，未来需要哪些研究？
主要发现
- 与引文相比，替代计量能更早、更广泛地捕捉学术影响力，尤其适用于数据集和软件等非传统产出。
- 在Mendeley和Twitter等平台上的互动与更广泛的传播和早期影响力相关，尤其在具有强在线存在感的学科中。
- 替代计量分数在不同学科间存在显著差异，生命科学和社会科学中的活动水平高于人文学科。
- 本文识别出替代计量中的潜在偏差，如高影响力研究者的过度代表以及平台用户群体特征的差异。
- 有充分证据表明，替代计量反映了实时关注度和公众参与度，但其对长期影响力的预测能力仍不确定。
- 本研究呼吁采用标准化的方法论和透明的数据来源，以提升基于替代计量评估的可信度和公平性。
更好的研究，从现在开始
从阅读论文到最终审阅，大幅缩短您的研究时间。
无需绑定信用卡
本解读由 AI 生成，并经人工编辑审核。