[论文解读] Evaluation of research and evolution of science indicators

Loet Leydesdorff|ArXiv.org|Nov 22, 2009

scientometrics and bibliometrics researchDecision Sciences参考文献 37被引用 20

一句话总结

本文探讨了在知识经济和全球化背景下，学术界、政府与产业关系的系统性变革如何重塑科学指标的演变。文章认为，研究评估已嵌入复杂、多维的通信系统之中，因此需要采用新方法进行科学计量测量，以反映动态的、全球化的知识流动以及研究定义的转变。

ABSTRACT

Whereas the research program of the measurement of scientific communications emerged in a context where the delineations among academia, government, and industry were institutionalized, the systemic development of these relations during the second half of the 20th century has changed the system of reference for the evaluation of research. In a knowledge-based economy science fulfills functions that change the definitions of what is considered research and globalization has changed the relevance of national systems of reference. Science, of course, has been internationally oriented from its very beginning, but the entrainment of the research process in these global developments is reflected in the research evaluation and the scientometric measurement. In other words, the systems under study have become more complex. A complex dynamics can analytically be decomposed in several subdynamics. The evolving systems and subsystems communicate in different dimensions and the evaluation has become part of the codification of these communications.

研究动机与目标

• 分析学术界、政府与产业的制度变革如何重新定义研究评估的参考体系。
• 研究全球化与知识经济对科学研究所概念化与测量方式的影响。
• 考察研究系统日益复杂化对科学计量指标新方法的必要性。
• 探讨传播动态在科学产出的编码与评估中所起的作用。
• 在研究系统发生系统性转变的背景下，重新评估传统科学指标的相关性与演变。

提出的方法

• 将复杂的研究系统分解为子动态，以理解其相互作用。
• 使用科学计量指标作为测量和评估科学传播与知识流动的工具。
• 应用系统理论来建模学术界、政府、产业与全球网络之间关系的演变。
• 考察从制度化边界到整合性、全球化系统的研究评估历史发展。
• 整合物理学与科学社会学的理论框架，以解释研究测量的变化。
• 以期刊文章《Current Science》为案例研究，评估指标随时间的演变。

实验结果

研究问题

• RQ1 学术界、政府与产业之间的制度边界如何演变，这对研究评估产生了何种影响？
• RQ2 全球化在多大程度上改变了国家参考体系在评估科学研究中的相关性？
• RQ3 向知识经济的转变如何重新定义了被视为‘研究’的标准与功能？
• RQ4 复杂、多维的传播系统对科学指标发展有何影响？
• RQ5 科学传播的编码过程如何成为评估过程本身不可或缺的一部分？

主要发现

• 学术界、政府与产业之间的制度界限已逐渐模糊，催生了挑战传统评估框架的新系统性配置。
• 全球化已削弱国家体系在研究评估中的主导地位，使关注点转向跨国与跨学科知识网络。
• 知识经济已将科学的功能从纯粹研究扩展至创新、政策与经济发展，从而改变了‘研究’的定义。
• 科学传播已日益嵌入复杂、动态的系统之中，评估不再处于外部，而是成为编码过程的一部分。
• 传统科学指标已不足以捕捉当代研究系统多维且不断演变的特性。
• 本文结论认为，科学指标必须随之演化，以反映系统复杂性、全球一体化以及科学在社会中角色的转变。