[논문 리뷰] Evaluation of research and evolution of science indicators

Loet Leydesdorff|ArXiv.org|2009. 11. 22.

scientometrics and bibliometrics researchDecision Sciences참고 문헌 37인용 수 20

한 줄 요약

이 논문은 지식 기반 경제와 글로벌화의 맥락에서 학술계, 정부, 산업 간 관계의 체계적 변화가 과학 지표의 진화에 어떻게 영향을 미쳤는지 분석한다. 연구 평가가 복잡한 다차원적 소통 체계에 통합되어, 동적인 글로벌 지식 흐름과 연구의 정의 변화를 반영하는 새로운 과학측정 측정 방법이 필요해졌음을 주장한다.

ABSTRACT

Whereas the research program of the measurement of scientific communications emerged in a context where the delineations among academia, government, and industry were institutionalized, the systemic development of these relations during the second half of the 20th century has changed the system of reference for the evaluation of research. In a knowledge-based economy science fulfills functions that change the definitions of what is considered research and globalization has changed the relevance of national systems of reference. Science, of course, has been internationally oriented from its very beginning, but the entrainment of the research process in these global developments is reflected in the research evaluation and the scientometric measurement. In other words, the systems under study have become more complex. A complex dynamics can analytically be decomposed in several subdynamics. The evolving systems and subsystems communicate in different dimensions and the evaluation has become part of the codification of these communications.

연구 동기 및 목표

• 학술계, 정부, 산업의 제도적 변화가 연구 평가의 기준 체계를 어떻게 재정의했는지 분석하기.
• 글로벌화와 지식 기반 경제가 과학 연구의 개념화 및 측정에 어떤 영향을 미쳤는지 조사하기.
• 연구 체계의 복잡성 증가가 과학측정 지표의 새로운 접근 방식이 필요로 하는 이유를 검토하기.
• 소통 역학이 과학적 산출물의 체계화 및 평가에 어떤 역할을 하는지 탐구하기.
• 연구 체계의 체계적 전환을 고려할 때 전통적인 과학 지표의 관련성과 진화를 재평가하기.

제안 방법

• 연구 체계의 복잡성을 하위 역학으로 분해하여 상호작용을 이해하기.
• 과학소통과 지식 흐름을 측정하고 평가하기 위한 과학측정 지표의 활용.
• 학술계, 정부, 산업, 글로벌 네트워크 간의 진화하는 관계를 모델링하기 위해 체계 이론의 적용.
• 제도화된 경계에서 통합된 글로벌 시스템으로의 연구 평가 역사적 발전 검토.
• 물리학 및 과학 사회학 이론 프레임워크의 통합을 통해 연구 측정의 변화를 해석하기.
• 지표의 진화를 시간에 따라 평가하기 위해 'Current Science' 저널 논문을 사례로 활용하기.

실험 결과

연구 질문

• RQ1 학술계, 정부, 산업 간 제도적 경계는 어떻게 진화했으며, 연구 평가에 어떤 영향을 미쳤는가?
• RQ2 글로벌화가 과학 연구 평가에서 국가적 기준 체계의 관련성에 어떤 영향을 미쳤는가?
• RQ3 지식 기반 경제로의 전환은 무엇을 연구로 간주하는지의 기준과 기능을 어떻게 재정의했는가?
• RQ4 복잡하고 다차원적인 소통 체계는 과학 지표 개발에 어떤 함의를 지닌다?
• RQ5 과학 소통의 체계화가 평가 과정 자체에 어떻게 통합되었는가?

주요 결과

• 학술계, 정부, 산업 간 제도적 경계가 약화되어 전통적 평가 프레임워크에 도전하는 새로운 체계적 구성이 나타났다.
• 글로벌화로 인해 연구 평가에서 국가 시스템의 우선성이 감소하여, 횡단적이고 다학제적 지식 네트워크로의 초점 이동이 일어났다.
• 지식 기반 경제는 순수 연구를 넘어서 혁신, 정책, 경제 개발의 기능까지 과학의 역할을 확장하여 '연구'의 정의를 재정의했다.
• 과학 소통은 평가가 외부에 있는 것이 아니라 체계화 과정의 일부가 되는 복잡하고 역동적인 체계에 점점 더 통합되고 있다.
• 전통적인 과학 지표는 현대 연구 체계의 다차원적이고 진화하는 성격을 충분히 반영하지 못한다.
• 논문은 과학 지표가 체계적 복잡성, 글로벌 통합, 그리고 과학의 사회적 역할 변화를 반영하도록 진화해야 한다고 결론내린다.