[논문 리뷰] Universal Behavior of a Research Productivity Index

Pablo Diniz Batista, Mônica G. Campiteli외 2명|ArXiv.org|2005. 10. 14.

scientometrics and bibliometrics research인용 수 19

한 줄 요약

이 논문은 분야별 편향을 줄이기 위해 공동저자 효과를 고려한 수정된 연구 생산성 지표인 hI를 제안한다. 브라질 연구자들의 데이터를 바탕으로, 다양한 분야에서 보편적인 척도 법칙이 존재하는 것을 입증하여 학술 영향력과 생산성에 대한 공정한 분야 간 비교를 가능하게 한다.

ABSTRACT

Indexes that account for good representations of an individual's productivity are theme of major importance for the evaluation and comparison among researchers. Recently, a new index was proposed combining productivity with impact such that a researcher with index h has h papers with at least h citations. A drawback of this is the sensitivity to the research field. Here we propose a new index (hI) that accounts for the coauthorship effect. The statistics of h and hI are presented for Brazilian research. We have found a universal curve for different disciplines, allowing a comparison among scientists of different research areas.

연구 동기 및 목표

• h-지수가 연구 분야에 민감하게 반응하여 다분야 간 비교를 어렵게 하는 한계를 해결한다.
• 공동저자 수를 보정하여 개인의 연구 기여도를 보다 정확히 반영할 수 있도록 새로운 지수(hI)를 개발한다.
• hI 지수를 사용할 때 다양한 과학 분야 간 보편적인 척도 행동이 존재하는지 조사한다.
• 표준화된 지표를 통해 다양한 분야의 연구자들 간에 더 공정한 평가와 비교를 가능하게 한다.
• 브라질 대학 기관의 실증 데이터를 활용하여 신규 지수의 탄력성과 보편성을 검증한다.

제안 방법

• 각 출판물의 공동저자 수를 고려하여 h-지수를 보정하는 수정된 지수 hI를 제안한다.
• 다양한 과학 분야의 브라질 연구자들에 대한 데이터셋에 hI 지수를 적용한다.
• 통계 분석을 통해 다양한 분야 및 기관 간 hI 값의 분포를 검토한다.
• 다양한 분야에 걸쳐 hI 값을 잘 맞추는 보편적인 척도 곡선을 식별한다. 이는 공통된 기초 패턴을 시사한다.
• hI 지수의 분야 독립성과 일관성 측면에서 전통적인 h-지수와 성능을 비교한다.
• 보조 데이터 및 그림을 활용하여 관찰된 보편적 행동의 탄력성을 검증한다.

실험 결과

연구 질문

• RQ1 공동저자 효과로 인해 발생하는 편향을 줄이기 위해 수정된 연구 지수(hI)가 가능할까?
• RQ2 hI 지수는 다양한 과학 분야에서 보편적인 행동을 보이며 분야 간 비교를 가능하게 할까?
• RQ3 브라질의 다양한 연구 분야에서 hI 값의 분포는 전통적인 h-지수와 어떻게 비교될까?
• RQ4 hI 지수로는 생산성 지표의 분야별 변동성을 어느 정도 제거할 수 있을까?
• RQ5 다양한 학술 분야에 걸쳐 hI 값의 분포를 묘사하는 보편적인 척도 법칙이 존재할까?

주요 결과

• hI 지수는 생산성 지표의 분야에 대한 민감도를 효과적으로 줄여 공정한 비교를 가능하게 한다.
• 브라질의 다양한 과학 분야에서 hI 값에 대해 보편적인 척도 곡선이 관찰되어 공통된 통계적 패턴을 시사한다.
• hI 지수는 분야 간 일관된 행동을 보이며, 다분야 평가에 전통적인 h-지수보다 더 탄력적임을 시사한다.
• 자료에 따르면 공동저자 효과로 인해 h-지수가 심각하게 왜곡되지만, hI 지수에 의해 효과적으로 보정됨을 확인할 수 있다.
• hI의 보편적 곡선은 서로 다른 분야의 연구자들이 단일한 표준화된 지표를 통해 의미 있는 비교가 가능함을 시사한다.
• 브라질 연구 데이터를 활용한 실증 검증을 통해 hI 지수의 안정성과 보편성이 기관 및 분야 간에 확인되었다.