[논문 리뷰] Coverage and metadata completeness and accuracy of African research publications in OpenAlex: A comparative analysis

Patricia Alonso-Álvarez, Nees Jan van Eck|arXiv (Cornell University)|2024. 09. 02.

Publishing and Scholarly Communication인용 수 4

한 줄 요약

이 연구는 OpenAlex가 아프리카 연구 출판물에 대한 커버리지와 메타데이터 품질을 Scopus, 웹 오브 사이언스(WoS), 그리고 아프리카 저널 온라인(AJOL)과 비교하여 평가한다. OpenAlex는 아프리카 출판물에 대해 뛰어난 커버리지와 출판 및 저자 필드에 대해 강력한 메타데이터 완전성을 보이며, 소속, 참고문헌, 자금 지원 데이터는 덜 완전하다. 정확도는 Scopus 및 WoS에 인덱스된 출판물일수록 크게 향상되며, 이는 아프리카 연구 분석을 위한 기업 소유 데이터베이스의 지속 가능한 대안으로서의 강력한 잠재력을 보여준다.

ABSTRACT

Unlike traditional proprietary data sources such as Scopus and the Web of Science (WoS), OpenAlex emphasizes its comprehensiveness. This study analyzes OpenAlex coverage and metadata completeness and accuracy of African research publications. To achieve this, OpenAlex is compared with Scopus, WoS, and African Journals Online (AJOL). First, we examine the coverage of African research publications in OpenAlex relative to Scopus, WoS, and AJOL. Then, we assess and compare the availability and accuracy of metadata in OpenAlex, Scopus, and WoS. The findings indicate that OpenAlex offers the most extensive publication coverage. In terms of metadata, OpenAlex provides high coverage for publication and author information, though its coverage of affiliations, references, and funder information is comparatively lower. Metadata accuracy is similarly high for publication and author fields, while affiliation, reference, and funding information show higher rates of missing or incomplete data. Notably, the results demonstrate that both metadata availability and accuracy in OpenAlex improve significantly for publications also indexed in Scopus and WoS. These findings suggest that OpenAlex has the potential to replace proprietary data sources for certain types of analyses. However, for some metadata fields, there remains a trade-off between extensiveness and accuracy.

연구 동기 및 목표

• Scopus, WoS, AJOL과 같은 기존 데이터베이스와 비교하여 OpenAlex의 아프리카 연구 출판물 커버리지를 평가하는 것.
• 특히 출판, 저자, 소속, 참고문헌, 자금 지원 필드에 대해 OpenAlex의 메타데이터 완전성과 정확도를 평가하는 것.
• Scopus 및 WoS에 인덱스된 출판물이 OpenAlex에서 메타데이터 품질이 향상되는지 조사하는 것.
• OpenAlex가 아프리카 학술 성과 분석을 위한 지속 가능하고 종합적인 기업 소유 데이터베이스의 대안으로 사용 가능한지 여부를 판단하는 것.

제안 방법

• 공통된 출판물 데이터셋을 사용하여 OpenAlex, Scopus, WoS, AJOL 간 아프리카 연구 출판물에 대한 비교 분석을 수행.
• 각 데이터베이스에서 확인된 아프리카 출판물 수를 비교하여 커버리지를 측정.
• 각 메타데이터 필드(예: 제목, 저자, 소속, 참고문헌, 기금 제공자)에서 데이터가 확보된 레코드 비율을 평가하여 메타데이터 완전성 평가.
• Scopus 및 WoS를 기준 기준으로 삼아 OpenAlex의 레코드를 교차 확인함으로써 메타데이터 정확도를 평가.
• Scopus 및 WoS에 동시에 인덱스된 출판물에 집중하여, 이중 인덱싱이 OpenAlex의 메타데이터 품질 향상에 미치는 영향을 분석.
• 데이터베이스 간 커버리지 및 메타데이터 품질의 차이를 정량화하기 위해 통계적 비교 방법을 사용.

실험 결과

연구 질문

• RQ1 OpenAlex의 아프리카 연구 출판물 커버리지는 Scopus, WoS, AJOL와 비교하여 어떻게 다른가?
• RQ2 저자, 소속, 참고문헌, 자금 지원과 같은 핵심 필드에서 OpenAlex의 메타데이터 완전성과 정확도는 Scopus 및 WoS와 얼마나 유사한가?
• RQ3 Scopus 또는 WoS에 출판물이 포함된 것이 OpenAlex에서 메타데이터 완전성과 정확도 향상과 관련이 있는가?
• RQ4 OpenAlex는 아프리카 연구 분석을 위한 타당하고 종합적인 기업 소유 데이터베이스의 대안으로 활용될 수 있는가?

주요 결과

• OpenAlex는 Scopus, WoS, AJOL와 비교해 아프리카 연구 출판물에 대해 가장 광범위한 커버리지를 보였다.
• OpenAlex의 메타데이터 완전성은 출판 및 저자 필드에서 매우 높았지만, 소속, 참고문헌, 자금 정보 분야에서는 상당히 낮았다.
• OpenAlex에서 출판 및 저자 필드의 메타데이터 정확도는 높았지만, 소속, 참고문헌, 기금 제공자 필드는 누락되거나 불완전한 데이터로 인해 낮았다.
• OpenAlex와 Scopus 또는 WoS에 모두 인덱스된 출판물은 OpenAlex에서 메타데이터 완전성과 정확도가 상당히 향상되었으며, 이는 이중 인덱싱이 긍정적인 영향을 미친다는 것을 시사한다.
• 일부 메타데이터 필드의 격차에도 불구하고, OpenAlex는 아프리카 학술 성과의 대규모 분석을 위한 기업 소유 데이터베이스의 대안으로 강력한 잠재력을 보였다.
• 특히 소속 및 자금 메타데이터에서 완전성과 정확성 간의 상충관계가 명확히 드러났으며, OpenAlex의 광범위한 커버리지에도 불구하고 이들 필드는 여전히 불완전하다.