[論文レビュー] The effect of the Indonesian higher education evaluation system on conference proceedings publications

Philip J. Purnell|arXiv (Cornell University)|Oct 26, 2019

scientometrics and bibliometrics research参考文献 5被引用数 4

ひとこと要約

本研究は、インドネシアの高等教育評価制度が学術出版行動に与えた影響を調査し、国際的・地域的水準を大幅に上回る著書の増加が確認された。Web of Science、Scopus、Dimensionsのデータを用いて、文書タイプの区別がない政策的インcentiveが、学術誌よりも迅速なカンファレンスプロシーディングスを好む傾向を生み出し、出版パターンを変化させ、研究評価の影響が学術的成果物の質に与える懸念を呈した。

ABSTRACT

Indonesia has exhibited a unique pattern of conference proceedings publishing that was distinct from global and regional norms. Conference proceedings are now an integral part of the major citation databases, and this study examined their progressive coverage in the context of academic career advancement and Indonesian government policy. The results of analyses in Web of Science (WoS), Scopus and to a lesser extent, Dimensions showed an increase in the proportion of conference proceedings far in excess of global norms and not seen in any other South East Asian country. In the conference series containing most Indonesian proceedings papers, there was a recent increase in representation from Indonesia and an increase in the proportion of those conferences hosted in Indonesia. Local policy documents and guidelines from 2012 and 2014 appeared to encourage academics to increase research outputs in high impact internationally indexed sources but did not make any distinction between document types. The conclusion suggests that scholars might have found advantage in advancing through the hierarchy of academia through publishing conference papers that were quicker and easier to publish than journal articles. The study is important to policy makers in the area of research evaluation because it highlights potential changes in academic publishing behaviour by those being assessed.

研究の動機と目的

• インドネシアの高等教育評価制度が学術出版行動に与える影響を分析すること。
• インドネシアにおけるカンファレンスプロシーディングスの出版が、国際的・地域的トレンドと比較して著しく増加した理由を調査すること。
• 2012年および2014年の政府政策が、研究者が出版場所を選択する行動に与えた影響を評価すること。
• 評価基準において学術誌とカンファレンス論文の区別がないことが、カンファレンスプロシーディングスの増加に寄与したかどうかを特定すること。
• この移行が、インドネシアにおける研究の質および学術的キャリア進歩に与える影響を評価すること。

提案手法

• 主要な引用データベース（Web of Science、Scopus、Dimensions）からの出版データ分析。
• 時間経過に伴うインドネシアの学術的出力におけるカンファレンスプロシーディングスの割合を定量的に追跡。
• 2012年および2014年の政策文書およびガイドラインの検証により、インデックス済み出稿を促すインcentiveを特定。
• インドネシアの出版トレンドを東南アジアの地域的・世界的な水準と比較。
• インドネシアの論文を収録するカンファレンスシリーズの分析、特に地理的シフトとインドネシアの代表の増加。
• 引用データベースのカバレッジを活用し、インドネシアのカンファレンス出版物の可視性およびインデックス化状況を評価。

実験結果

リサーチクエスチョン

• RQ1 インドネシアの高等教育評価制度は、学術出版の規模および種別にどのように影響を与えたか？
• RQ2 なぜインドネシアは他の東南アジア諸国と比較して、カンファレンスプロシーディングスの出稿が著しく増加したのか？
• RQ3 2012年および2014年の政策的インcentiveが、インデックス済みカンファレンスプロシーディングスへの出稿をどの程度促進したか？
• RQ4 評価基準において学術誌とカンファレンス論文の区別がないことが、戦略的出版行動を引き起こしたとみるべきか？
• RQ5 この出版行動の変化が、学術的キャリア進歩および研究の質に与える影響は何か？

主な発見

• インドネシアにおけるカンファレンスプロシーディングスの出稿割合は、国際的・地域的水準を著しく上回り、特にインデックス済みデータベースで顕著に増加した。
• インドネシアの出版物におけるカンファレンス論文の割合は急激に上昇したが、他の東南アジア諸国では同様の傾向は観察されなかった。
• インドネシアの論文を最も多く収録しているカンファレンスシリーズでは、インドネシアの参加者数とインドネシア国内での開催場所の増加が顕著に見られた。
• 2012年および2014年の政府政策は、学術誌とカンファレンス論文の区別を設けず、高インパクトで国際的にインデックスされた出稿先への出稿を奨励した。
• 研究者らは、キャリア進歩のための迅速かつ容易な手段として、カンファレンスプロシーディングスを戦略的に選択しているとみられる。
• 本研究の結果は、研究評価制度が、研究の質や可視性に悪影響を及ける可能性がある形で、出版行動を意図しない形で形作っている可能性を示唆している。