[論文レビュー] Prototyping the use of Large Language Models (LLMs) for adult learning content creation at scale

Daniel Leiker, Sara Finnigan+2 more|arXiv (Cornell University)|Jun 2, 2023

Topic Modeling被引用数 18

ひとこと要約

本論文は、人間の介在を伴うLLMを用いた非同期の成人学習コンテンツ作成のプロトタイプを提案し、精度や明確さを損なうことなくより速いコンテンツ作成を実現できると示した。

ABSTRACT

As Large Language Models (LLMs) and other forms of Generative AI permeate various aspects of our lives, their application for learning and education has provided opportunities and challenges. This paper presents an investigation into the use of LLMs in asynchronous course creation, particularly within the context of adult learning, training and upskilling. We developed a course prototype leveraging an LLM, implementing a robust human-in-the-loop process to ensure the accuracy and clarity of the generated content. Our research questions focus on the feasibility of LLMs to produce high-quality adult learning content with reduced human involvement. Initial findings indicate that taking this approach can indeed facilitate faster content creation without compromising on accuracy or clarity, marking a promising advancement in the field of Generative AI for education. Despite some limitations, the study underscores the potential of LLMs to transform the landscape of learning and education, necessitating further research and nuanced discussions about their strategic and ethical use in learning design.

研究の動機と目的

• 高品質な成人学習コンテンツをLLMsが作成できるかという実現性を調査する。
• 成人教育、訓練、スキル向上の文脈で非同期のコース作成を探る。
• LLMsで作成されたコンテンツが品質を維持しつつ人間の関与を減らせるかを評価する。

提案手法

• コンテンツ生成にLLMを活用したコースのプロトタイプを開発する。
• 生成されたコンテンツの正確さと明確さを検証するため、堅牢な人間の介入プロセスを実装する。
• 品質を保ちながらより速いコンテンツ作成の実現性と潜在的利益を評価する。

実験結果

リサーチクエスチョン

• RQ1 人間の関与を減らしつつLLMsは高品質な成人学習コンテンツを生成できるか？
• RQ2 LLM支援ワークフローは生成された講座資料の正確さと明確さに影響を与えるか？
• RQ3 拡張可能な成人学習コンテンツ作成におけるLLMsの利点と限界は何か？

主な発見

• 初期の知見では、このアプローチを用いるとより速いコンテンツ作成が可能であることが示唆される。
• 要約欄によれば、このアプローチは精度や明確さを損なわなかった。
• 研究は制約を認め、学習設計における戦略的および倫理的な使用に関するさらなる研究の必要性を強調している。