[논문 리뷰] Prototyping the use of Large Language Models (LLMs) for adult learning content creation at scale

Daniel Leiker, Sara Finnigan외 2명|arXiv (Cornell University)|2023. 06. 02.

Topic Modeling인용 수 18

한 줄 요약

논문은 LLM을 이용한 인간-개입이 있는 비동기식 성인 학습 콘텐츠 제작을 프로토타입화하여 정확도나 명료성을 희생하지 않으면서 콘텐츠 생산 속도를 높임을 발견했다.

ABSTRACT

As Large Language Models (LLMs) and other forms of Generative AI permeate various aspects of our lives, their application for learning and education has provided opportunities and challenges. This paper presents an investigation into the use of LLMs in asynchronous course creation, particularly within the context of adult learning, training and upskilling. We developed a course prototype leveraging an LLM, implementing a robust human-in-the-loop process to ensure the accuracy and clarity of the generated content. Our research questions focus on the feasibility of LLMs to produce high-quality adult learning content with reduced human involvement. Initial findings indicate that taking this approach can indeed facilitate faster content creation without compromising on accuracy or clarity, marking a promising advancement in the field of Generative AI for education. Despite some limitations, the study underscores the potential of LLMs to transform the landscape of learning and education, necessitating further research and nuanced discussions about their strategic and ethical use in learning design.

연구 동기 및 목표

• 고품질의 성인 학습 콘텐츠를 생성하는 LLM의 가능성을 조사한다.
• 성인 교육, 훈련 및 재숙련 맥락에서 비동기식 과정 제작을 탐구한다.
• LLMs로 생성된 콘텐츠가 품질을 유지하면서 인간 참여를 줄일 수 있는지 평가한다.

제안 방법

• 콘텐츠 생성을 위해 LLM을 활용하는 코스 프로토타입을 개발한다.
• 생성된 콘텐츠의 정확성과 명료성을 검증하기 위한 강력한 인간-루프 프로세스를 구현한다.
• 품질을 유지하며 더 빠른 콘텐츠 제작의 타당성과 잠재적 이점을 평가한다.

실험 결과

연구 질문

• RQ1 인간 개입을 줄인 상태에서 LLM이 고품질의 성인 학습 콘텐츠를 생성할 수 있는가?
• RQ2 LLM 보조 워크플로가 생성된 강좌 자료의 정확성과 명료성에 영향을 미치는가?
• RQ3 확장 가능한 성인 학습 콘텐츠 생성을 위해 LLM를 사용하는 데의 이점과 한계는 무엇인가?

주요 결과

• 초기 발견은 이 접근법을 사용하면 콘텐츠 제작 속도를 더 빨리 할 수 있음을 시사한다.
• 초록에 따르면 이 접근 방식은 정확성이나 명료성을 해치지 않았다.
• 본 연구는 한계를 인정하고 학습 설계에서의 전략적이고 윤리적인 사용에 대한 추가 연구의 필요성을 강조한다.