[论文解读] The Evolution of Learning: Assessing the Transformative Impact of Generative AI on Higher Education

Stefanie Krause, Bhumi Hitesh Panchal+1 more|arXiv (Cornell University)|Apr 16, 2024

Engineering Education and Technology被引用 6

一句话总结

本文采用混合方法研究（调查和情景分析）来评估生成式AI如ChatGPT对学生和高等教育机构的影响，强调潜在收益、风险以及负责任使用的政策建议。

ABSTRACT

Generative Artificial Intelligence (GAI) models such as ChatGPT have experienced a surge in popularity, attracting 100 million active users in 2 months and generating an estimated 10 million daily queries. Despite this remarkable adoption, there remains a limited understanding to which extent this innovative technology influences higher education. This research paper investigates the impact of GAI on university students and Higher Education Institutions (HEIs). The study adopts a mixed-methods approach, combining a comprehensive survey with scenario analysis to explore potential benefits, drawbacks, and transformative changes the new technology brings. Using an online survey with 130 participants we assessed students' perspectives and attitudes concerning present ChatGPT usage in academics. Results show that students use the current technology for tasks like assignment writing and exam preparation and believe it to be a effective help in achieving academic goals. The scenario analysis afterwards projected potential future scenarios, providing valuable insights into the possibilities and challenges associated with incorporating GAI into higher education. The main motivation is to gain a tangible and precise understanding of the potential consequences for HEIs and to provide guidance responding to the evolving learning environment. The findings indicate that irresponsible and excessive use of the technology could result in significant challenges. Hence, HEIs must develop stringent policies, reevaluate learning objectives, upskill their lecturers, adjust the curriculum and reconsider examination approaches.

研究动机与目标

• 了解大学生在学术情境中实际使用ChatGPT的方式。
• 识别生成式AI在学生中的潜在收益与弊端。
• 探讨对教学、学习目标和评估可能带来的变革性影响。
• 开发基于情景的洞见，以指导高等教育机构在政策与课程规划方面。

提出的方法

• 进行线上调查，参与者130人（分析了115名ChatGPT用户），以捕捉学生对当前ChatGPT使用的看法。
• 进行情景分析，根据使用频率和责任维度预测最佳情形、基线情形和最坏情形的未来。
• 引入三个反馈循环，约20名学生和两位教授，以验证观点和方法。
• 使用Google表单进行数据收集，使用Excel对调查结果进行数据分析。
• 结合文献综合研究结果，以推导对教学、学习和政策的影响。

实验结果

研究问题

• RQ1 RQ1：在教育用途上使用生成式AI，对学生可能带来哪些潜在收益与弊端？
• RQ2 RQ2：生成式AI对高等教育机构（HEIs）可能产生哪些后果或影响？

主要发现

• 大多数学生将ChatGPT用于基础研究/事实核查、头脑风暴、写作论文和考试准备。
• 大约46%的参与者每月使用几次，37%每周使用多次。
• 63%对ChatGPT的回答不满意，但87%认为它可以减轻工作量，65%认为它有助于实现学术目标。
• 超过50%的人感觉ChatGPT没有降低他们的参与度，60%的人没有感知到对解决问题能力的负面影响；然而，65%承认该工具让作弊更容易。
• 72%认为ChatGPT生成的内容具有误导性，83%在有合适保障措施的情况下会考虑在考试或作业中使用它。
• 84%愿意向他人推荐ChatGPT，主要用于头脑风暴，前提是进行事实核查。