[论文解读] ChatGPT in education: A discourse analysis of worries and concerns on social media

Lingyao Li, Zihui Ma+4 more|arXiv (Cornell University)|Apr 29, 2023

Artificial Intelligence in Healthcare and Education被引用 26

一句话总结

本论文分析 Twitter 话语，以识别教育领域对 ChatGPT 的担忧，使用 BERT-based 主题建模和社交网络分析来绘制是谁在驱动对话以及哪些议题占主导。

ABSTRACT

The rapid advancements in generative AI models present new opportunities in the education sector. However, it is imperative to acknowledge and address the potential risks and concerns that may arise with their use. We analyzed Twitter data to identify key concerns related to the use of ChatGPT in education. We employed BERT-based topic modeling to conduct a discourse analysis and social network analysis to identify influential users in the conversation. While Twitter users generally ex-pressed a positive attitude towards the use of ChatGPT, their concerns converged to five specific categories: academic integrity, impact on learning outcomes and skill development, limitation of capabilities, policy and social concerns, and workforce challenges. We also found that users from the tech, education, and media fields were often implicated in the conversation, while education and tech individual users led the discussion of concerns. Based on these findings, the study provides several implications for policymakers, tech companies and individuals, educators, and media agencies. In summary, our study underscores the importance of responsible and ethical use of AI in education and highlights the need for collaboration among stakeholders to regulate AI policy.

研究动机与目标

• 从社交媒体话语中识别在教育中使用 ChatGPT 的关键担忧。
• 在 Twitter 上表征这些担忧的情感和表述方式。
• 识别塑造对话的有影响力的用户和社区。
• 讨论对利益相关者的政策、实施和伦理影响。
• 为政策制定者、科技公司、教育工作者和媒体机构提供可操作的洞见。

提出的方法

• 分析与教育中 ChatGPT 相关的 Twitter 数据。
• 应用 BERT-based 主题建模来提取话语主题。
• 执行社交网络分析以识别有影响力的用户和社区。
• 将担忧映射到主题类别。
• 综合对政策制定者、行业和教育工作者的影响。

实验结果

研究问题

• RQ1 在 Twitter 上关于教育中的 ChatGPT 的主要担忧是什么？
• RQ2 在关于教育中 ChatGPT 的话语中，常出现哪些主题或议题？
• RQ3 谁是塑造社交媒体对话的有影响力的参与者？
• RQ4 这些话语模式对政策、实践和伦理有哪些影响？

主要发现

• 用户通常对教育中的 ChatGPT 表示积极态度。
• 担忧归纳为五类：学术诚信、对学习成果和技能发展的影响、能力的局限性、政策与社会关注，以及劳动力挑战。
• 技术、教育和媒体领域经常参与讨论，其中教育和技术用户引领对担忧的讨论。
• 该研究为政策制定者、科技公司、教育工作者和媒体机构提供了意义。
• 它强调在教育中负责任和道德使用 AI 的必要性，以及利益相关者之间为规范 AI 政策而进行的协作。