[論文レビュー] Enhancing STEM Learning with ChatGPT and Bing Chat as Objects to Think With: A Case Study

Marco Antonio Rodrigues Vasconcelos, Renato P. dos Santos|arXiv (Cornell University)|May 1, 2023

Online Learning and Analytics被引用数 7

ひとこと要約

本研究は、建設主義的枠組みを用いて、STEM教育におけるChatGPTおよびBing Chatを「考えるための対象」としての役割を調査する。学生とAIの対話ログを分析した単一事例研究を通じて、これらのAIは反復的思考、問題解決、概念理解の向上に寄与することが明らかになったが、協働学習との統合や信頼性に関する懸念は、効果的な実装に向けた重要な課題のままである。

ABSTRACT

This study investigates the potential of ChatGPT and Bing Chat, advanced conversational AIs, as "objects-to-think-with," resources that foster reflective and critical thinking, and concept comprehension in enhancing STEM education, using a constructionist theoretical framework. A single-case study methodology was used to analyse extensive interaction logs between students and both AI systems in simulated STEM learning experiences. The results highlight the ability of ChatGPT and Bing Chat to help learners develop reflective and critical thinking, creativity, problem-solving skills, and concept comprehension. However, integrating AIs with collaborative learning and other educational activities is crucial, as is addressing potential limitations like concerns about AI information accuracy and reliability of the AIs' information and diminished human interaction. The study concludes that ChatGPT and Bing Chat as objects-to-think-with offer promising avenues to revolutionise STEM education through a constructionist lens, fostering engagement in inclusive and accessible learning environments.

研究の動機と目的

• 大規模言語モデルがChatGPTやBing Chatのように、STEM学習における「考えるための対象」として機能できるかを検討すること。
• これらのAIツールが学生の自己認識的思考や批判的思考、創造性、概念的理解に与える影響を調査すること。
• AI統合が協働的かつ包摂的な学習環境における役割を評価すること。
• 情報の正確性の欠如やAIを介した学習における人間同士の対話の減少といった制限要因を特定すること。
• 建設主義的STEM教育フレームワークにおけるAIの活用に向けた、証拠に基づいた提言を提供すること。

提案手法

• 本研究では、模擬的なSTEM学習課題において学生とChatGPTおよびBing Chatの間で発生した広範な対話ログを分析する単一事例研究デザインを採用した。
• 学生がAIを認知的ツールとして用いて知識を共同で構築するプロセスを解釈するために、建設主義的理論的枠組みを適用した。
• 両方のAIシステムを用いて問題解決や概念的探求に取り組んだ学生から、対話ログを収集した。
• 質的分析は、対話のパターン、推論の深さ、批判的思考および概念的発展の兆候に焦点を当てた。
• 研究者たちは、正確性、関連性、教育的価値の観点からAIが生成した回答の質を評価した。
• ChatGPTとBing Chatの間での比較分析を実施し、ユーザーの関与度および学習成果における差異を評価した。

実験結果

リサーチクエスチョン

• RQ1 学生は、STEMの文脈において、ChatGPTおよびBing Chatをどのように認知的ツールとして用いて、自己認識的思考や批判的思考を支援しているか？
• RQ2 これらのAIシステムは、STEM教科における学生の概念的理解および問題解決スキルをどの程度向上させているか？
• RQ3 大規模言語モデルを建設主義的学習環境に統合することの教育的利点とリスクは何か？
• RQ4 AIの使用は、協働学習環境における学生の関与度および人間同士の対話の質にどのように影響しているか？
• RQ5 AIが生成するコンテンツに関して、正確性、信頼性、教育的整合性の観点からどのような課題が生じているか？

主な発見

• ChatGPTおよびBing Chatは、反復的対話や説明を求めることによる対話的相互作用を通じて、学生の自己認識的思考や批判的思考の発展を効果的に支援した。
• 学生は、質問や仮説検証を通じて複雑なSTEMの概念をAIを介して探求することで、概念理解が向上した。
• これらのツールは、アイデアの迅速なプロトタイピングや代替的解決策の検討を可能にすることで、創造性や問題解決能力を高めた。
• 対話ログの分析から、学生が認知的構築の補助としてAIを用いることで、学習内容に対してより深く関与していることが明らかになった。
• 効果にもかかわらず、AIが生成する情報の信頼性や正確性に関する懸念が生じており、特に事実誤認を含む回答が顕在化した。
• AIを介した学習では人間同士の対話が減少していることが観察されたことから、協働学習活動と構造的に統合する必要があることが示唆された。