[論文レビュー] Exploring User Perspectives on ChatGPT: Applications, Perceptions, and Implications for AI-Integrated Education

Reza Hadi Mogavi, Chao Deng+10 more|arXiv (Cornell University)|May 22, 2023

Artificial Intelligence in Healthcare and Education被引用数 62

ひとこと要約

この研究は、教育における ChatGPT の初期採用者の経験と見解を、Twitter、Reddit、YouTube、LinkedIn からの 6,000 件のソーシャルメディア文本の質的内容分析を実施して分析し、教育的応用と認識を可視化します。

ABSTRACT

To foster the development of pedagogically potent and ethically sound AI-integrated learning landscapes, it is pivotal to critically explore the perceptions and experiences of the users immersed in these contexts. In this study, we perform a thorough qualitative content analysis across four key social media platforms. Our goal is to understand the user experience (UX) and views of early adopters of ChatGPT across different educational sectors. The results of our research show that ChatGPT is most commonly used in the domains of higher education, K-12 education, and practical skills training. In social media dialogues, the topics most frequently associated with ChatGPT are productivity, efficiency, and ethics. Early adopters' attitudes towards ChatGPT are multifaceted. On one hand, some users view it as a transformative tool capable of amplifying student self-efficacy and learning motivation. On the other hand, there is a degree of apprehension among concerned users. They worry about a potential overdependence on the AI system, which they fear might encourage superficial learning habits and erode students' social and critical thinking skills. This dichotomy of opinions underscores the complexity of Human-AI Interaction in educational contexts. Our investigation adds depth to this ongoing discourse, providing crowd-sourced insights for educators and learners who are considering incorporating ChatGPT or similar generative AI tools into their pedagogical strategies.

研究の動機と目的

• 初期採用者によって報告された ChatGPT の支配的な教育的応用を理解する。
• 教育プロセスへの ChatGPT の影響に関する初期の認識を探る（肯定的、否定的、混合、または中立）。
• 議論に貢献する利害関係者グループ（研究者、教育者、学習者、保護者、一般ユーザー）を特定する。
• AI統合教育を検討している教育者と学習者を支援するためのクラウドソースの洞察を提供する。

提案手法

• Twitter、Reddit、YouTube、LinkedIn の公開ソーシャルメディアデータの質的内容分析。
• ChatGPT および教育関連キーワードを含む投稿を要件とする包含基準。
• 多様な初期採用者の役割を反映する高可視性投稿の階層化乱択抽出。
• Braun and Clarke の六段階フレームワークを用いた帰納的コーディングによるテーマ抽出。
• Fleiss’ Kappa（κ = 0.87）でコーダ間信頼性を評価。
• API アクセス、匿名化、機関承認を伴う倫理的データ収集。

実験結果

リサーチクエスチョン

• RQ1 RQ1: 初期採用者によって報告された ChatGPT の支配的な教育的応用は何ですか？
• RQ2 RQ2: 教育セクターの採用者の ChatGPT に対する初期認識は何であり、教育プロセスへの影響をどのように評価していますか？

主な発見

• ChatGPT は高等教育 (24.18%)、K-12 教育 (22.09%)、実践的技能学習 (15.28%) で最も頻繁に使用されています。
• その他の著名な分野には、専門能力開発 (9.61%)、起業教育 (7.18%)、生涯学習 (4.64%)、普及科学教育 (3.25%) が含まれます。
• ソーシャルメディア上の議論は、生産性 (73.19%)、効率 (63.02%)、倫理 (48.51%) を中心としています。
• 初期採用者の態度は混在しており：30.62% は肯定的、17.15% は否定的、37.34% は混合、14.89% は中立。
• 本研究は 2022年12月1日から2023年4月22日までの ~150,000 語を 6,000 件のテキストサンプルから分析しました。