[論文レビュー] Desperately seeking the impact of learning analytics in education at scale: Marrying data analysis with teaching and learning

Olga Viberg, Åke Grönlund|arXiv (Cornell University)|May 14, 2021

Online Learning and Analytics被引用数 4

ひとこと要約

本論文は、大規模教育における学習分析（LA）の約束と現実の影響の間のギャップを批判的に検討し、効果的なデータドリブン授業実践には教育者によるニーズ、実践、文脈的制約の深い理解が不可欠であると主張する。持続可能なLAの影響は、教育者によるデジタル化に関する知識とスキルを支援することによって、データ分析と教育的現実を一致させることに依存すると提言する。

ABSTRACT

Learning analytics (LA) is argued to be able to improve learning outcomes, learner support and teaching. However, despite an increasingly expanding amount of student (digital) data accessible from various online education and learning platforms and the growing interest in LA worldwide as well as considerable research efforts already made, there is still little empirical evidence of impact on practice that shows the effectiveness of LA in education settings. Based on a selection of theoretical and empirical research, this chapter provides a critical discussion about the possibilities of collecting and using student data as well as barriers and challenges to overcome in providing data-informed support to educators' everyday teaching practices. We argue that in order to increase the impact of data-driven decision-making aimed at students' improved learning in education at scale, we need to better understand educators' needs, their teaching practices and the context in which these practices occur, and how to support them in developing relevant knowledge, strategies and skills to facilitate the data-informed process of digitalization of education.

研究の動機と目的

• 学習分析（LA）が、膨大なデータの可用性と研究関心の高まりにもかかわらず、大規模教育現場でまだ測定可能な影響を示していない理由を調査すること。
• 教育者が日常の授業実践においてデータインフォームド意思決定を採用する際に直面する主な障壁や課題を特定すること。
• 教育者のニーズ、授業の文脈、既存の実践がLAの実装の可能性と有効性にどのように影響するかを検討すること。
• 教育者がデジタル化教育にLAを意味的に統合するために必要な知識、戦略、スキルを育成する支援フレームワークを提言すること。
• LAの取り組みを現実の授業文脈と教育者の能力に一致させることで、データ分析と教育的実践のギャップを埋めること。

提案手法

• 教育分野における学習分析に関する既存の理論的・実証的研究を批判的にレビューすること。
• 利用可能な学生データと教育者が授業と学習の文脈で実際のニーズに合致しているかを分析すること。
• LAを日常の授業実践に統合するのを妨げる制度的および教育的障壁を検討すること。
• 教育者の主体性、データリテラシー、制度的支援構造を含む、LA実装の社会的・技術的側面に焦点を当てる。
• 教育者の理解と実用性を最優先する文脈感受型のLAアプローチを提言すること。
• LAツールとインサイトが現実の教室環境で関連性があり使いやすいようにするため、教育者を含む共同設計プロセスの必要性を強調すること。

実験結果

リサーチクエスチョン

• RQ1 膨大な研究とデータの可用性にもかかわらず、学習分析がなぜまだ大規模教育現場で顕著な影響を示していないのか。
• RQ2 教育者が授業においてデータインフォームド実践を採用する際に直面する主な障壁は何か。
• RQ3 学習分析を教育者の実際の授業実践と文脈的ニーズにどのようによりよく一致させられるか。
• RQ4 教育者がデジタル化教育環境で学習分析を効果的に使用するために必要な支援は何か。
• RQ5 データインフォームド意思決定を、教育者の日常業務にスケールアップして意味的に統合する方法は何か。

主な発見

• 学生のデジタルデータへのアクセスが増加し、学習分析への関心が高まる一方で、学習成果や授業実践への影響を示す実証的証拠は依然として著しく不足している。
• 教育者は、学習分析データを的確に解釈し、実行するための必要な知識、スキル、制度的支援を欠いていることがしばしばである。
• 学習分析の有効性は、データの可用性と教育者の実際のニーズや教育的文脈との不一致によって強く制限されている。
• 学習分析の成功実装には技術的データシステムの導入以上のことが求められる。授業実践、教育者の主体性、文脈的要因への配慮が不可欠である。
• 教育者のデータリテラシーを高め、データインサイトを実行可能な授業戦略に変換する能力を育成するための的確な支援の必要性が極めて高い。
• 現在のLAアプローチは、教室環境の複雑さを無視していることが多く、結果として実教育現場で使われないか、誤用されるツールが生まれている。