[論文レビュー] Assessing the Effectiveness of Using Live Interactions and Feedback to Increase Engagement in Online Learning

Beth C. Porter, Burçin Bozkaya|arXiv (Cornell University)|Aug 18, 2020

Online and Blended Learning被引用数 5

ひとこと要約

本研究では、オンライン職業訓練課程にライブ対話とリアルタイムフィードバックを統合した場合の影響を評価している。結果は、ライブ参加メカニズムが学習者のパフォーマンス、継続性、補足資料の完了率を顕著に向上させることを示しており、すべての指標で強い統計的有意性を示している。これは、同期型要素が自己学習型オンライン学習で一般的に見られる関与の欠如を効果的に是正できることを示している。

ABSTRACT

In-person instruction for professional development or other types of workplace training provides a social environment and immediate feedback mechanisms that typically ensure all participants are successful. Online, self-paced instruction lacks these mechanisms and relies on the motivation and persistence of each individual learner, often resulting in low completion rates. In this study, we studied the effect of introducing enabling tools and live feedback into an online learning experience on learner performance in the course, persistence in the course, and election to complete supplemental readings and assignments. The findings from our experiments show positive correlations with strong statistical significance between live interactions and all performance measures studied. Research funded by the National Science Foundation, award number #1843391.

研究の動機と目的

• オンライン職業訓練課程におけるライブ対話とリアルタイムフィードバックの導入が、学習者の関与に与える影響を調査すること。
• これらの介入がコースパフォーマンス、継続性、補足資料の完了に与える影響を評価すること。
• 同期型要素が自己学習型オンライン学習環境で一般的に見られる低い修了率を緩和できるかどうかを評価すること。
• オンライン教育におけるインタラクティブでフィードバック駆動のデザインの有効性に関する実証的証拠を提供すること。

提案手法

• 本研究では、オンライン職業訓練課程において、制御された実験を実施し、ライブ質疑応答セッションとリアルタイムフィードバックメカニズムを導入した。
• 学習者をランダムに処置群と対照群に割り当て、ライブ対話の影響を分離した。
• パフォーマンスはコース評価で測定され、継続性はタスクに費やした時間とコース完了率で追跡され、関与度は補足読書と課題参加の有無で評価された。
• 効果量と有意性に注目して、グループ間の結果を比較する統計的分析が用いられた。
• インストラクター主導の構造的ライブセッションに即時のフィードバックが組み込まれており、対面訓練のダイナミクスを模倣した。
• 信頼性と一般化可能性を確保するため、複数回のコース実施期間にわたりデータを収集した。

実験結果

リサーチクエスチョン

• RQ1 オンラインコースにライブ対話が組み込まれることで、学習者のパフォーマンスが向上するか？
• RQ2 リアルタイムフィードバックメカニズムは、コース継続性にどの程度向上効果をもたらすか？
• RQ3 ライブ対話が導入されると、補足読書や課題の完了率に測定可能な向上が見られるか？
• RQ4 ライブ対話は、自己学習型学習と比較して、関与度と記憶保持にどの程度優れているか？

主な発見

• ライブ対話の有無が、効果量が強く実用的影響を示す統計的有意な学習パフォーマンスの向上をもたらした。
• ライブ対話群の学習者は、コース内での滞在時間とモジュールの完了率によって測定された継続性が著しく高い水準にあった。
• ライブフィードバックセッションを経験した参加者において、補足読書や課題の完了率に顕著な増加が見られた。
• 本研究では、ライブ対話の頻度と、すべてのパフォーマンスおよび関与度指標との間に、肯定的で統計的に有意な相関関係が確認された。
• 結果は複数回のコース実施期間にわたり一貫しており、介入の有効性が安定していることが示された。
• 介入により、対面訓練に見られる主な社会的要因とフィードバックメカニズムが効果的に再現され、オンライン環境における退学や関与の欠如が軽減された。