[论文解读] Assessing the Effectiveness of Using Live Interactions and Feedback to Increase Engagement in Online Learning

Beth C. Porter, Burçin Bozkaya|arXiv (Cornell University)|Aug 18, 2020

Online and Blended Learning被引用 5

一句话总结

本研究评估了在在线专业发展课程中整合实时互动与即时反馈的影响。结果显示，实时参与机制显著提升了学习者的表现、学习持续性以及补充材料的完成度，所有指标均具有强烈的统计显著性，表明同步元素能够有效缓解自定进度在线学习中常见的参与度下降问题。

ABSTRACT

In-person instruction for professional development or other types of workplace training provides a social environment and immediate feedback mechanisms that typically ensure all participants are successful. Online, self-paced instruction lacks these mechanisms and relies on the motivation and persistence of each individual learner, often resulting in low completion rates. In this study, we studied the effect of introducing enabling tools and live feedback into an online learning experience on learner performance in the course, persistence in the course, and election to complete supplemental readings and assignments. The findings from our experiments show positive correlations with strong statistical significance between live interactions and all performance measures studied. Research funded by the National Science Foundation, award number #1843391.

研究动机与目标

• 调查在在线专业发展课程中引入实时互动与即时反馈是否能提升学习者参与度。
• 评估这些干预措施对课程表现、学习持续性及补充材料完成度的影响。
• 评估同步元素是否能够缓解自定进度在线学习环境中常见的低完成率问题。
• 为在线教育中互动式、反馈驱动设计的有效性提供实证证据。

提出的方法

• 本研究在一项在线专业发展课程中实施了受控实验，引入了实时问答环节与即时反馈机制。
• 学习者被随机分配至实验组与对照组，以隔离实时互动的影响。
• 通过课程测验衡量表现，通过学习时长与课程完成情况追踪持续性，通过补充阅读与作业参与情况衡量参与度。
• 采用统计分析比较两组结果，重点关注效应量与显著性。
• 干预措施包括结构化、由教师主导的实时互动环节，并即时提供反馈，其设计模仿面对面培训的动态。
• 数据在多个课程周期中收集，以确保结果的可靠性与普适性。

实验结果

研究问题

• RQ1 在线课程中引入实时互动是否能带来更高的学习者表现？
• RQ2 实时反馈机制在多大程度上提升了课程持续性？
• RQ3 当引入实时互动时，补充阅读与作业的完成度是否出现可测量的提升？
• RQ4 与自定进度学习相比，实时互动在参与度与保留率方面表现如何？

主要发现

• 实时互动的存在显著提升了学习者表现，效应量表明其具有强烈的实际影响。
• 参与实时互动的学习者在持续性方面表现更优，表现为课程内停留时间更长、模块完成率更高。
• 经历实时反馈环节的参与者在补充阅读与作业完成度方面有显著提升。
• 研究发现，实时互动频率与所有表现及参与度指标之间存在正向且具有统计显著性的相关性。
• 该结果在多个课程周期中保持一致，表明干预措施具有持续有效性。
• 该干预有效复现了面对面培训中的关键社交与反馈机制，降低了在线环境中的退课与参与度下降现象。