[论文解读] A Framework for Textbook Enhancement and Learning using Crowdsourced Annotations

Anamika Chhabra, S. R. S. Iyengar+2 more|arXiv (Cornell University)|Mar 20, 2015

Online and Blended Learning参考文献 26被引用 5

一句话总结

本文提出了众包标注系统（CAS），一种协作平台，使学生、教师和作者能够通过上下文标注共同提升教科书质量。通过允许学生在学习过程中直接在教科书文本上添加评论、问题和说明，CAS提高了理解力和参与度；一项针对60名学生的实验表明，满意度很高，82.69%的学生表示强烈同意或同意，认为CAS显著有助于理解，并将在未来学习中再次使用。

ABSTRACT

Despite a significant improvement in the educational aids in terms of effective teaching-learning process, most of the educational content available to the students is less than optimal in the context of being up-to-date, exhaustive and easy-to-understand. There is a need to iteratively improve the educational material based on the feedback collected from the students' learning experience. This can be achieved by observing the students' interactions with the content, and then having the authors modify it based on this feedback. Hence, we aim to facilitate and promote communication between the communities of authors, instructors and students in order to gradually improve the educational material. Such a system will also help in students' learning process by encouraging student-to-student teaching. Underpinning these objectives, we provide the framework of a platform named Crowdsourced Annotation System (CAS) where the people from these communities can collaborate and benefit from each other. We use the concept of in-context annotations, through which, the students can add their comments about the given text while learning it. An experiment was conducted on 60 students who try to learn an article of a textbook by annotating it for four days. According to the result of the experiment, most of the students were highly satisfied with the use of CAS. They stated that the system is extremely useful for learning and they would like to use it for learning other concepts in future.

研究动机与目标

• 弥合教科书开发过程中作者、教师与学生之间的沟通鸿沟。
• 通过在学习过程中实时收集学生反馈，提升教科书质量。
• 创建一个支持学生之间相互教学与知识共享的协作学习环境。
• 评估上下文标注作为传统讨论论坛更优替代方案的有效性。
• 开发一种可扩展的框架，利用众包反馈实现教科书的持续改进。

提出的方法

• 该框架引入了一个名为众包标注系统（CAS）的基于网络的平台，用于协同教科书标注。
• 学生在四个类别中添加标注：洞察（I）、问题（Q）、答案（A）和观点（P），直接标注在教科书文本上。
• 标注以侧边栏面板形式显示，保留上下文信息，并实现实时可见性。
• 投票机制允许用户对标注进行评分，有助于突出高质量贡献。
• 系统支持教师分配模块并监控学生互动情况。
• 通过为期四天的实验评估，60名学生使用CAS学习教科书内容。

实验结果

研究问题

• RQ1 上下文标注在提升学生对教科书内容理解方面的有效性如何？
• RQ2 学生在多大程度上认为CAS比传统讨论论坛更有利于学习？
• RQ3 众包标注能否基于学生反馈带来有意义的教科书改进？
• RQ4 不同标注类型（I、Q、A、P）如何促进协作学习与知识建构？
• RQ5 学生使用CAS进行学习时，其感知可用性与满意度水平如何？

主要发现

• 82.69%的学生在五级量表上对关键可用性与学习有效性问题表示‘强烈同意’或‘同意’。
• 学生认为CAS在理解教科书内容方面非常有用，100%的受访者表示将在未来学习中再次使用。
• 大多数学生表示，CAS帮助他们在更短时间内理解文本，并相比传统阅读提升了理解力。
• 学生赞赏界面的易用性，对导航、标注输入和视觉布局均给予高分评价。
• 该系统有效支持了学生之间的相互教学，学生频繁实时提问并提供答案。
• 反馈分析确认，上下文标注相比非线性讨论论坛更具优势，能保持上下文连贯性并提升专注度。