[論文レビュー] A Framework for Textbook Enhancement and Learning using Crowdsourced Annotations

Anamika Chhabra, S. R. S. Iyengar+2 more|arXiv (Cornell University)|Mar 20, 2015

Online and Blended Learning参考文献 26被引用数 5

ひとこと要約

本稿では、学生、教員、著者が教科書の文脈内でのコメントを通じて協働的に教科書を改善できるようにする、共同作業型の教科書アノテーションシステム（CAS）を提案する。学生が学習中に教科書のテキストに直接コメント、質問、説明を追加することで、理解度と関与度が向上する。60名の学生を対象とした実験では、82.69%の学生がCASが理解を著しく支援し、今後も再利用するだろうと「強く同意」または「同意」した。

ABSTRACT

Despite a significant improvement in the educational aids in terms of effective teaching-learning process, most of the educational content available to the students is less than optimal in the context of being up-to-date, exhaustive and easy-to-understand. There is a need to iteratively improve the educational material based on the feedback collected from the students' learning experience. This can be achieved by observing the students' interactions with the content, and then having the authors modify it based on this feedback. Hence, we aim to facilitate and promote communication between the communities of authors, instructors and students in order to gradually improve the educational material. Such a system will also help in students' learning process by encouraging student-to-student teaching. Underpinning these objectives, we provide the framework of a platform named Crowdsourced Annotation System (CAS) where the people from these communities can collaborate and benefit from each other. We use the concept of in-context annotations, through which, the students can add their comments about the given text while learning it. An experiment was conducted on 60 students who try to learn an article of a textbook by annotating it for four days. According to the result of the experiment, most of the students were highly satisfied with the use of CAS. They stated that the system is extremely useful for learning and they would like to use it for learning other concepts in future.

研究の動機と目的

• 教科書開発における著者、教員、学生の間のコミュニケーションギャップを埋めるため。
• 学習プロセス中に学生からリアルタイムのフィードバックを収集することで、教科書の質を向上させるため。
• 学生同士の教え合いと知識共有を支援する協働学習環境を構築するため。
• 文脈内アノテーションが従来のディスカッションフォーラムよりも優れた代替手段であるかどうかを評価するため。
• クラウドソーシングによるフィードバックを活用した教科書改善のスケーラブルなフレームワークを開発するため。

提案手法

• 本フレームワークは、共同教科書アノテーションを可能にするウェブベースのプラットフォーム「Crowdsourced Annotation System（CAS）」を導入する。
• 学生は、教科書のテキスト上に4つのカテゴリ（インサイト（I）、質問（Q）、回答（A）、視点（P））のアノテーションを追加する。
• アノテーションはサイドバーに表示され、文脈を保持し、リアルタイムでの可視化を可能にする。
• 投票メカニズムにより、ユーザーがアノテーションの質を評価でき、高品質な貢献が目立つようになる。
• 教員はモジュールの割り当てや学生の相互作用の監視をシステムで行える。
• 4日間にわたり60名の学生がCASを用いて教科書の記事を学習する実験的評価が実施された。

実験結果

リサーチクエスチョン

• RQ1 文脈内アノテーションは、教科書の内容理解の向上にどの程度効果的か？
• RQ2 学生は、学習のためにCASを従来のディスカッションフォーラムよりもどれほど有用だと感じているか？
• RQ3 クラウドソーシングによるアノテーションは、学生のフィードバックに基づいて教科書に意味のある改善をもたらすことができるか？
• RQ4 異なるアノテーションタイプ（I, Q, A, P）は、協働学習と知識構築にどのように寄与しているか？
• RQ5 CASを学習に使用した学生の主観的使いやすさと満足度はどの程度か？

主な発見

• 82.69%の学生が、5段階評価尺度の主要な使いやすさと学習効果に関する質問について「強く同意」または「同意」と回答した。
• 学生はCASが教科書の内容理解に非常に役立つと評価し、全員（100%）が今後も再利用すると回答した。
• 大多数の学生が、CASのおかげで従来の読解よりも短時間でテキストの理解が深まったと報告した。
• 学生はインターフェースの使いやすさに満足しており、ナビゲーション、アノテーション入力、視覚的レイアウトの各項目で高い評価を得た。
• システムは学生同士の教え合いを効果的に支援し、学生がリアルタイムで質問をし、回答を提供する場面が頻発した。
• フィードバック分析の結果、文脈を保ったアノテーションは、非線形なディスカッションフォーラムに比べ、文脈の維持と集中力の向上で優れていることが確認された。