[論文レビュー] The Challenges of Assessing and Evaluating the Students at Distance

Fernando Almeida, José Monteiro|arXiv (Cornell University)|Jan 30, 2021

Online Learning and Analytics被引用数 10

ひとこと要約

本論文は、COVID-19パンデミック期におけるポルトガルの高等教育機関における遠隔学習の受講生の評価に関する課題を検討し、伝統的な対面授業から遠隔学習への移行に焦点を当てている。形成的評価と summative 評価モデルに関する教員および学生の見解を分析し、学業の誠実性、技術的障壁、監視ツール（例：ウェブカメラ監視）に伴うプライバシー問題への懸念を浮き彫りにした。最終的に、遠隔教育環境におけるバランスの取れた、学生中心の評価アプローチの実践を提言している。

ABSTRACT

The COVID-19 pandemic has caused a strong effect on higher education institutions with the closure of classroom teaching activities. In this unprecedented crisis, of global proportion, educators and families had to deal with unpredictability and learn new ways of teaching. This short essay aims to explore the challenges posed to Portuguese higher education institutions and to analyze the challenges posed to evaluation models. To this end, the relevance of formative and summative assessment models in distance education is explored and the perception of teachers and students about the practices adopted in remote assessment is discussed. On the teachers' side, there is a high concern about adopting fraud-free models, and an excessive focus on the summative assessment component that in the distance learning model has less preponderance when compared to the gradual monitoring and assessment processes of the students, while on the students' side, problems arise regarding equipment to follow the teaching sessions and concerns about their privacy, particularly when intrusive IT solutions request the access to their cameras, audio, and desktop.

研究の動機と目的

• ポルトガルの高等教育機関におけるCOVID-19パンデミックが評価実践に与えた影響を分析すること。
• 遠隔学習環境において、不正防止に配慮した評価モデルを設計するにあたり、教育者が直面する課題を検討すること。
• 遠隔評価に参加するにあたり、学生が技術アクセスとプライバシーに関する懸念を抱いているかを調査すること。
• 遠隔教育環境における形成的評価と summative 評価の役割とバランスを評価すること。
• 継続的モニタリングと学生支援を重視するよう、評価モデルの再考を提言すること。

提案手法

• 本研究は、ポルトガルの高等教育機関における遠隔評価実践に関する教員および学生の認識を対象とした定性的分析を採用している。
• パンデミック期における遠隔学習への移行に伴い実施されたインタビューおよびアンケートの知見を活用している。
• 教員が使用する従来の対面評価モデルと、特に監視技術に注目した新たな遠隔評価戦略を比較分析している。
• 分析は、遠隔教育環境における summative 評価モデルから formative 評価モデルへのシフトに重点を置いている。
• 試験中にカメラ、マイク、画面共有へのアクセスを義務付けるITソリューションの有効性と倫理的含意を評価している。
• 研究は、ポルトガルの高等教育機関を事例として、研究結果を文脈づけて解釈している。

実験結果

リサーチクエスチョン

• RQ1 ポルトガルの高等教育機関における遠隔評価において、教員が学業の誠実性を維持するために直面する主な課題は何か？
• RQ2 学生は、オンライン試験におけるウェブカメラや画面監視などの監視技術の使用をどのように捉えているか？
• RQ3 遠隔教育の文脈において、形成的評価が学生の学習を支援する役割を果たしているとどのように認識されているか？
• RQ4 対面授業から遠隔授業への移行が、summative 評価と formative 評価モデルのバランスにどのように影響しているか？
• RQ5 学生が遠隔評価に参加するにあたり直面する主な技術的障壁とプライバシーの懸念は何か？

主な発見

• 教員は、学業不正の懸念が深刻であり、ウェブカメラ監視などの監視ツールへの依存が高まっていると述べた。
• 学生は、信頼性の高いデバイスや安定したインターネット接続にアクセスできないことが課題となっており、遠隔評価への参加に影響を受けていた。
• 学生の間では、試験中にカメラ、マイク、デスクトップへのアクセスが義務付けられることが、特にプライバシー懸念を引き起こしていた。
• 本研究では、遠隔学習モデルにおいて、高利害な summative 評価に比べ、formative 評価の実践が著しく不足していることが判明した。
• 教育者は、現在の遠隔評価モデルが、学生の成功に不可欠な継続的モニタリングとフィードバックにあまり重きを置いていないと認めている。
• 研究は、現在の遠隔教育における評価モデルが、特に公平性と学生の幸福度という観点から、遠隔学習のニーズと適切に一致していないと結論づけた。