[論文レビュー] Usability Evaluation of Learning Management Systems in Sri Lankan Universities

Selvarajah Thuseethan, Sivapalan Achchuthan+1 more|arXiv (Cornell University)|Nov 30, 2014

E-Learning and Knowledge Management参考文献 16被引用数 33

ひとこと要約

本研究は、スリランカの大学における学習管理システム（LMS）の使いやすさを評価し、主にMoodleベースのプラットフォームに焦点を当て、標準化された使いやすさ基準と実地テストを用いて分析している。結果から、ナビゲーション、タスク完了、システム応答性の面で著しい使いやすさの問題が明らかとなり、ユーザー満足度と効率性に悪影響を及ぼしている。これは、eラーニングの効果を高めるためにインターフェース改善の必要性を示している。

ABSTRACT

As far as Learning Management System is concerned, it offers an integrated platform for educational materials, distribution and management of learning as well as accessibility by a range of users including teachers, learners and content makers especially for distance learning. Usability evaluation is considered as one approach to assess the efficiency of e-Learning systems. It is used to evaluate how well technology and tools are working for users. There are some factors contributing as major reason why LMS is not used effectively and regularly. Learning Management Systems, as major part of e-Learning systems, can benefit from usability research to evaluate the LMS ease of use and satisfaction among its handlers. Many academic institutions worldwide prefer using their own customized Learning Management Systems; this is the case with Moodle, an open source Learning Management Systems platform designed and operated by most of the universities in Sri Lanka. This paper gives an overview of Learning Management Systems used in Sri Lankan universities, and evaluates its usability using some pre-defined usability standards. In addition it measures the effectiveness of Learning Management System by testing the Learning Management Systems. The findings and result of this study as well as the testing are discussed and presented.

研究の動機と目的

• スリランカの大学における学習管理システム（LMS）の使いやすさを評価すること。特にMoodleベースのプラットフォームに焦点を当てる。
• eラーニング環境において教員、学生、コンテンツ作成者に影響を与える使いやすさの障壁を特定すること。
• 標準化された使いやすさテストとユーザー行動分析を通じて、LMSの効果性を評価すること。
• 実証的調査結果に基づいた、LMS設計の改善に向けた実行可能な提言を提供すること。

提案手法

• 確立された使いやすさ基準と指標を用いて、使いやすさ評価を実施した。
• スリランカの大学の実際のユーザーを対象に、LMSの一般的なタスクを想定した使いやすさテストを実施した。
• タスク完了率、所要時間、エラー頻度、ユーザー満足度のデータを収集した。
• 定性的フィードバックと定量的パフォーマンス指標を統合して、システムの効率性とユーザー体験を評価した。
• 結果を発表するための発表場所として、Global Journal of Computer Science and Technologyを指定した。
• オープンソースの性質と広範な採用状況から、スリランカの大学においてMoodleを主要なLMSプラットフォームとして評価した。

実験結果

リサーチクエスチョン

• RQ1 エンドユーザーの視点から、スリランカの大学における現在のLMSプラットフォームはどの程度使いやすいのか？
• RQ2 学生、教員、コンテンツ開発者がLMSを効果的かつ効率的に使用するのを妨げる具体的な使いやすさ要因は何か？
• RQ3 既存のLMSプラットフォームは、どの程度効率的なタスク完了とユーザー満足度を支援しているのか？
• RQ4 システム設計上の欠陥は、高等教育分野におけるeラーニングツールの導入と定期的利用にどのように影響を与えているのか？

主な発見

• 複数のLMSプラットフォームにおいて、ナビゲーション、インターフェースレイアウト、タスク完了効率の面で顕著な使いやすさの問題が判明した。
• 特に授業資料の閲覧や課題の提出の際、高いエラー率と長時間のタスク所要時間が報告された。
• ユーザー満足度スコアは、システム応答性と明確性に不満を抱える基準未満であった。
• 本研究では、一貫性のないインターフェース設計とユーザー誘導の欠如が、初心者および経験豊富な両者に悪影響を与えていることが明らかになった。
• オープンソースの柔軟性とカスタマイズ可能性を有するものの、Moodleでさえも深刻な使いやすさの欠陥を示した。
• 結果として、スリランカの大学における現在のLMS設定は、基本的な使いやすさの基準を満たしておらず、教育的効果を制限していることが示唆された。