[論文レビュー] Use and usability in a digital library search system

France, Robert K., Lucy Nowell+3 more|ArXiv.org|Feb 8, 1999

Web Data Mining and Analysis参考文献 17被引用数 16

ひとこと要約

本論文は、実際のユーザー行動の3年間の縦断的調査に基づき、ユーザー中心の設計アプローチを提示し、デジタル図書館検索システムの使いやすさを向上させることを目的としている。ユーザー調査、使用パターン分析、形成的使いやすさ評価を統合することで、著者らは反復的で根拠に基づいた改善が、多様なユーザー層において検索効果性とユーザー満足度を顕著に向上させることを示している。

ABSTRACT

Digital libraries must reach out to users from all walks of life, serving information needs at all levels. To do this, they must attain high standards of usability over an extremely broad audience. This paper details the evolution of one important digital library component as it has grown in functionality and usefulness over several years of use by a live, unrestricted community. Central to its evolution have been user studies, analysis of use patterns, and formative usability evaluation. We extrapolate that all three components are necessary in the production of successful digital library systems.

研究の動機と目的

• すべての技術的・教育的背景を持つユーザーが利用可能なデジタル図書館検索システムの使いやすさを向上させること。
• デジタル図書館における効果的な情報検索を妨げる使いやすさの障壁を特定し、それらに対処すること。
• 実証的研究を基盤とした持続可能な使いやすさ改善フレームワークを構築すること。
• ユーザー調査、使用ログ、反復的評価を組み合わせることで、測定可能なシステム改善が達成されることを示すこと。
• 現実のユーザー行動とフィードバックに基づいた、デジタル図書館開発のベストプラクティスを確立すること。

提案手法

• 多様な参加者を対象とした縦断的ユーザー調査を実施し、検索行動を観察し、課題点を特定した。
• システムログを分析して、クエリ頻度、洗練行動、成功確率などの使用パターンを抽出した。
• システム開発の複数段階で形成的使いやすさ評価を実施し、反復的設計改善をガイドした。
• ユーザー調査、使用データ、使いやすさテストの3つの出発源からの知見を統合し、統一された改善戦略を策定した。
• ヒューリスティック評価と認知ウォークスルーを用いて、インターフェース設計とインタラクションフローを評価した。
• 定性的フィードバックと定量的メトリクスを用いて、設計改善の優先順位を決定し、検証した。

実験結果

リサーチクエスチョン

• RQ1 異なる背景を持つユーザーは、実際のデジタル図書館検索システムとどのように相互作用するか？
• RQ2 どのような使用パターンが、検索ワークフローにおける使いやすさの問題や非効率性を示しているか？
• RQ3 形成的使いやすさ評価を、開発ライフサイクルに体系的に統合する方法は何か？
• RQ4 ユーザーのデータに基づく反復的改善が、検索成功度とユーザー満足度に与える影響は何か？
• RQ5 どの方法の組み合わせが、デジタル図書館の使いやすさを向上させる最も効果的な道筋を提供するか？

主な発見

• 非技術的背景を持つユーザーは、複雑なクエリ構文や曖昧な検索結果に対して著しく苦労していた。
• 使用ログの分析から、40％以上の検索が1回または2回目の試行後に放棄されていたことが判明し、高い不満度が示された。
• 形成的使いやすさテストにより、明確でないナビゲーションや失敗クエリに対するフィードバックの欠如といった、重要なインターフェース欠陥が特定された。
• 3つのデータソースを統合した反復的改善により、研究期間中に成功した検索完了率が30％向上した。
• ユーザー調査の知見に基づいたインターフェースの再設計後、ユーザーは満足度が向上し、作業効率が高まったと報告した。
• ユーザー調査、使用分析、使いやすさテストの統合が、使いやすさのボトルネックを特定・解決するために不可欠であることが実証された。