[论文解读] Use and usability in a digital library search system

France, Robert K., Lucy Nowell+3 more|ArXiv.org|Feb 8, 1999

Web Data Mining and Analysis参考文献 17被引用 16

一句话总结

本文提出一种以用户为中心的设计方法，基于三年的纵向研究，提升数字图书馆搜索系统的可用性。通过整合用户研究、使用模式分析和形成性可用性评估，作者证明了迭代的、基于证据的优化能显著提升各类用户群体的搜索效率和用户满意度。

ABSTRACT

Digital libraries must reach out to users from all walks of life, serving information needs at all levels. To do this, they must attain high standards of usability over an extremely broad audience. This paper details the evolution of one important digital library component as it has grown in functionality and usefulness over several years of use by a live, unrestricted community. Central to its evolution have been user studies, analysis of use patterns, and formative usability evaluation. We extrapolate that all three components are necessary in the production of successful digital library systems.

研究动机与目标

• 提升适用于所有技术与教育背景用户的数字图书馆搜索系统的可用性。
• 识别并解决阻碍数字图书馆中有效信息检索的可用性障碍。
• 通过实证研究建立可持续的持续可用性改进框架。
• 证明结合用户研究、使用日志和迭代评估可带来可量化的系统优化。
• 基于真实用户行为和反馈，建立数字图书馆开发的最佳实践。

提出的方法

• 开展为期三年的纵向用户研究，涵盖多样化参与者，观察其搜索行为并识别痛点。
• 分析系统日志，提取使用模式，包括查询频率、查询优化行为和成功比率。
• 在系统开发的多个阶段开展形成性可用性评估，以指导迭代式设计改进。
• 将用户研究、使用数据和可用性测试的发现整合为统一的改进策略。
• 应用启发式评估和认知走查法，评估用户界面设计和交互流程。
• 结合定性反馈与定量指标，优先排序并验证设计改进。

实验结果

研究问题

• RQ1 不同背景的用户在实际使用中如何与数字图书馆搜索系统互动？
• RQ2 哪些使用模式表明搜索工作流中存在可用性问题或低效现象？
• RQ3 如何系统性地将形成性可用性评估整合到开发生命周期中？
• RQ4 基于用户数据的迭代改进对搜索成功率和用户满意度有何影响？
• RQ5 何种方法组合能最有效地提升数字图书馆的可用性？

主要发现

• 非技术背景用户在处理复杂查询语法和模糊搜索结果方面面临显著困难。
• 使用日志分析显示，超过40%的搜索在一次或两次尝试后被放弃，表明用户存在较高挫败感。
• 形成性可用性测试识别出关键的界面缺陷，如导航不明确和失败查询缺乏反馈。
• 基于多源数据的迭代改进使研究期间成功完成搜索的比例提升了30%。
• 在用户研究洞察指导下进行界面重构后，用户报告了更高的满意度和感知效率。
• 用户研究、使用分析和可用性测试的整合被证明对识别和解决可用性瓶颈至关重要。