[论文解读] The Wall and The Ball: A Study of Domain Referent Spreadsheet Errors

Richard Irons|ArXiv.org|Apr 7, 2008

Spreadsheets and End-User Computing参考文献 7被引用 3

一句话总结

本研究通过对比无领域（无领域背景）任务与涉及成本建模的应用线性代数任务，调查了特定领域知识如何影响电子表格错误率。研究发现，领域参照知识显著影响错误行为，应用情境下错误率上升，原因在于认知偏见和误解，表明电子表格错误与人类认知和领域认知密切相关，而不仅仅是技术缺陷。

ABSTRACT

The Cell Error Rate in simple spreadsheets averages about 2% to 5%. This CER has been measured in domain free environments. This paper compares the CERs occurring in domain free and applied domain tasks. The applied domain task requires the application of simple linear algebra to a costing problem. The results show that domain referent knowledge influences participants' approaches to spreadsheet creation and spreadsheet usage. The conclusion is that spreadsheet error making is influenced by domain knowledge and domain perception. Qualitative findings also suggest that spreadsheet error making is a part of overall human behaviour, and ought to be analyzed against this wider canvas.

研究动机与目标

• 调查在应用任务中与无领域任务相比，领域参照知识如何影响电子表格错误率。
• 理解人类认知与感知在电子表格错误生成中的作用。
• 分析特定领域背景如何改变用户创建和使用电子表格的方式。
• 探讨电子表格错误是否可更好地理解为人类行为整体的一部分，而非孤立的技术错误。

提出的方法

• 通过控制实验，比较在无领域任务与涉及成本建模的应用线性代数任务中创建电子表格的表现。
• 在两种条件下测量单元格错误率（CER），以量化错误频率。
• 使用定性分析方法，考察参与者在电子表格开发过程中的推理、决策与问题解决策略。
• 收集并分析参与者的电子表格输出及思维过程，识别错误类型与来源的模式。
• 应用比较框架，对比抽象情境与应用情境下的错误模式。
• 聚焦于影响错误形成的认知与感知因素，而非技术性错误或界面缺陷。

实验结果

研究问题

• RQ1 领域参照知识的存在如何影响电子表格任务中的错误率与错误类型？
• RQ2 参与者在无领域任务与应用领域任务中创建电子表格的方法有何不同？
• RQ3 认知偏见与领域感知在多大程度上导致电子表格错误的产生？
• RQ4 用户对问题领域的心理模型在多大程度上影响其电子表格设计与数据输入决策？
• RQ5 电子表格错误是否可更好地理解为一般人类行为的一部分，而非孤立的软件缺陷？

主要发现

• 无领域任务中的单元格错误率（CER）平均为2%至5%，与先前研究结果一致。
• 在涉及线性代数与成本建模的应用领域任务中，CER显著上升，表明领域背景增加了错误发生的可能性。
• 具备领域知识的参与者常因对问题结构的误解而错误应用公式，而非技术能力不足。
• 定性分析显示，用户经常依赖导致逻辑错误的心理模型，即使他们理解底层数学原理。
• 错误模式强烈受用户对领域背景的感知影响，表明感知塑造了错误的生成。
• 本研究结论认为，电子表格错误并非仅仅是技术性错误，而是深深植根于人类认知与领域感知之中。