[论文解读] In Pursuit of Spreadsheet Excellence

Grenville J. Croll|arXiv (Cornell University)|Jun 22, 2008

Spreadsheets and End-User Computing参考文献 10被引用 6

一句话总结

本文提出了洁净表测试（Clean Sheet Test），一种定量方法，可客观评估组织流程中电子表格的质量。基于对五家组织的研究，其中一家组织在五个关键电子表格中几乎零错误率的表现尤为突出，由此衍生出一种简单、可重复的测试方法，通过无错误验证识别电子表格卓越性，使组织能够基准化并提升财务报告的完整性。

ABSTRACT

The first fully-documented study into the quantitative impact of errors in operational spreadsheets identified an interesting anomaly. One of the five participating organisations involved in the study contributed a set of five spreadsheets of such quality that they set the organisation apart in a statistical sense. This virtuoso performance gave rise to a simple sampling test - The Clean Sheet Test - which can be used to objectively evaluate if an organisation is in control of the spreadsheets it is using in important processes such as financial reporting.

研究动机与目标

• 识别并量化电子表格错误在实际运营环境中的影响。
• 发现组织间电子表格卓越性的可衡量基准。
• 开发一种简单、客观的测试方法，以判断组织是否在关键流程中有效控制电子表格使用。
• 为组织提供实用工具，以评估并提升财务报告中电子表格的可靠性。
• 基于实际运营环境中的真实数据，建立电子表格质量的统计标准。

提出的方法

• 本研究分析了一家组织的五个实际运营电子表格，其几乎零错误率的表现使其在统计上显著区别于其他四家组织。
• 洁净表测试由此异常现象中推导而出，采用抽样方法验证电子表格的正确性。
• 该测试通过检查关键业务流程中逻辑一致性、公式准确性和数据完整性来评估电子表格。
• 其依赖预定义的测试用例和预期结果，以客观验证电子表格行为。
• 该方法设计为可重复且可扩展，适用于财务报告及其他高风险应用场景。
• 该方法基于真实世界电子表格使用的实证数据，确立了质量的黄金标准。

实验结果

研究问题

• RQ1 在实际运营使用中，高质量电子表格与有缺陷电子表格有何区别？
• RQ2 能否开发一种简单、客观的测试方法，以在不同组织中识别电子表格卓越性？
• RQ3 在关键业务流程中，定义电子表格为“无错误”的可衡量标准是什么？
• RQ4 组织如何客观评估其在财务报告中电子表格的质量？
• RQ5 是否存在可普遍应用的、具有统计显著性的电子表格质量基准？

主要发现

• 一家组织的五个电子表格质量极高，其表现与研究中其他四家组织在统计上显著不同。
• 洁净表测试成功由此异常现象中推导而出，提供了一种可重复的方法来评估电子表格质量。
• 该测试基于关键验证案例中检测到的零错误，将一组电子表格识别为‘卓越’。
• 研究证实，电子表格质量在不同组织间存在显著差异，错误率可被量化。
• 洁净表测试为财务和运营场景中的电子表格可靠性评估提供了实用、客观且可扩展的方法。
• 结果表明，通过系统性验证，电子表格卓越性是可实现且可衡量的。