[論文レビュー] Spreadsheet Errors: What We Know. What We Think We Can Do

Raymond R. Panko|ArXiv.org|Feb 23, 2008

Spreadsheets and End-User Computing参考文献 30被引用数 109

ひとこと要約

この論文は、スプレッドシートの誤りに関する15年間の研究を統合し、誤りが広範かつ深刻であることを確認している。セル単位のコード点検が、唯一の実証的に効果的な誤り低減手法であると特定している一方で、多くの一般的に提案されている手法—たとえ実装が簡単でも—効果が低い可能性が高く、代替手法に関するさらなる研究が求められている。

ABSTRACT

Fifteen years of research studies have concluded unanimously that spreadsheet errors are both common and non-trivial. Now we must seek ways to reduce spreadsheet errors. Several approaches have been suggested, some of which are promising and others, while appealing because they are easy to do, are not likely to be effective. To date, only one technique, cell-by-cell code inspection, has been demonstrated to be effective. We need to conduct further research to determine the degree to which other techniques can reduce spreadsheet errors.

研究の動機と目的

• スプレッドシートの誤りに関する15年間の研究の知見を統合し、意思決定に与える影響を明らかにすること。
• さまざまな誤り低減手法の有効性を評価すること。
• 実証的に裏付けられた誤り検出戦略と、魅力的ではあるが実効性のない戦略を特定すること。
• 検証されていない誤り低減手法の有効性に関するさらなる研究を提唱すること。
• スプレッドシートの信頼性を向上させるにあたり、証拠に基づいたアプローチの重要性を強調すること。

提案手法

• スプレッドシートの誤りに関する15年間の実証的研究の体系的レビュー。
• 有効性が実証された手法とそうでない手法に、提案された誤り低減手法を分類すること。
• 実装の容易さ、実現可能性、実証的裏付けに基づいて手法を評価すること。
• セル単位のコード点検が、研究によって有効であると示された唯一の手法であることに焦点を当てる。
• 有効性が未検証のまま有望とされる手法を、実証的に有効な基準と比較すること。
• 今後の研究として、制御された研究を用いて代替手法の有効性を検証することを呼びかける。

実験結果

リサーチクエスチョン

• RQ1 実世界の応用において、スプレッドシートの誤りの発生頻度と深刻さはどの程度か？
• RQ2 どの誤り検出手法が実証的に有効であると示されているか？
• RQ3 なぜ多くの一般的に提案されている手法は、実装が簡単であるにもかかわらず、誤りを低減しないのか？
• RQ4 現在の誤りの特定および防止のアプローチにどのような限界があるのか？
• RQ5 検証されていない誤り低減戦略の有効性を特定するにあたり、今後どのような研究が必要か？

主な発見

• スプレッドシートの誤りは一般的に発生しており、重大な実世界の影響を及ぼす。
• セル単位のコード点検が、誤り低減において実証的に有効であると示された唯一の手法である。
• 多くの広く提案されている手法—たとえ実装が簡単でも—実証的根拠が不足しているため、効果が低い可能性が高い。
• 提案された誤り低減戦略の実際の有効性に関する研究のギャップが深刻に存在する。
• 現在の知識状況は、代替手法の有効性を評価するにあたり、より厳密で制御された研究が求められていることを強調している。
• 問題の認識は広く行われているが、解決策の検証に向けた体系的な取り組みはほとんどない。