[論文レビュー] Impact of Errors in Operational Spreadsheets

Stephen G. Powell, Barry Lawson+1 more|arXiv (Cornell University)|Jan 4, 2008

Spreadsheets and End-User Computing被引用数 9

ひとこと要約

本研究は、5つの組織から抽出した25の業務用スプレッドシートにおける誤りの定量的影響を分析したもので、誤りは一般的に見られる（数式セルの0.8–1.8％）、しかし大多数は重要な影響を及ぼさない。重要なスプレッドシート出力に顕著な影響を及ぼすのは少数にとどまり、企業スプレッドシートにおける現実世界の誤り影響について、完全に文書化された初の証拠を提供している。

ABSTRACT

All users of spreadsheets struggle with the problem of errors. Errors are thought to be prevalent in spreadsheets, and in some instances they have cost organizations millions of dollars. In a previous study of 50 operational spreadsheets we found errors in 0.8% to 1.8% of all formula cells, depending on how errors are defined. In the current study we estimate the quantitative impacts of errors in 25 operational spreadsheets from five different organizations. We find that many errors have no quantitative impact on the spreadsheet. Those that have an impact often affect unimportant portions of the spreadsheet. The remaining errors do sometimes have substantial impacts on key aspects of the spreadsheet. This paper provides the first fully-documented evidence on the quantitative impact of errors in operational spreadsheets.

研究の動機と目的

• 業務環境で使用される業務用スプレッドシートにおける誤りの実世界的影響を定量的に測定すること。
• 一般的に報告されるスプレッドシート誤りが、財務的または業務的要因に顕著な影響を及ぼすかどうかを評価すること。
• 重要な出力に影響を与える誤りの割合と、さしずめのない部分に影響を与える誤りの割合を特定すること。
• 異なる組織的文脈における誤り影響の分布に関する実証的証拠を提供すること。
• 文書化された影響データを通じて、スプレッドシートの検証および誤り検出手法の改善を支援すること。

提案手法

• 異なる業界にまたがる5つの多様な組織から選定した25の業務用スプレッドシートの選定。
• 誤り定義（例：論理的誤り、参照エラー）を事前に定義し、それらに基づいて数式誤りを体系的に同定。
• ビジネス論理に基づき、スプレッドシートの出力と期待値または正しく値を比較することで影響評価。
• 影響度レベル別に誤りを分類：影響なし、非重要セルにわずかな影響、重要な出力に顕著な影響。
• 各誤りの影響の重要性を検証するため、専門家によるレビューとビジネス文脈分析の活用。
• スプレッドシートおよび組織間における誤り頻度と影響分布の統計的分析。

実験結果

リサーチクエスチョン

• RQ1 業務用スプレッドシートにおける数式誤りのうち、出力に測定可能な定量的影響を及ぼす割合はどの程度か？
• RQ2 誤りは、重要なビジネス指標に影響を与える頻度が高いか、それとも不要なコンponentsに影響を与える頻度が高いのか？
• RQ3 異なる組織的およびスプレッドシートタイプにおける誤り影響の分布はどのようになっているか？
• RQ4 現実世界の環境において、スプレッドシートの誤りが財務的または業務的要因に顕著な影響を及ぼす程度はどの程度か？
• RQ5 異なる誤り定義が、スプレッドシート誤りの顕在度および影響の認識にどのように影響を与えるか？

主な発見

• 最も厳しい誤り定義のもとで、数式セルの1.8％しか誤りを含まなかったため、誤りの発生頻度は比較的低いことが示された。
• 誤りの顕著な大多数（80％以上）は、スプレッドシートの出力に測定可能な影響を及ぼさなかった。
• 影響を及ぼした誤りの多くは、スプレッドシートの非重要または軽微な部分に影響を与えていた。
• 顕著な影響を重要な財務的または業務的指標に及ぼす誤りの少数だが、顕著な部分が存在した。
• 本研究は、現実の業務用スプレッドシートにおける誤り影響について、完全に文書化された初の実証的証拠を提供した。
• 結果から、誤りは一般的ではあるが、そのビジネス的影響はしばしば限定的であることが示唆されたが、顕著な影響を持つ誤りは依然として発生しうる。