[論文レビュー] The Wall and The Ball: A Study of Domain Referent Spreadsheet Errors

Richard Irons|ArXiv.org|Apr 7, 2008

Spreadsheets and End-User Computing参考文献 7被引用数 3

ひとこと要約

本研究は、ドメイン固有の知識がスプレッドシートの誤り率にどのように影響するかを、ドメインフリーの抽象的タスクとコストモデリングを含む応用的線形代数タスクを比較することで調査している。ドメイン関連の知識が誤りの発生行動に顕著に影響することを明らかにした。認知バイアスや誤解が原因で、応用的文脈では誤り率が上昇する。これは、スプレッドシートの誤りが技術的欠陥よりも人間の認知とドメイン認識に深く関連していることを示している。

ABSTRACT

The Cell Error Rate in simple spreadsheets averages about 2% to 5%. This CER has been measured in domain free environments. This paper compares the CERs occurring in domain free and applied domain tasks. The applied domain task requires the application of simple linear algebra to a costing problem. The results show that domain referent knowledge influences participants' approaches to spreadsheet creation and spreadsheet usage. The conclusion is that spreadsheet error making is influenced by domain knowledge and domain perception. Qualitative findings also suggest that spreadsheet error making is a part of overall human behaviour, and ought to be analyzed against this wider canvas.

研究の動機と目的

• ドメインフリーのタスクと比較して、応用的タスクにおけるドメイン関連知識がスプレッドシート誤り率にどのように影響するかを調査すること。
• 人間の認知と認識がスプレッドシート誤り生成に果たす役割を理解すること。
• ドメイン固有の文脈が、ユーザーのスプレッドシート作成および使用のアプローチにどのように影響するかを分析すること。
• スプレッドシート誤りが単なる技術的ミスとしてではなく、広範な人間行動の一部としてよりよく理解できるかどうかを検討すること。

提案手法

• ドメインフリーのタスクと線形代数を用いたコストモデリングを含む応用的タスクの両方において、スプレッドシート作成を比較する制御された実験を実施した。
• 誤り頻度を測定するために、両条件におけるセル誤り率（CER）を測定した。
• スプレッドシート開発中の参加者の推論、意思決定、問題解決戦略を検討するために、定性的分析を用いた。
• 参加者のスプレッドシート出力と思考プロセスを収集・分析し、誤りの種類と原因のパターンを特定した。
• 抽象的文脈と応用的文脈の間で誤りパターンを対比するための比較フレームワークを適用した。
• 技術的バグやインターフェースの欠陥ではなく、認知的および知覚的要因が誤り形成に与える影響に焦点を当てた。

実験結果

リサーチクエスチョン

• RQ1 ドメイン関連の知識の有無が、スプレッドシートタスクにおける誤りの発生頻度と種類にどのように影響するか？
• RQ2 参加者のドメインフリーのタスクと応用的ドメインタスクにおけるスプレッドシート作成アプローチにどのような違いが見られるか？
• RQ3 認知バイアスとドメイン認識が、スプレッドシート誤り形成にどの程度寄与しているか？
• RQ4 ユーザーが問題ドメインに対して持つメンタルモデルが、スプレッドシート設計およびデータ入力意思決定にどのように影響するか？
• RQ5 スプレッドシート誤りが単なるソフトウェアの欠陥としてではなく、一般的な人間行動の一部としてよりよく理解できるか？

主な発見

• ドメインフリーのタスクにおけるセル誤り率（CER）は平均2%～5%であり、先行研究と整合的であった。
• 線形代数とコストモデリングを含む応用的ドメインタスクでは、CERが顕著に上昇しており、ドメイン文脈が誤りの発生確率を高めることを示している。
• ドメイン知識を持つ参加者は、技術的スキルの不足ではなく、問題構造の誤解により誤った数式を適用する傾向にあった。
• 定性的分析から、ユーザーは基礎的な数学を理解していても、誤ったスプレッドシート論理に至るメンタルモデルに依存することが頻繁に見られた。
• 誤りのパターンは、ユーザーがドメイン文脈をどのように認識しているかに強く影響を受けており、知覚が誤り生成を形づくることが示唆された。
• 本研究は、スプレッドシート誤りが単なる技術的ミスではなく、人間の認知とドメイン認識に深く根ざしていると結論づけた。