[論文レビュー] An approach for the automated risk assessment of structural differences between spreadsheets (DiffXL)

John W. Hunt|ArXiv.org|Aug 20, 2009

Spreadsheets and End-User Computing参考文献 5被引用数 3

ひとこと要約

本稿では、データ範囲、数式、メタデータを一般化されたリストにマッピングすることで、スプレッドシート間の構造的変更のリスクを自動的に評価する手法DiffXLを紹介する。構造的差異を定量化することにより、特に正確性と監査可能性が重要な商業的環境において、スプレッドシートの進化における体系的なリスク評価が可能になる。

ABSTRACT

This paper outlines an approach to manage and quantify the risks associated with changes made to spreadsheets. The methodology focuses on structural differences between spreadsheets and suggests a technique by which a risk analysis can be achieved in an automated environment. The paper offers an example that demonstrates how contiguous ranges of data can be mapped into a generic list of formulae, data and metadata. The example then shows that comparison of these generic lists can establish the structural differences between spreadsheets and quantify the level of risk that each change has introduced. Lastly the benefits, drawbacks and limitations of the technique are discussed in a commercial context.

研究の動機と目的

• スプレッドシート開発および保守におけるエラーリスクの増大に応えるため、とくにスプレッドシートが広く使われるビジネス環境において。
• 機能的または論理的なエラーを引き起こす可能性のある、スプレッドシートバージョン間の構造的差異を特定および定量化すること。
• 手作業による点検を削減し、変更の評価における一貫性を向上させるために、リスク評価プロセスを自動化すること。
• 体系的かつ繰り返し可能な方法で変更を追跡・評価できるようにすることで、監査可能性とコンプライアンスを支援すること。
• 実世界の商業的スプレッドシートワークフローにおける自動リスク評価の実用的妥当性と限界を評価すること。

提案手法

• スプレッドシートの連続するデータ範囲、数式、メタデータを、比較用の一般化された標準化されたリストにマッピングすること。
• スプレッドシートの内容を、意味的コンテンツから構造的要素を分離した構造化表現に変換すること。
• 2つのスプレッドシートバージョンの一般化リストを比較し、構造的差異を特定および分類すること。
• 機能への影響やデータ整合性への影響の可能性に基づいて、特定された差異にリスクスコアを割り当てること。
• 色分けされた図やスクリーンショットを用いて、構造的変更の内容とリスクレベルを視覚的に表現すること。
• 制御された例題にこの手法を適用し、高リスクの変更を特定する際の適用および有効性を示すこと。

実験結果

リサーチクエスチョン

• RQ1 スプレッドシートバージョン間の構造的差異をどのように体系的に特定および定量化できるか？
• RQ2 スプレッドシートにおける構造的変更のリスクレベルを評価するための基準は何か？
• RQ3 一般化されたスプレッドシートコンポonentsの自動比較が、エラー検出および監査可能性をどの程度向上できるか？
• RQ4 実世界のスプレッドシート環境への自動リスク評価の適用における実用的限界は何か？
• RQ5 この手法は、商業的スプレッドシート利用におけるトレーサビリティとコンプライアンスをどのように支援するか？

主な発見

• DiffXLアプローチは、スプレッドシートのコンテンツを一般化されたリストにマッピングし、構造的要素の自動比較を可能にした。
• 数式の変更、データ範囲の変更、メタデータのシフトといった構造的差異は、リスク順に体系的に検出およびランク付け可能である。
• この手法は、自動リスク評価が実現可能であり、手作業による点検時間の顕著な短縮が可能であることを示している。
• 色分けされた可視化は、変更の性質とリスクレベルを効果的に伝えることができ、非技術的ステークホルダーの使いやすさを向上させた。
• 特に数式の再作成やデータ構造の変更といった高リスクの変更を特定するのに、この手法は顕著に有効である。
• 限界として、複雑なシート間依存関係の処理の難しさや、実稼働環境における分野特有のリスクスコアリングルールの必要性が挙げられる。