[論文レビュー] Bounded Satisfiability for PCTL

Nathalie Bertrand, John Fearnley+1 more|arXiv (Cornell University)|Mar 30, 2012

Formal Methods in Verification参考文献 11被引用数 5

ひとこと要約

この論文は、有理数の遷移確率をもつ小さな実装可能なモデルを探索するために、PCTLにおける有界充足可能性を導入する。問題をSMTソルブに還元することで、NP完全性を示し、複雑な仕様の整合性チェックとして実用的であることを示す。具体的には、設計意図に反する不測の小さなモデルを検出することで、仕様のバグを明らかにする。

ABSTRACT

While model checking PCTL for Markov chains is decidable in polynomial-time, the decidability of PCTL satisfiability, as well as its finite model property, are long standing open problems. While general satisfiability is an intriguing challenge from a purely theoretical point of view, we argue that general solutions would not be of interest to practitioners: such solutions could be too big to be implementable or even infinite. Inspired by bounded synthesis techniques, we turn to the more applied problem of seeking models of a bounded size: we restrict our search to implementable -- and therefore reasonably simple -- models. We propose a procedure to decide whether or not a given PCTL formula has an implementable model by reducing it to an SMT problem. We have implemented our techniques and found that they can be applied to the practical problem of sanity checking -- a procedure that allows a system designer to check whether their formula has an unexpectedly small model.

研究の動機と目的

• 一般のPCTL充足可能性の非現実的さに対処するため、サイズが限定され、有理数の確率をもつ実装可能なモデルに焦点を当てる。
• 仕様のデバッグという実用的問題を解決するため、設計意図に反する不測の小さなモデルを検出する。
• 実際の応用で実装可能な単純な有限状態モデルがPCTL論理式に充足可能かどうかをスケーラブルに検証する手法を提供する。
• システム設計者が、予期しないほど単純な充足モデルの存在をチェックすることで、複雑なPCTL仕様の整合性を検証できるようにする。

提案手法

• 最大b個の状態と有理数の遷移確率をもつPCTLモデルを求める有界充足可能性問題を定義する。
• 有限構造上の状態遷移、確率、PCTL論理式の充足性を符号化することで、有界充足可能性問題をSMT制約系に還元する。
• YicesなどのSMTソルバを用いて、得られた制約系を解き、有効なモデルの存在を確認する。
• 状態と遷移確率に関する論理的制約を用いてPCTL論理式の充足性を符号化し、確率的演算子が正しくモデル化されることを保証する。
• 実装可能性の前提として「単純なモデル」の形式的定義を導入し、有限状態数と有理数の確率に焦点を当てる。
• ネットワークプロトコルの実際の事例を用いて、仕様の欠陥を検出する有効性を検証する。

実験結果

リサーチクエスチョン

• RQ1 PCTLにおける有界充足可能性問題は、効率的に決定可能であり、その計算複雑度はいかほどか？
• RQ2 有界充足可能性アプローチは、複雑なPCTL仕様において、設計意図に反する不測の小さなモデルを検出できるか？
• RQ3 最小モデルのサイズとPCTL論理式のサイズの両方が増加する場合、SMTベースのソルバの性能はどの程度スケーリングするか？
• RQ4 有界充足可能性は、システム設計者が自身の仕様が過度に単純で誤ったモデルを許容しないかを検証する実用的かつ有効な整合性チェックとして機能するか？
• RQ5 数百の時系列演算子を含む大規模・複雑なPCTL論理式に対しても、SMTへの還元は効果的か？

主な発見

• PCTLにおける有界充足可能性問題は、最小モデルのサイズに関してNP完全であることが示され、理論的複雑度が明確になった。
• SMTベースの還元は、300個を超える時系列演算子を含むPCTL論理式に対しても効果的に処理でき、論理式の複雑さに応じたスケーラビリティを示した。
• 最小モデルがたった4状態で成立するという深刻な設計欠陥を含む、誤ったネットワークプロトコル仕様（brokenu,r）を検出できた。
• 最小モデルのサイズが増加するにつれて性能が著しく低下し、大規模なモデル構築は非現実的になるが、小さなモデルは効率的に発見できる。
• ネットワークモデルにおけるユーザー数uの増加に対してもスケーリングが良好であり、論理式サイズへの依存が低いため、整合性チェック用途に適していることが示された。
• 本手法により、予想に反する単純なモデルの存在が明らかになり、設計意図に反する振る舞いを示すバグを効果的に暴露できる。