[论文解读] Bounded Satisfiability for PCTL

Nathalie Bertrand, John Fearnley+1 more|arXiv (Cornell University)|Mar 30, 2012

Formal Methods in Verification参考文献 11被引用 5

一句话总结

本文提出了PCTL的有界可满足性，将问题转化为SMT求解，以寻找具有有理转移概率的小型可实现模型。证明了有界可满足性问题是NP完全的，并通过检测揭示规范错误的非预期小型模型，展示了其在复杂规范的合理性检查中的实际效用。

ABSTRACT

While model checking PCTL for Markov chains is decidable in polynomial-time, the decidability of PCTL satisfiability, as well as its finite model property, are long standing open problems. While general satisfiability is an intriguing challenge from a purely theoretical point of view, we argue that general solutions would not be of interest to practitioners: such solutions could be too big to be implementable or even infinite. Inspired by bounded synthesis techniques, we turn to the more applied problem of seeking models of a bounded size: we restrict our search to implementable -- and therefore reasonably simple -- models. We propose a procedure to decide whether or not a given PCTL formula has an implementable model by reducing it to an SMT problem. We have implemented our techniques and found that they can be applied to the practical problem of sanity checking -- a procedure that allows a system designer to check whether their formula has an unexpectedly small model.

研究动机与目标

• 通过聚焦于有界大小和有理概率的可实现模型，解决一般PCTL可满足性的不切实际问题。
• 通过检测违反设计意图的非预期小型模型，解决规范调试的实际问题。
• 提供一种可扩展的方法，用于验证PCTL公式是否允许一种可实际实现的简单、有限状态模型。
• 使系统设计者能够通过检查是否存在意外的小型满足模型，对复杂PCTL规范进行合理性检查。

提出的方法

• 定义一个有界可满足性问题，旨在寻找最多b个状态且具有有理转移概率的PCTL模型。
• 通过编码状态转移、概率以及在有限结构上对PCTL公式的满足性，将有界可满足性问题归约为SMT约束系统。
• 使用SMT求解器（例如Yices）求解生成的约束系统，并检查是否存在有效模型。
• 通过状态和转移概率上的逻辑约束来编码PCTL公式的满足性，确保概率算子被正确建模。
• 引入“简单模型”的形式化概念作为可实现性的前提，重点关注有限状态数和有理概率。
• 将该方法应用于实际案例研究，包括一个网络协议规范，以验证其在检测规范缺陷方面的有效性。

实验结果

研究问题

• RQ1 PCTL的有界可满足性问题能否被高效判定，其计算复杂度如何？
• RQ2 有界可满足性方法是否能检测出复杂PCTL规范中非预期的小型模型，从而揭示规范错误？
• RQ3 基于SMT的求解器性能在最小模型大小与PCTL公式大小之间的关系如何？
• RQ4 有界可满足性能否作为系统设计者的实用合理性检查手段，以验证其规范是否不允许可过度简化、错误的模型？
• RQ5 将问题归约为SMT是否对处理包含数百个时序算子的大型、复杂PCTL公式有效？

主要发现

• PCTL的有界可满足性问题在最小模型大小上是NP完全的，确立了其理论复杂度。
• 基于SMT的归约成功处理了包含300多个时序算子的PCTL公式，展示了其在公式复杂度上的可扩展性。
• 该方法检测到一个存在缺陷的网络协议规范（brokenu,r），其允许仅4个状态的最小模型，揭示了一个关键设计缺陷。
• 随着最小模型大小的增加，性能显著下降，使得大规模模型构建变得不切实际，但小型模型能被高效找到。
• 该技术在网络模型中用户数（u）方面表现出良好的可扩展性，表明其对公式大小的依赖性较低，支持其用于合理性检查。
• 该方法通过暴露存在小型、反直觉的模型（这些模型违反预期行为）来实现有效的合理性检查，从而揭示规范错误。