[论文解读] Weakest Precondition Reasoning for Expected Run-Times of Probabilistic Programs

Benjamin Lucien Kaminski, Joost-Pieter Katoen+2 more|arXiv (Cornell University)|Jan 5, 2016

Formal Methods in Verification参考文献 2被引用 16

一句话总结

本文提出了一种基于最弱先验条件（wp）风格的演算，用于通过一种新颖的变换器 ert 对概率程序的期望运行时间进行推理，该变换器通过归纳分析程序结构来计算期望运行时间。该方法提供了用于限制循环运行时间的证明规则，并在马尔可夫决策过程（MDP）模型下证明了其正确性，从而实现了对有限期望终止的验证，并对经典的优惠券收集者问题和随机游走问题进行了分析。

ABSTRACT

This paper presents a wp-style calculus for obtaining bounds on the expected run-time of probabilistic programs. Its application includes determining the (possibly infinite) expected termination time of a probabilistic program and proving positive almost-sure termination - does a program terminate with probability one in finite expected time? We provide several proof rules for bounding the run-time of loops, and prove the soundness of the approach with respect to a simple operational model. We show that our approach is a conservative extension of Nielson's approach for reasoning about the run-time of deterministic programs. We analyze the expected run-time of some example programs including a one-dimensional random walk and the coupon collector problem.

研究动机与目标

• 开发一个用于推理概率程序期望运行时间的正式验证框架。
• 解决概率程序可能具有无限单次运行时间但期望运行时间有限这一微妙问题。
• 为概率程序中循环的期望运行时间提供边界证明规则。
• 保守地将尼尔森（Nielson）的确定性运行时间推理方法扩展到概率设置。
• 支持对正几乎必然终止的验证——即在有限期望时间内以概率一终止。

提出的方法

• 引入 ert 变换器作为戴克斯特拉（Dijkstra）wp 的定量变体，基于后置条件函数 f 计算期望运行时间。
• 基于程序语法对 ert 进行归纳定义，包含赋值、顺序组合、条件语句和循环的特定规则。
• 使用马尔可夫决策过程（MDP）模型来正式确立概率程序的操作语义。
• 通过递归分析循环体和概率选择，将 ert 变换器应用于推导期望运行时间的边界。
• 证明了 ert 演算相对于 MDP 模型的正确性，确保所推导边界的理论正确性。
• 通过保守地整合概率分支和基于期望的推理，将尼尔森的确定性运行时间演算扩展到概率设置。

实验结果

研究问题

• RQ1 能否将 wp 风格的演算适配于推理概率程序中的期望运行时间？
• RQ2 如何分析概率程序中的循环结构以限制其期望运行时间？
• RQ3 哪些条件可确保正几乎必然终止且具有有限期望运行时间？
• RQ4 所提出的 ert 演算与尼尔森的确定性运行时间推理框架有何关系？又如何对其进行扩展？
• RQ5 该演算能否应用于分析经典的概率问题，如优惠券收集者问题和随机游走问题？

主要发现

• ert 变换器能从初始状态正确计算概率程序的期望运行时间，其中 ert[C](0)(σ) 给出从状态 σ 开始的期望运行时间。
• 该演算相对于操作性 MDP 模型是正确的，确保了所推导边界的理论正确性。
• 该方法保守地扩展了尼尔森的确定性运行时间推理，使其在概率设置下仍保持原有保证。
• 几何分布程序 C_geo 的期望运行时间是有限的（具体为 2），尽管其可能产生任意长的运行时间。
• 对于包含 N 个优惠券的优惠券收集者问题，期望运行时间被限制在 O(N log N) 范围内，且该演算成功推导出此边界。
• 该演算识别出：即使两个程序的期望运行时间均为有限值，其顺序组合仍可能导致无限期望运行时间，突显了非组合性行为。