[论文解读] A New Proof Rule for Almost-Sure Termination

Annabelle McIver, Carroll Morgan+2 more|arXiv (Cornell University)|Nov 9, 2017

Formal Methods in Verification被引用 27

一句话总结

本文提出了一种针对具有随机选择与非确定性选择的随机程序的几乎必然终止（AST）的新证明规则。该规则通过引入实值上鞅中可调参数的递减性，扩展了基于变体的推理方法，其中递减的幅度与概率均可调节，从而能够证明以往规则无法处理的程序（如一维对称随机游走）的终止性。

ABSTRACT

An important question for a probabilistic program is whether the probability mass of all its diverging runs is zero, that is that it terminates "almost surely". Proving that can be hard, and this paper presents a new method for doing so; it is expressed in a program logic, and so applies directly to source code. The programs may contain both probabilistic- and demonic choice, and the probabilistic choices may depend on the current state. As do other researchers, we use variant functions (a.k.a. "super-martingales") that are real-valued and probabilistically might decrease on each loop iteration; but our key innovation is that the amount as well as the probability of the decrease are parametric. We prove the soundness of the new rule, indicate where its applicability goes beyond existing rules, and explain its connection to classical results on denumerable (non-demonic) Markov chains.

研究动机与目标

• 解决现有AST规则在证明具有递减但非均匀递减概率的随机程序的几乎必然终止性方面的局限性。
• 开发一种可直接在程序逻辑的源代码层面应用的证明规则，避免依赖模型层面的推理。
• 将AST规则的适用范围扩展至包含非确定性选择（如混合随机与非确定性选择）的程序。
• 提供一个数学上严谨的AST判定标准，使其与可数马尔可夫链的经典结果相联系。
• 为特定程序类（如二维对称随机游走）提供类似完备性的保证，确保变体的存在性可被形式化证明。

提出的方法

• 提出一种基于实值上鞅（即变体函数）的新证明规则，允许在程序迭代过程中对递减的幅度与概率进行参数化调节。
• 在概率受控命令语言（pGCL）中形式化该规则，实现对包含随机与非确定性选择的源代码的直接推理。
• 定义一种参数化递减条件，其中变体的期望递减量受当前状态的函数下界约束，从而支持非均匀且递减的进展概率。
• 利用递归程序构造与不动点语义来建模while循环，确保该规则适用于嵌套与复杂控制结构。
• 借助马尔可夫链理论中的经典结果（特别是可数链的常返性与瞬态性），为特定程序类提供该规则在可靠性和完备性方面的理论依据。
• 通过将while循环进行语法变换为递归表达式，利用标准程序代数技术正式验证该规则的正确性。

实验结果

研究问题

• RQ1 能否设计一种证明规则，用于证明概率随时间递减的随机程序（如一维对称随机游走）的几乎必然终止性？
• RQ2 是否可能将基于变体的推理方法扩展至统一处理随机与非确定性选择，且在源代码层面的程序逻辑中实现？
• RQ3 如何对上鞅的递减性进行参数化，以在保持规则可靠性的同时，扩大其在现有方法之外的应用范围？
• RQ4 哪些来自马尔可夫链理论的经典结果可被用于为新证明规则提供完备性保证？
• RQ5 该规则是否可应用于高维随机游走（如二维对称随机游走）？其是否保证存在满足规则条件的合适变体？

主要发现

• 所提出的证明规则成功证明了一维对称随机游走的几乎必然终止性，而该程序无法被标准或先前已知的AST规则处理。
• 该规则在pGCL中具有可靠性，并可直接在源代码层面应用，实现无需深入概率模型的验证。
• 该规则对递减幅度与概率的参数化处理使其能够处理进展可能性递减的程序，显著扩展了现有方法的适用范围。
• 与经典马尔可夫链理论的关联确保了对于二维对称随机游走，满足规则条件的变体必然存在（即使尚未能以闭式表达构造）。
• 该规则通过递归程序代数得到形式化验证，while循环构造的等价性通过不动点语义与α-转换得以确立。
• 该方法支持混合随机与非确定性选择的程序，其适用范围广于仅限于纯随机或纯非确定性构造的规则。