[論文レビュー] A new rule for almost-certain termination of probabilistic- and demonic programs

Annabelle McIver, Carroll Morgan|arXiv (Cornell University)|Dec 4, 2016

Logic, Reasoning, and Knowledge参考文献 13被引用数 9

ひとこと要約

この論文は、スーパーマーティングルとパラメータ化された進行条件を組み合わせることで、確率的および悪意あるプログラムにおけるほとんど確実な終了（ACT）を確立するための新しい証明規則を導入する。この手法により、非有界状態空間系—例えば1次元および2次元の非有界対称ランダムウォーク—における確率1での終了の検証が可能となり、従来の非ゼロ確率減少や有界スーパーマーティングルに基づく手法では失敗するケースに対しても有効である。

ABSTRACT

Extending our own and others' earlier approaches to reasoning about termination of probabilistic programs, we propose and prove a new rule for termination with probability one, also known as "almost-certain termination". The rule uses both (non-strict) super martingales and guarantees of progress, together, and it seems to cover significant cases that earlier methods do not. In particular, it suffices for termination of the unbounded symmetric random walk in both one- and two dimensions: for the first, we give a proof; for the second, we use a theorem of Foster to argue that a proof exists. Non-determinism (i.e. demonic choice) is supported; but we do currently restrict to discrete distributions.

研究の動機と目的

• 従来の手法が失敗する無限状態系においても動作する、確率的および悪意あるプログラムにおけるほとんど確実な終了（ACT）の証明規則の開発。
• スーパーマーティングルの推論と局所的でパラメータ化された進行条件を組み合わせ、ゼロに近い確率の下限を必要とせずにACTを確立すること。
• 遷移系の明示的構築を回避する、ソースコードレベルの検証技術を提供し、プログラムコード上の局所的推論を可能にすること。
• 従来のマーティングルベース手法が直接的に検証できなかったケース、例えば2次元対称ランダムウォークを含む、拡張された適用範囲の提供。
• マーティングルの有界性と非終了性との関係を確立し、確率1で終了しないプログラムに対する反証証明（refutation certificate）を提供すること。

提案手法

• 状態空間 $ S $ 上に非負のバリアント関数 $ V $ を定義し、すべての終了状態 $ s \in S_0 $ に対して $ V(s) = 0 $ であり、すべての非終了状態 $ s \in S_* $ に対して $ V(s) > 0 $ であることを要件とする。
• $ V $ がスーパーマーティングルであることを要件とする：悪意ある集合からの任意の分布に対して、遷移後の $ V $ の期待値が現在の値以下の値をとること。
• パラメータ化された進行条件を導入する：各状態 $ s \in S_* $ に対して、次回の状態 $ s' $ が $ V(s') < V(s) $ を満たす確率が $ \delta > 0 $ 以上であるような $ \delta $ が存在し、この $ \delta $ は $ s $ に依存してもよい。
• スーパーマーティングル性と局所的進行の組み合わせにより、ゼロ・ワン法則の条件を満たし、最終的な終了確率が1であることを保証する。
• 標準的なスーパーマーティングル規則が、遷移確率の均一な下界がないために失敗する1次元および2次元の非有界対称ランダムウォークなどの無限状態系にこの規則を適用する。
• Fosterの定理を用いて、閉形式のバリアントが不明であっても2次元の場合に証明の存在を主張する。

実験結果

リサーチクエスチョン

• RQ1 スーパーマーティングルと進行条件を統合した一貫した証明規則を開発可能か？ これにより、無限状態の確率的および悪意あるプログラムにおけるほぼ確実な終了の検証が可能になるか？
• RQ2 提案された規則は、従来のスーパーマーティングルベース手法がカバーできない範囲、特に非有界ランダムウォークを含む、プログラムの検証範囲を拡張するか？
• RQ3 この規則は、下位の遷移系を明示的に構築することなく、ソースコードに直接適用可能か？
• RQ4 マーティングルの有界性とほぼ確実な終了の不可能性との関係は何か？
• RQ5 この規則は、期待時間の無限大とは限らない場合でも、確率1で終了しない場合の反証証明（refutation certificate）として機能するか？

主な発見

• 提案された規則は、線形スーパーマーティングルと局所的進行条件を用いて、1次元非有界対称ランダムウォークにおけるほぼ確実な終了を成功裏に証明した。
• 2次元対称ランダムウォークでは、閉形式のバリアントが不明であるが、Fosterの定理によりバリアントの存在が保証され、規則は同じ条件下でACTを確認した。
• この規則は、重要な差異を特定した：マーティングルが有界でかつ定数でない場合、ほぼ確実な終了は成立しない。これは、このようなケースに対する反証手法を提供する。
• 遷移確率がゼロから一様に離れていない系において、スーパーマーティングルとパラメータ化された進行条件を組み合わせることで、従来の規則の一般化を達成した。
• 規則は妥当であり、ソースレベルの推論に適用可能で、形式的検証のためのプログラム論理（例：pGCL）への統合を支援する。
• 本論文は、新たな反証証明を確立した：有限で非定数の正確なマーティングルが存在する場合、プログラムは確率1で終了しないことが示され、これは期待時間の無限大とは限らない場合にも適用可能である。