[论文解读] Probabilistic Bisimulation: Naturally on Distributions

Holger Hermanns, Jan Krčál+1 more|arXiv (Cornell University)|Apr 21, 2014

Formal Methods in Verification参考文献 44被引用 4

一句话总结

本文提出了一种新颖的概率双语关系，将概率分布视为一等公民，从而为离散与连续概率系统提供自然且统一的语义。该方法通过证明在基于分布的双语关系下，连续时间连续时间马尔可夫链（CTMC）与定时自动机中的无 memory 指数延迟在行为上等价，解决了长期存在的连续时间系统建模难题，为跨多种系统模型的正式验证提供了坚实基础。

ABSTRACT

In contrast to the usual understanding of probabilistic systems as stochastic processes, recently these systems have also been regarded as transformers of probabilities. In this paper, we give a natural definition of strong bisimulation for probabilistic systems corresponding to this view that treats probability distributions as first-class citizens. Our definition applies in the same way to discrete systems as well as to systems with uncountable state and action spaces. Several examples demonstrate that our definition refines the understanding of behavioural equivalences of probabilistic systems. In particular, it solves a long-standing open problem concerning the representation of memoryless continuous time by memory-full continuous time. Finally, we give algorithms for computing this bisimulation not only for finite but also for classes of uncountably infinite systems.

研究动机与目标

• 解决连续时间马尔可夫链（CTMC）与带随机语义的定时自动机之间行为等价性的长期开放问题。
• 为概率系统提供一种自然的、以分布为中心的语义，将概率分布视为一等公民。
• 通过区分标准双语关系错误地视为等价的状态，来改进行为等价性，特别是在大规模种群或连续状态系统中。
• 为有限与不可数无限系统开发计算该双语关系的算法，包括具有连续时间与不可数状态空间的系统。

提出的方法

• 在概率分布而非单个状态上定义一种新的强双语关系，采用范畴论框架，自然地扩展至连续空间。
• 将转移形式化为通过转移函数 ξ 从分布到分布的映射，保持动作下的分布结构。
• 使用基于表格的证明系统，包含两条规则：Step（用于分布转移）与 Lin（用于线性组合），实现对无限分布的有限表示。
• 利用线性代数紧凑表示分布，即使在不可数状态空间中也能实现算法计算。
• 证明成功的表格恰好对应于双语等价的分布，并且存在有限的、可在多项式时间内计算出的表格式。
• 将该框架应用于证明无 memory 与有 memory 的连续时间系统之间的等价性，从而解决 CTMC 与 TA 语义之间的差异。

实验结果

研究问题

• RQ1 能否为概率系统定义一种统一的行为等价关系，将分布视为一等公民，而非单个状态？
• RQ2 尽管 CTMC 与带随机语义的定时自动机对指数时钟的处理方式不同，是否存在一个形式基础来证明它们之间的等价性？
• RQ3 如何有意义地将概率双语关系扩展至具有不可数状态空间与动作空间的系统，包括连续时间模型？
• RQ4 所提出的双语关系能否比现有方法更精确地区分行为上不可区分的状态，特别是在大规模种群或复杂系统中？
• RQ5 哪些算法技术能够实现在有限与不可数无限系统中高效计算该双语关系？

主要发现

• 所提出的基于分布的双语关系通过正式证明，解决了15年来未解的难题：在该语义下，无 memory 与有 memory 的连续时间系统在行为上是等价的。
• 该双语关系正确识别出行为上不可区分的状态，避免了以往方法中常见的过度近似与不足近似。
• 对于有限系统，可通过基于表格的算法，结合 Lin 规则的线性代数压缩，在多项式时间内计算出双语关系。
• 通过利用范畴论框架，该方法自然地扩展至不可数无限系统，如具有连续时间与不可数状态空间的系统。
• 当且仅当 μ ∼ ν 成立时，从 μ ∼ ν 可构造出成功的表格，且该表格可为有限形式，其大小为 |S̄|（不同分布类型数量）的多项式。
• 该框架为连续时间概率系统的正式验证，包括结合离散与连续行为的混合模型，提供了可靠且完备的基础。