[论文解读] Stochastic approximation of quasi-stationary distributions for diffusion processes in a bounded domain

Michel Benaı̈m, Nicolas Champagnat+1 more|arXiv (Cornell University)|Apr 18, 2019

Stochastic processes and statistical mechanics参考文献 20被引用 3

一句话总结

该论文建立了有界区域内受强化扩散过程的占位测度几乎必然收敛于底层扩散过程的唯一拟平稳分布。该过程在有界区域中以时间齐次扩散形式演化，并在边界处发生吸收，每次吸收后根据其过去占位测度进行重采样。利用随机逼近技术和拟平稳分布理论的最新进展，作者证明了当时间趋于无穷时，该过程的经验测度几乎必然收敛于拟平稳分布，从而解决了在边界处具有硬吸收的连续扩散设定下的一个开放问题。

ABSTRACT

We study a random process with reinforcement, which evolves following the dynamics of a given diffusion process in a bounded domain and is resampled according to its occupation measure when it reaches the boundary. We show that its occupation measure converges to the unique quasi-stationary distribution of the diffusion process absorbed at the boundary of the domain. Our proofs use recent results in the theory of quasi-stationary distributions and stochastic approximation techniques.

研究动机与目标

• 解决有界区域中具有边界硬吸收的扩散过程的占位测度几乎必然收敛于拟平稳分布这一开放问题。
• 将随机逼近技术扩展至具有非紧状态空间及边界处无限吸收率的连续时间扩散过程。
• 利用耦合论证和拟平稳分布理论的最新结果，建立占位测度动力学的全局渐近稳定性。
• 证明重采样过程生成与关键线性算子 A 相关的测度值动力系统的渐近伪轨迹。
• 在最小正则性假设下（包括 C² 边界和 Hölder 连续系数）提供严格的收敛性证明。

提出的方法

• 该过程被定义为一系列在有界区域 D 内的扩散过程，其初始分布为前一轨迹占位时间的经验测度。
• 在 ∂D 处发生吸收后，过程根据前一跃迁的归一化占位测度进行重采样。
• 分析占位测度 µt = (1/t)∫₀ᵗ δYs ds 作为随时间演化的随机过程。
• 作者使用占位测度的时间变换和线性化版本，表明其行为类似于由线性算子 A 控制的测度值动力系统的渐近伪轨迹。
• 应用 [2, 5] 中的随机逼近技术，依赖于鞅差分的收敛性及过程的统一连续性。
• 利用耦合论证和拟平稳分布的最新结果，证明系统的全局渐近稳定性。

实验结果

研究问题

• RQ1 在边界处具有吸收的有界区域中，受强化扩散过程的占位测度是否几乎必然收敛于底层扩散过程的拟平稳分布？
• RQ2 随机逼近技术能否扩展至具有非紧状态空间及边界处无限吸收率的连续时间扩散过程？
• RQ3 在所提出的强化机制下，占位测度动力学是否具有全局渐近稳定性？
• RQ4 能否利用拟平稳分布理论的最新进展和耦合方法建立收敛性？
• RQ5 区域和扩散系数的何种条件可保证占位测度的几乎必然收敛？

主要发现

• 受强化过程的占位测度 µt 几乎必然收敛于扩散过程的唯一拟平稳分布 α，当 t → ∞ 时。
• 收敛性在最小假设下成立：区域 D 有界且边界为 C²，扩散系数为 Hölder 连续。
• 重采样机制确保占位测度动力学渐近稳定，并表现为测度值流的渐近伪轨迹。
• 时间变换过程 (eηt)t≥1 几乎必然相对紧致且一致连续，所有极限点均为方程 (3.13) 的弱解。
• 占位测度偏差的鞅差分结构确保归一化波动几乎必然趋于零，从而导致 θn/n 几乎必然收敛于 1/λ₀。
• 对任意有界可测函数 f，µtf 几乎必然收敛于 αf，收敛速率由鞅增量条件期望的 O(ℓ⁻³/²) 衰减所隐含。