Skip to main content
QUICK REVIEW

[论文解读] On the Ergodicity, Bias and Asymptotic Normality of Randomized Midpoint Sampling Method

Ye He, Krishnakumar Balasubramanian|arXiv (Cornell University)|Dec 1, 2020
Markov Chains and Monte Carlo Methods被引用 3
一句话总结

本文分析了随机中点法在过阻尼与欠阻尼朗之万扩散过程中的离散化方法,证明了在强凸性和光滑性条件下其遍历性、偏差和渐近正态性。研究表明,该方法在固定步长下存在偏差,但随着步长趋于零,其偏差渐近为零;并推导出数值积分的渐近正态性,从而可构建置信区间。

ABSTRACT

The randomized midpoint method, proposed by [SL19], has emerged as an optimal discretization procedure for simulating the continuous time Langevin diffusions. Focusing on the case of strong-convex and smooth potentials, in this paper, we analyze several probabilistic properties of the randomized midpoint discretization method for both overdamped and underdamped Langevin diffusions. We first characterize the stationary distribution of the discrete chain obtained with constant step-size discretization and show that it is biased away from the target distribution. Notably, the step-size needs to go to zero to obtain asymptotic unbiasedness. Next, we establish the asymptotic normality for numerical integration using the randomized midpoint method and highlight the relative advantages and disadvantages over other discretizations. Our results collectively provide several insights into the behavior of the randomized midpoint discretization method, including obtaining confidence intervals for numerical integrations.

研究动机与目标

  • 研究常数步长下随机中点离散化的平稳分布与偏差。
  • 建立该方法用于数值积分的渐近正态性。
  • 将该方法的统计性质与其他离散化方案进行比较。
  • 为数值积分中置信区间的构建提供理论保证。

提出的方法

  • 分析常数步长下随机中点法对朗之万扩散过程离散化所诱导的离散时间马尔可夫链。
  • 刻画离散链的平稳分布,并量化其相对于目标分布的偏差。
  • 应用泛函中心极限定理技术,证明遍历平均的渐近正态性。
  • 利用谱间隙与偏置条件,证明在强凸性和光滑性条件下具有几何遍历性。
  • 以步长和势函数曲率表示偏差的显式上界。
  • 将该方法的收敛速率与方差特性与欧拉-丸山法及其他对称方案进行比较。

实验结果

研究问题

  • RQ1常数步长下随机中点离散化的平稳分布具有何种性质?
  • RQ2随着步长减小,该方法的偏差行为如何变化?
  • RQ3离散化过程的遍历平均是否满足渐近正态性定理?
  • RQ4该方法的统计效率与其它离散化方案相比如何?
  • RQ5能否基于该方法严格构建数值积分的置信区间?

主要发现

  • 常数步长下随机中点链的平稳分布相对于目标分布存在偏差,且仅当步长趋于零时偏差才消失。
  • 该方法在步长趋于零的极限下实现渐近无偏,证实了其在数值积分中的一致性。
  • 离散化过程的遍历平均满足渐近正态性定理,从而可构建有效的置信区间。
  • 估计量的渐近方差得到良好控制,且与其他对称离散化方案相比具有竞争力。
  • 在强凸性和光滑性条件下,该方法表现出几何遍历性,确保快速混合。
  • 偏差与渐近方差显式依赖于步长及势函数的黑塞矩阵。

更好的研究,从现在开始

从论文设计到论文写作,大幅缩短您的研究时间。

无需绑定信用卡

本解读由 AI 生成,并经人工编辑审核。