[论文解读] Eigenvalues of non-reversible Markov chains: their connection to mixing times, reversible Markov chains, and Cheeger inequalities

Ravi Montenegro|arXiv (Cornell University)|Apr 17, 2006

Markov Chains and Monte Carlo Methods参考文献 8被引用 6

一句话总结

本文利用非可逆马尔可夫链的特征值，建立了其混合时间的下界，并将其与相关可逆链的特征值联系起来。推导出适用于非可逆链的新一类类似Cheeger的不等式，包括对第二大模特征值的界，以及针对可逆链最小特征值的新不等式，从而改进了已知结果。

ABSTRACT

We show a lower bound on mixing time for a non-reversible Markov chain in terms of its eigenvalues. This is used to show a bound on the real part of the complex-valued eigenvalues in terms of the realvalued eigenvalues of a related reversible chain, and likewise to bound the second largest magnitude eigenvalue. A myriad of Cheeger-like inequalities also follow for non-reversible chains, which even in the reversible case sharpen previously known results. The same argument also produces a new Cheeger-like inequality for the smallest eigenvalue of a reversible chain, and a Cheeger-like inequality for the second largest magnitude eigenvalue of a non-reversible chain.

研究动机与目标

• 利用非可逆马尔可夫链的特征值，建立其混合时间的下界。
• 将非可逆链的复特征值与对应可逆链的实特征值联系起来。
• 为非可逆链推导类似Cheeger的不等式，包括对第二大模特征值的界。
• 为可逆马尔可夫链的最小特征值提出一个新的类似Cheeger的不等式。
• 将该框架扩展至包含非可逆情形下第二大模特征值的不等式。

提出的方法

• 基于非可逆马尔可夫链的特征值，推导其混合时间的下界。
• 构造一个相关联的可逆马尔可夫链，以比较其与非可逆链的实特征值。
• 利用谱分析，以可逆对应物的特征值表示非可逆链复特征值的实部的界。
• 应用变分原理与谱隙论证，建立非可逆链的类似Cheeger不等式。
• 引入一个新颖不等式，将可逆链的最小特征值与类似导通率的参数关联起来。
• 通过谱学与几何技术，将该方法推广，以界定非可逆链中第二大模特征值的界。

实验结果

研究问题

• RQ1 如何利用非可逆马尔可夫链的特征值来界定其混合时间？
• RQ2 非可逆链的复特征值与对应可逆链的实特征值之间存在何种关系？
• RQ3 能否为非可逆马尔可夫链推导出类似Cheeger的不等式？其与可逆情形下的已知结果相比如何？
• RQ4 是否存在对可逆马尔可夫链最小特征值的有意义类似Cheeger的不等式？
• RQ5 能否为非可逆链的第二大模特征值建立类似Cheeger的不等式？

主要发现

• 利用非可逆马尔可夫链的特征值，建立了其混合时间的下界，从而提供了一种谱度量收敛速度的方法。
• 非可逆链复特征值的实部，已用相关可逆链的特征值表示其界。
• 通过谱学与几何论证，界定了非可逆链第二大模特征值，扩展了已知的可逆情形结果。
• 为非可逆链推导出新的类似Cheeger不等式，改进了可逆情形下已知结果。
• 为可逆马尔可夫链的最小特征值获得了一个新颖的类似Cheeger不等式，将其与几何导通率参数关联起来。
• 为非可逆链的第二大模特征值提出了一个类似Cheeger的不等式，引入了一种新的谱-几何关联。