[論文レビュー] On hitting times and fastest strong stationary times for skip-free chains

James Allen Fill|arXiv (Cornell University)|Aug 31, 2007

Markov Chains and Monte Carlo Methods参考文献 8被引用数 6

ひとこと要約

この論文は、連続時間のスキップフリー連鎖における状態 0 から d への遷移時間の分布について、Brown と Shao が1987年に得た結果の新しい証明を提供する。遷移時間は、生成行列の非ゼロ固有値に等しいレートを持つ d 個の独立な指数分布確率変数の和として分布することを示している。この手法により、出生・死滅連鎖に対してより単純な明示的表現が得られ、最速の強定常時間や離散時間の類似結果へと拡張可能であり、確率的単調性を示すスキップフリー過程の混合時間に関する新たな知見が得られる。

ABSTRACT

An (upward) skip-free Markov chain with the set of nonnegative integers as state space is a chain for which upward jumps may be only of unit size; there is no restriction on downward jumps. In a 1987 paper, Brown and Shao determined, for an irreducible continuous-time skip-free chain and any d, the passage time distribution from state 0 to state d. When the nonzero eigenvalues nu_j of the generator are all real, their result states that the passage time is distributed as the sum of d independent exponential random variables with rates nu_j. We give another proof of their theorem. In the case of birth-and-death chains, our proof leads to an explicit representation of the passage time as a sum of independent exponential random variables. Diaconis and Miclo recently obtained the first such representation, but our construction is much simpler. We obtain similar (and new) results for a fastest strong stationary time T of an ergodic continuous-time skip-free chain with stochastically monotone time-reversal started in state 0, and we also obtain discrete-time analogs of all our results. In the paper's final section we present extensions of our results to more general chains.

研究の動機と目的

• 連続時間のスキップフリー連鎖における遷移時間分布について、Brown と Shao が1987年に得た結果を、新しいアプローチを用いて再証明すること。
• 出生・死滅連鎖に対して、遷移時刻を独立な指数分布確率変数の和としてより単純で明示的な構成を与えること。
• 定常的かつ単調な時間反転を示すエルゴード的連続時間スキップフリー連鎖における最速の強定常時刻へ結果を拡張すること。
• より広範な適用性を求めるために、連続時間の結果の離散時間版を構築すること。
• スキップフリー過程を超えるより一般的なマコフ連鎖のクラスへと結果を一般化すること。

提案手法

• 生成行列の固有値性質に着目し、遷移時刻問題を再定式化する。特に、実数かつ非ゼロの固有値に注目する。
• 各非ゼロ固有値 ν_j に対応するレートを持つ独立な指数分布確率変数の和として、遷移時刻を構築する。
• スキップフリー構造を活用し、固有値が実数かつ非負であることを保証することで、指数分布の和による表現を可能にする。
• 強定常時刻フレームワークを適用し、確率的単調性を示す時間反転を持つエルゴード的連鎖に対して、最速の強定常時刻 T を導出する。
• 時間反転の双対性とスペクトル分解を用いて、結果を離散時間連鎖へと拡張する。
• 最終節では、非スキップフリー連鎖に対してもこの枠組みを一般化し、類似表現が成立するための条件を同定する。

実験結果

リサーチクエスチョン

• RQ1 スペクトル的手法を用いて、出生・死滅連鎖の遷移時刻について、より単純で明示的な表現を導出可能か？
• RQ2 状態 0 から d への遷移時刻が、生成行列の非ゼロ固有値に等しいレートを持つ独立な指数分布確率変数の和として分布するための条件は何か？
• RQ3 確率的単調性を示す時間反転を持つエルゴード的スキップフリー連鎖に対して、最速の強定常時刻の概念をどのように特徴づけ、構築できるか？
• RQ4 連続時間の結果における遷移時間分布および強定常時刻の構成の離散時間版は何か？
• RQ5 結果は、スキップフリー過程を超えるより一般的なマコフ連鎖のクラスへどの程度まで拡張可能か？

主な発見

• 非可約な連続時間スキップフリー連鎖において、状態 0 から状態 d への遷移時間は、生成行列の非ゼロ固有値 ν_j に等しいレートを持つ d 個の独立な指数分布確率変数の和として分布する。
• 出生・死滅連鎖において、本研究で提示された手法により、Diaconis と Miclo が以前に得た構成よりも単純かつ明示的な遷移時刻の表現が得られる。
• 確率的単調性を示す時間反転を持つエルゴード的連続時間スキップフリー連鎖に対して、同じ指数分布の和の枠組みを用いて、最速の強定常時刻 T を明示的に構築可能である。
• 連続時間の結果の離散時間版が導出され、類似した遷移時間分布および強定常時刻の構成が成立することが示された。
• この枠組みはより一般的な連鎖へと拡張可能であり、類似したスペクトル的表現が成立するための条件が同定された。