[論文レビュー] Stochastic Comparisons between first-passage times for Markov Chains

Emilio De Santis, Fabio Spizzichino|arXiv (Cornell University)|Oct 3, 2012

Advanced Queuing Theory Analysis被引用数 1

ひとこと要約

この論文は、新しいカップリング技法を用いて、スキップフリー過程に注目し、マルコフ連鎖における到達時間の確率的順序付けの十分条件を確立する。非スキップフリー連鎖同士の関係を導入することで、通常および漸近的確率的順序付けの両方を導出し、確率的列における語の出現パターンへの応用を含む。

ABSTRACT

We develop some sufficient conditions for the stochastic ordering between hitting times, in a fixed state, for two Markov chains. In particular, we focus attention on the so called \emph{skip-free} case. In the analysis of such a case, we develop a special type of coupling. We also compare different types of relations between two, non-necessarily skip-free, Markov chains on the same state space. Such relations have a natural role in establishing the usual and the asymptotic stochastic ordering between the probability distributions of hitting times. Finally, we present some discussions and examples related with words' occurrences.

研究の動機と目的

• マルコフ連鎖における到達時間の確率的順序付けの十分条件を、特にスキップフリーの場合に開発すること。
• スキップフリー・マルコフ連鎖とその到達時間の分析に特化した、新しいカップリング法を導入すること。
• 同じ状態空間上に存在する非スキップフリー連鎖同士の異なる種類の関係を比較し、到達時間分布の確率的順序付けを導出すること。
• 連鎖の構造的性質を用いて、到達時間分布の通常および漸近的確率的順序付けを確立すること。
• 理論的枠組みを、ランダム列における語の出現パターンといった実世界の問題に応用すること。

提案手法

• スキップフリー・マルコフ連鎖の到達時間同士を比較するために、特に設計された新しいカップリング技法を開発する。
• 同じ状態空間上に存在する2つのマルコフ連鎖の間の関係を導入・分析し、それらの到達時間の確率的順序付けを示す。
• 確率的優位性とカップリングの概念を用いて、到達時間順序付けの十分条件を導出する。
• フレームワークを用いて、語の出現プロセスを分析し、特定の遷移構造を持つマルコフ連鎖として列をモデル化する。
• 漸近的解析を用いて、導出された順序付け条件下での到達時間分布の長期的挙動と収束を研究する。
• スキップフリー性を活用して、到達時間分布の構造を単純化し、より強い確率的比較を可能にする。

実験結果

リサーチクエスチョン

• RQ1 どのような条件下で、あるマルコフ連鎖の到達時間が、別の連鎖のそれよりも確率的に優位になるか？
• RQ2 どのようにして、スキップフリー・マルコフ連鎖の到達時間比較に適した専用カップリング法を構築・適用できるか？
• RQ3 同じ状態空間上に存在する2つのマルコフ連鎖の間の、どのような構造的関係が、それらの到達時間分布の確率的順序付けを示すか？
• RQ4 通常の確率的順序付けと漸近的確率的順序付けの違いは何か？また、それらはどのように確立できるか？
• RQ5 理論的結果をどのようにして、確率的列における特定の語の出現時刻のモデル化と比較に応用できるか？

主な発見

• 特にスキップフリーの場合に、2つのマルコフ連鎖間の到達時間の確率的優位性の十分条件が導出された。
• スキップフリー連鎖の構造的制約を活用して、直接的な到達時間比較が可能な専用カップリング法が開発された。
• 非スキップフリー連鎖同士の間の、到達時間分布の確率的順序付けを示す構造的関係が同定された。
• 到達時間分布の通常および漸近的確率的順序付けが確立され、後者は長期挙動の洞察を提供する。
• 語の出現プロセスへの応用は、理論的枠組みがランダム列のパターンをモデル化する上で実用的であることを示した。
• スキップフリー仮定により、制限された遷移構造のおかげで、より強く明示的な比較が可能となり、到達時間の解析が単純化された。