[論文レビュー] Generalized Belief Propagation on Tree Robust Structured Region Graphs

Andrew E. Gelfand, Max Welling|UvA-DARE (University of Amsterdam)|Oct 16, 2012

Error Correcting Code Techniques参考文献 35被引用数 4

ひとこと要約

本稿では、一般化された信念伝播（GBP）のための木に頑健な構造的領域グラフ（SRG）を導入し、マコフネットワークの任意の生成木上で正確な推論を保証する。これは、外領域選択を基本サイクル基底に結びつけることで実現される。2種類の木に頑健なサイクル基底—平面的および「スター」型—を同定し、木に頑健性を活用することでGBPの精度と収束性が向上することを示している。

ABSTRACT

This paper provides some new guidance in the construction of region graphs for Generalized Belief Propagation (GBP). We connect the problem of choosing the outer regions of a LoopStructured Region Graph (SRG) to that of finding a fundamental cycle basis of the corresponding Markov network. We also define a new class of tree-robust Loop-SRG for which GBP on any induced (spanning) tree of the Markov network, obtained by setting to zero the off-tree interactions, is exact. This class of SRG is then mapped to an equivalent class of tree-robust cycle bases on the Markov network. We show that a treerobust cycle basis can be identified by proving that for every subset of cycles, the graph obtained from the edges that participate in a single cycle only, is multiply connected. Using this we identify two classes of tree-robust cycle bases: planar cycle bases and "star" cycle bases. In experiments we show that tree-robustness can be successfully exploited as a design principle to improve the accuracy and convergence of GBP.

研究の動機と目的

• グラフィカルモデルにおける一般化された信念伝播（GBP）のための効果的な領域グラフを構築するという課題に対処すること。
• マコフネットワークの任意の生成木上で正確な推論を保証するよう、木外の相互作用に対して頑健な領域グラフを設計すること。
• ループを含むSRG（Loop-SRG）における外領域選択と、対応するマコフネットワークの基本サイクル基底との間の明示的関係を形式化すること。
• GBPの性能を向上させるために、木に頑健であることが保証される新しいサイクル基底のクラスを同定・特徴づけること。
• 実用的にGBPの収束性と正確性を向上させる領域グラフ設計の原則を提供すること。

提案手法

• ループを含むSRGにおける外領域と、対応するマコフネットワークの基本サイクル基底との関係を形式化する。
• GBPが木外の相互作用をゼロにした場合でも正確なままとなる、木に頑健なループを含むSRG（Tree-robust Loop-SRG）の概念を導入する。
• すべてのサイクルに含まれる辺の部分集合に対して、その辺が「ちょうど1つのサイクル」にのみ含まれる部分グラフが多重接続であるようなサイクル基底を、木に頑健なサイクル基底と定義する。
• 平面的サイクル基底と「スター」型サイクル基底という2つの木に頑健なサイクル基底のクラスを同定し、グラフの構造的性質に基づいて導出する。
• サイクルにおける辺の参加状況を分析することで、木に頑健性を検証するためのグラフ理論的条件を用いる。
• 木に頑健なSRGの構築を、マコフネットワーク内での有効なサイクル基底の同定にマッピングすることで、体系的な設計を可能にする。

実験結果

リサーチクエスチョン

• RQ1 マコフネットワークの任意の生成木上でGBP推論を正確に保証するよう、領域グラフを体系的に構築する方法は何か？
• RQ2 木外の相互作用を削除してもGBPが正確なまま保たれるための、サイクル基底の構造的性質は何か？
• RQ3 どのクラスのサイクル基底が本質的に木に頑健であり、グラフ理論的基準を用いてどのように同定できるか？
• RQ4 木に頑健性を設計原則として活用することで、実用的なGBPの収束性と正確性を向上させることは可能か？
• RQ5 ループを含むSRGにおける外領域選択と、対応するマコフネットワークの基本サイクル基底との関係は何か？

主な発見

• 木に頑健なループを含むSRGでは、木外の相互作用をゼロにした場合に得られる任意の部分生成木上でGBPが正確に保たれる。
• サイクル基底が木に頑健であるための必要十分条件は、任意のサイクル部分集合に対して、その部分集合に含まれるサイクルのうち「ちょうど1つのサイクル」にのみ含まれる辺からなる部分グラフが多重接続であることである。
• 2種類の木に頑健なサイクル基底が同定された：平面的サイクル基底と「スター」型サイクル基底であり、両者とも木に頑健性の条件を満たしている。
• 実験により、木に頑健な領域グラフを用いることで、非頑健な構成に比べてGBP推論の収束が速く、正確性も向上することが示された。
• 理論的枠組みにより、すべての生成木上で正確性を維持する領域グラフの体系的設計が可能となり、ヒューリスティックな領域選択の代替としての原理的枠組みが提供された。