Skip to main content
QUICK REVIEW

[論文レビュー] Using Maximum Entry-Wise Deviation to Test the Goodness of Fit for Stochastic Block Models

Jianwei Hu, Jingfei Zhang|arXiv (Cornell University)|Mar 20, 2017
Complex Network Analysis Techniques参考文献 31被引用数 5
ひとこと要約

本稿は、中心化・スケーリングされた隣接行列の最大エントリワイズ偏差を用いて、ストークスティックブロックモデルの適合度検定を提案する。帰無仮説の下で、この検定統計量は漸近的にGumbel分布に従い、コミュニティ数 $k$ が $n$ に対して線形に増加する($k = o(n / \log^2 n)$ まで)ことを許容する。これは従来の制約を著しく緩和したものであり、また、あるクラスの代替仮説に対し漸近的パワーを維持する。

ABSTRACT

The stochastic block model is widely used for detecting community structures in network data. How to test the goodness-of-fit of the model is one of the fundamental problems and has gained growing interests in recent years. In this article, we propose a novel goodness-of-fit test based on the maximum entry of the centered and re-scaled adjacency matrix for the stochastic block model. One noticeable advantage of the proposed test is that the number of communities can be allowed to grow linearly with the number of nodes ignoring a logarithmic factor. We prove that the null distribution of the test statistic converges in distribution to a Gumbel distribution, and we show that both the number of communities and the membership vector can be tested via the proposed method. Further, we show that the proposed test has asymptotic power guarantee against a class of alternatives. We also demonstrate that the proposed method can be extended to the degree-corrected stochastic block model. Both simulation studies and real-world data examples indicate that the proposed method works well.

研究の動機と目的

  • ストークスティックブロックモデルにおけるモデル適合度のテストという根本的課題に取り組むこと。特に、ネットワークサイズに応じてコミュニティ数が増加する場合に有効であることを目的とする。
  • ノード数 $n$ と共にコミュニティ数 $k$ が増加する場合でも、有効かつ強力な検定を維持できることを目的とする。これは従来の制約を超えるものである。
  • ノード次数の不均一性を考慮する度数補正ストークスティックブロックモデルへの手法の拡張を目的とする。
  • 最小限の仮定の下で、検定統計量の漸近的帰無分布およびパワーに関する理論的保証を提供することを目的とする。
  • モンテカルロ法や尤度に基づく手法に代わる、計算的に効率的で理論的裏付けのある代替手法を提供することを目的とする。

提案手法

  • 中心化・スケーリングされた隣接行列 $A_{ij} - B_{\sigma(i)\sigma(j)}$ の各エントリの絶対偏差の最大値を、その標準偏差で割った統計量を検定統計量として定義する。
  • 帰無仮説の下で、$k = o(n / \log^2 n)$ のとき、検定統計量がGumbel分布に分布収束することを確立し、$k$ が $n$ にほぼ線形に増加することを許容する。
  • 同じ漸近的帰無分布を保ちつつ、パワーを向上させるための拡張された検定統計量を提案する。
  • 極値理論と中程度偏差評価を用いて極限分布を導出し、従属的だが弱く依存するエントリの最大値を活用する。
  • 推定された次数パラメータ $\widehat{\omega}_i$ を組み込むことで、度数補正ストークスティックブロックモデルへのフレームワークの拡張を試みるが、漸近的帰無分布は未解決の問題のままである。
  • 特に実データ応用の文脈で、有限標本におけるp値を計算するためにブートストラップ法を適用する。

実験結果

リサーチクエスチョン

  • RQ1ノード数に応じてコミュニティ数が増加する場合でも、有効に保たれるストークスティックブロックモデルの適合度検定を開発できるか?
  • RQ2ストークスティックブロックモデルの下で、隣接行列の最大エントリワイズ偏差の漸近的帰無分布は何か?
  • RQ3提案された検定は、あるクラスの局所的代替仮説に対し漸近的パワーを維持するか?
  • RQ4未知の次数パラメータを有するより柔軟な度数補正ストークスティックブロックモデルへ、この手法を拡張できるか?
  • RQ5モンテカルロ法や尤度比検定などの既存手法と比較して、実際の応用においてこの検定はどのように性能を発揮するか?

主な発見

  • 帰無仮説の下で、最大エントリワイズ偏差に基づく検定統計量は $k = o(n / \log^2 n)$ のときGumbel分布に分布収束し、$k$ が $n$ にほぼ線形に増加することを許容する。
  • 提案された検定は、検出可能な偏差がある場合にモデル適合度の欠陥を検出可能なあるクラスの局所的代替仮説に対し漸近的パワーを有する。
  • 拡張された検定統計量は、漸近的帰無分布を変更せずに、実験的パワーを向上させる。
  • 政治的ブログネットワークでは、標準的なストークスティックブロックモデル下で $k=10$ は棄却された($T^{+}_{n,\text{boot}} = 23.59 > 3.41$)が、度数補正モデル下では $k=2$ は棄却されなかった($T^{+}_{n2,\text{boot}} = 2.06 < 3.41$)。これは先行研究の結果と整合的である。
  • 特に $k$ が $n$ と共に増加する高次元設定において、理論的柔軟性の面で既存手法を上回る。
  • 推定された次数パラメータが導入する複雑な依存構造のため、度数補正モデルの漸近的帰無分布は未だ不明であり、これは重要な未解決問題を示している。

より良い研究を、今すぐ始めましょう

論文の読解から最終レビューまで、研究時間を劇的に削減しましょう。

クレジットカード登録不要

このレビューはAIが作成し、人間の編集者が確認しました。