[論文レビュー] Random weighted projections, random quadratic forms and random eigenvectors

Van Vu, Ke Wang|arXiv (Cornell University)|Jun 13, 2013

Random Matrices and Applications参考文献 30被引用数 8

ひとこと要約

本稿は、高次元空間におけるランダム重み付き射影の濃縮不等式を確立し、ランダムな二次形式およびランダム $\pm 1$ 行列の固有ベクトルの無限大ノルムに関する新たな境界を導出する。ほとんどの単位固有ベクトルの無限大ノルムが $O(\sqrt{\log n/n})$ であることが示され、局所半円則の閾値について $\sqrt\log n$ 要因の程度までタイトな推定がなされる。

ABSTRACT

We present a concentration result concerning random weighted projections in high dimensional spaces. As applications, we prove (1) New concentration inequalities for random quadratic forms; (2) The infinity norm of most unit eigenvectors of a random $\pm 1$ matrix is of order $O( \sqrt { \log n/n})$; (3) An estimate on the threshold for the local semi-circle law which is tight up to a $\sqrt {\log n}$ factor.

研究の動機と目的

• 高次元の等方的ランダムベクトルにおけるランダム重み付き射影の一般濃縮不等式を構築すること。
• $K$-濃縮ランダムベクトルを用いて、古典的な射影補題を重み付きおよび非 i.i.d. の設定に拡張すること。
• 新しく導入された濃縮フレームワークを応用し、ランダム $\pm 1$ 行列の固有ベクトルの無限大ノルムに関する境界を導出すること。
• ランダム行列理論における局所半円則の閾値推定を改善すること。
• 重み付き射影および固有値の入れ子の技術を用いて、ランダム共分散行列のスペクトル挙動の洗練された分析を提供すること。

提案手法

• $K$-濃縮ランダムベクトルの概念を導入し、軽い尾部を持つ非 i.i.d. および重い尾部を持つ分布を含む $K$-有界性の一般化を行う。
• 重み付き射影補題の証明： $K$-濃縮ベクトル $X$ に対して、重み付き射影 $\left(\sum c_j |u_j^*X|^2\right)^{1/2}$ は $\sqrt{\sum c_j}$ のまわりに集中し、サブガウス型の尾部境界を示す。
• タラグランド型の濃縮不等式および中央値からのずれの境界を用いて、重み付き二次形式のずれを制御する。
• 切断技術を用いて無限大のエントリを扱い、尾部確率およびモーメント条件を制御する。
• 固有値の入れ子およびスティルチェス変換解析を用いて、ランダム行列のスペクトル分布を推定する。
• リーマン積分および主値推定を用いて、スペクトルの端付近の固有値の寄与を近似する。

実験結果

リサーチクエスチョン

• RQ1 非一様な重みを持つ重み付き射影に対するランダム射影の濃縮不等式をどのように非一様重みに拡張できるか。
• RQ2 基礎となるランダムベクトルが $K$-濃縮であるとき、重み付き二次形式の最適な濃縮挙動は何か。
• RQ3 ランダム $\pm 1$ 行列の固有ベクトルの典型的な $\ell^\infty$-ノルムは何か、次元 $n$ に対してどのようにスケーリングされるか。
• RQ4 収束のための行列エントリ数に応じて、局所半円則の鋭い閾値は何か。
• RQ5 重み付き射影および固有値の入れ子を用いて、ランダム共分散行列のスペクトル分布を分析できるか。

主な発見

• ランダム $\pm 1$ 行列のほとんどの単位固有ベクトルの無限大ノルムは、高確率で $O(\sqrt{\log n/n})$ である。
• 本稿は、重み付き射影に対する新しい濃縮不等式を確立し、$\left|\sqrt{\sum c_j |u_j^*X|^2} - \sqrt{\sum c_j}\right|$ が分散パラメータ $K^2$ のサブガウス型であることを示している。
• 局所半円則の閾値は、$\sqrt{\log n}$ 要因の程度までタイトに推定されており、以前の境界を改善している。
• $K$-濃縮ベクトルに対して、重み付き射影は、確率が $C \exp(-C' t^2 / K^2)$ 以下でその平均からずれる。
• スペクトルの端付近の固有値のフラクチュエーションの分析では、区間分解および主値積分を用いて誤差項を有界化している。
• 局所法の推定誤差は $O(K^2 \log n / \sqrt{n})$ であることが示され、対数要因を除いて最適である。