[论文解读] Extremal Probabilistic Problems and Hotelling's T^2 Test Under Symmetry Condition

Iosif Pinelis|ArXiv.org|Jan 28, 2007

Advanced Statistical Methods and Models参考文献 7被引用 6

一句话总结

本文在对称条件下建立了霍特林 $T^2$ 检验的精确概率不等式，表明 $n^{1/2}R$（其中 $R^2 = T^2/(1+T^2)$）的分布被一个 $ρ_d$-分布 stochastically 支配，且统一有界常数为 $2e^3/9$。结果将经典渐近卡方近似扩展至正交对称下的有限样本情形，提供精确不等式而非极限定理，并提出一个新颖的单调性结果：当 $d \to \infty$ 时，$χ_d - (d-1)^{1/2}$ 在分布上递减收敛至 $N(0, 1/2)$。关键贡献在于对尾部概率给出了非渐近、精确的界，优于以往的保守近似。

ABSTRACT

We consider Hotelling's T^2 statistic for an arbitrary d-dimensional sample. If the sampling is not too deterministic or inhomogeneous, then under zero means hypothesis, T^2 tends to χ^2_d in distribution. We show that a test for the orthant symmetry condition introduced by Efron can be constructed which does not essentially differ from the one based on χ^2_d and at the same time is applicable not only for large random homogeneous samples but for all multidimensional samples without exceptions. The main assertions have the form of inequalities, not that of limit theorems; these inequalities are exact representing the solutions to certain extremal problems. Let us also mention an auxiliary result which itself may be of interest: χ_d-(d-1)^{1/2} decreases in distribution in d to its limit N(0,1/2).

研究动机与目标

• 将霍特林 $T^2$ 检验的经典渐近分布结果推广至对称条件下的有限样本、非渐近设置。
• 在所有样本大小和维度下，建立 $T^2$ 和 $R^2$ 的精确概率不等式，而不仅限于渐近情形。
• 在正交对称条件下，证明 $n^{1/2}R$ 的尾部概率被统一有界为 $2e^3/9$ 倍的标准正态尾部概率。
• 将伊顿对 Rademacher 和的不等式推广至对称随机变量的二次型，扩展其在 $T^2$ 类统计量中的适用性。
• 展示 $χ_d - (d-1)^{1/2}$ 的分布单调性，表明当 $d \to \infty$ 时，其在分布上递减收敛至 $N(0, 1/2)$。

提出的方法

• 本文通过正则化引入了 $T^2$ 和 $R^2$ 的新定义：$T^2 = \lim_{\epsilon \downarrow 0} \overline{X}(C + \epsilon I)^{-1}\overline{X}^T$，确保即使 $C$ 奇异时也存在。
• 采用正交对称性条件（Efron, 1969）作为关键结构假设，在此条件下 $T^2$ 的分布被 $χ_d^2$ stochastically 支配。
• 对所有凸函数 $f \in C^{2}_{\text{conv}}$，证明了主要不等式 $\mathbb{E}[f(n^{1/2}R)] \leq \mathbb{E}[f(\chi_d)]$，将伊顿早期针对单项式的结果推广至所有具有凸二阶导数的凸函数。
• 证明依赖于随机单调性和似然比单调性，特别是通过函数 $\Lambda_r(u)$ 及其微分不等式所导出的界。
• 一个关键辅助结果是：当 $d \to \infty$ 时，$\chi_d - (d-1)^{1/2}$ 在分布上递减收敛至 $N(0, 1/2)$，该结果通过似然比单调性证明。
• 本文使用归纳法与微分分析来界定比值 $\Lambda_r(u)$，从而在尾部不等式中确立了最优常数 $2e^3/9$。

实验结果

研究问题

• RQ1 霍特林 $T^2$ 的经典渐近 $χ_d^2$ 近似能否在对称条件下被一个精确的非渐近不等式所取代？
• RQ2 是否存在最佳可能的统一常数 $c$，使得对所有 $x \geq 0$，有 $\mathbb{P}(n^{1/2}R \geq x) \leq c \cdot \mathbb{P}(\chi_d \geq x)$？
• RQ3 当 $d$ 增加时，$χ_d - (d-1)^{1/2}$ 的分布是否在分布上递减，且是否收敛至 $N(0, 1/2)$？
• RQ4 伊顿对 Rademacher 和的不等式能否推广至对称随机变量的二次型，如 $T^2$ 中出现的情形？
• RQ5 不等式 $\mathbb{P}(S_n \geq x) < \frac{2e^3}{9} \cdot \frac{\varphi(x)}{x}$ 对所有 $x > 0$ 是否严格成立，且对所有对称 $S_n$ 均成立？

主要发现

• 对所有 $f \in C^{2}_{\text{conv}}$，不等式 $\mathbb{E}[f(n^{1/2}R)] \leq \mathbb{E}[f(\chi_d)]$ 成立，将伊顿的结果从单项式推广至所有具有凸二阶导数的凸函数。
• 尾部界 $\mathbb{P}(n^{1/2}R \geq x) < \frac{2e^3}{9} \cdot \mathbb{P}(\chi_d \geq x)$ 是精确的，常数 $2e^3/9 \approx 4.46$ 为最优。
• 对所有 $x > 0$，不等式 $\mathbb{P}(S_n \geq x) < \frac{2e^3}{9} (1 - \Phi(x)) < \frac{2e^3}{9} \cdot \frac{\varphi(x)}{x}$ 成立，证明了伊顿对对称 Rademacher 和的猜想。
• $\chi_d - (d-1)^{1/2}$ 的分布随 $d$ 增加而在分布上递减，收敛至 $N(0, 1/2)$，这是新颖的单调性结果。
• 不等式 $\mathbb{P}(S_n \geq x) < \frac{2e^3}{9} \cdot \frac{\varphi(x)}{x}$ 对所有 $x > 0$ 成立，且常数 $2e^3/9$ 无法改进。
• 本文证明了 $\Lambda_r(u)$ 在 $u \geq 0$ 上的最大值严格小于 $2e^3/9$，从而确认了尾部不等式中该界的精确性。