Skip to main content
QUICK REVIEW

[论文解读] On the Sample Complexity of Graphical Model Selection for Non-Stationary Processes

Nguyen Tran, Oleksii Abramenko|arXiv (Cornell University)|Jan 17, 2017
Control Systems and Identification参考文献 51被引用 3
一句话总结

本文建立了从非平稳时间序列数据中进行精确图形模型选择(GMS)所需的理论样本复杂度,其中样本在块之间不相关,但各块的协方差矩阵不同。通过分析基于邻域回归的方法,推导出样本量的充分条件,该条件关键依赖于过程分量之间的最小平均连接强度,从而推广了先前针对i.i.d.和平稳设置的理论。

ABSTRACT

We characterize the sample size required for accurate graphical model selection from non-stationary samples. The observed data is modeled as a vector-valued zero-mean Gaussian random process whose samples are uncorrelated but have different covariance matrices. This model contains as special cases the standard setting of i.i.d. samples as well as the case of samples forming a stationary or underspread (non-stationary) processes. More generally, our model applies to any process model for which an efficient decorrelation can be obtained. By analyzing a particular model selection method, we derive a sufficient condition on the required sample size for accurate graphical model selection based on non-stationary data.

研究动机与目标

  • 表征在数据非平稳但块内i.i.i.d.时,实现可靠图形模型选择所需的最小样本量。
  • 将现有样本复杂度理论——此前局限于i.i.i.d.或平稳过程——扩展至具有时变协方差结构的非平稳过程。
  • 在非平稳抽样下分析基于邻域回归的GMS方法,重点关注基本样本量限制而非计算效率。
  • 证明所需样本量与分量间最小平均连接强度的倒数成正比,提供精确的理论边界。

提出的方法

  • 将非平稳数据建模为向量值零均值高斯过程,块间样本不相关,每一块具有不同的协方差矩阵。
  • 应用去相关变换(如傅里叶变换)将原始时间序列转换为i.i.i.d.样本块,从而可应用i.i.i.d. GMS理论。
  • 使用一种计算上不可行的邻域回归方法,该方法对每个节点与其余所有节点的条件依赖关系进行穷举测试,条件为其余所有节点。
  • 基于块上的线性回归残差平方和定义检验统计量,用于估计条件独立性并推断图结构。
  • 采用基于评分的选择准则,通过比较实际得分与辅助得分来估计邻域大小,其中辅助得分使用合成i.i.i.d.信号以控制假阳性。
  • 在图尔库的真实行人计数数据上验证该方法,使用DFT变换后的数据和分块分析推断条件独立图(CIG)。

实验结果

研究问题

  • RQ1从具有块内协方差变化的非平稳时间序列数据中可靠恢复图形模型结构,所需的最小样本数是多少?
  • RQ2所需样本量如何随底层图形模型中分量间最小平均连接强度的变化而变化?
  • RQ3现有的i.i.i.d. GMS样本复杂度结果能否推广到具有已知去相关变换的非平稳过程?
  • RQ4在非平稳设置下,基于邻域回归的GMS性能如何依赖于块结构和信噪比特性?
  • RQ5模型误设或弱依赖关系对样本复杂度要求有何影响?

主要发现

  • 准确进行图形模型选择所需的样本量与图形模型中分量间最小平均连接强度的平方成反比。
  • 当最小平均连接强度足够大时,准确的GMS可在样本量与i.i.i.d.设置相当或更优的条件下实现。
  • 所推导的理论样本复杂度边界是紧致且可通过计算上不可行的邻域回归方法实现,确立了根本性限制。
  • 该方法可推广至可高效去相关的非平稳过程,如平稳、循环平稳或局部平稳过程。
  • 在真实行人计数数据上的实证验证表明,估计的条件独立图与底层城市道路网络结构高度吻合。
  • 基于评分的邻域选择准则能有效识别真实依赖关系,同时利用合成噪声基线控制假阳性。

更好的研究,从现在开始

从阅读论文到最终审阅,大幅缩短您的研究时间。

无需绑定信用卡

本解读由 AI 生成,并经人工编辑审核。