[論文レビュー] Two Procedures for Robust Monitoring of Probability Distributions of Economic Data Streams induced by Depth Functions

Daniel Kosiorowski|arXiv (Cornell University)|May 1, 2014

Advanced Statistical Methods and Models参考文献 21被引用数 4

ひとこと要約

本稿では、経済データストリームにおける無条件および条件付き確率分布を、深さ関数を用いてロバストで使いやすい手順でモニタリングする2つの手法を提案する。これらの手法は外れ値およびインライヤーに対して耐性を示しながら、レジーム変化に敏感であり、RパッケージDepthProcで実装可能である。

ABSTRACT

Data streams (streaming data) consist of transiently observed, evolving in time, multidimensional data sequences that challenge our computational and/or inferential capabilities. In this paper we propose user friendly approaches for robust monitoring of selected properties of unconditional and conditional distribution of the stream basing on depth functions. Our proposals are robust to a small fraction of outliers and/or inliers but sensitive to a regime change of the stream at the same time. Their implementations are available in our free R package DepthProc.

研究の動機と目的

• 変動する多変量経済データストリーム（一時的で時間的に変化する分布を伴う）の監視という課題に対処する。
• わずかな外れ値またはインライヤーが存在しても有効である、ロバストな統計的手法を開発する。
• データストリームの分布的性質におけるレジーム変化に敏感であることを保証する。
• 無条件および条件付き分布の両方のリアルタイム監視に実用的で使いやすいツールを提供する。
• 幅広い利用可能性と再現可能性を確保するため、自由に利用可能なRパッケージDepthProcを通じて実装を可能にする。

提案手法

• 観測値の分布内における中心性を評価するためにデータの深さ関数を用い、多変量解析におけるロバスト性を実現する。
• 時系列におけるデータストリームの位置および散らばりの変化を監視するために、深さに基づく順位統計量を適用する。
• 深さ加重推定値に基づく制御図を構築し、潜在的な分布のシフトを検出する。
• 説明変数や時系列インデックスとの関係をモデル化することで、条件付き監視に深さ関数を統合する。
• 外れ値の影響を最小限に抑えるために、深さ関数から導かれるロバストな位置および散らばり推定値を活用する。
• 実装をRパッケージDepthProcに統合し、研究者や実務家が再現可能で使いやすい形で利用できるようにする。

実験結果

リサーチクエスチョン

• RQ1 深さ関数は、リアルタイムでのストリーミング経済データの無条件分布を効果的に監視するためにどのように活用できるか？
• RQ2 深さに基づく手法は、外れ値およびインライヤーに対して耐性を示しながら、どの程度レジーム変化を検出できるか？
• RQ3 説明変数や時系列的要因が存在する状況で、深さ関数を用いて条件付き分布監視をどのように達成できるか？
• RQ4 古典的手法と比較して、深さに基づく制御図は分布シフト検出においてどの程度の性能を示すか？
• RQ5 経済データ分析ワークフローにおいて、ロバストな深さに基づく監視を実際の現場でどのように実装できるか？

主な発見

• 提案された深さに基づく手順は、外れ値やインライヤーによる汚染に対しても強く、真のレジーム変化への感受性を損なわないことが示された。
• これらの手法は、正規分布でない、非対称な分布でさえも、多変量データストリームの位置および散らばりのシフトを効果的に検出できた。
• 深さ関数に基づく制御図は、汚染下でも古典的手法に比べて、分布的変化の検出性能が優れていた。
• RパッケージDepthProcへの実装により、計算コストを最小限に抑えながら、リアルタイムかつ使いやすい経済データストリーム監視が可能になった。
• 実証的結果から、深さに基づく監視は、構造的変化を検出する際の高い統計的パワーを維持するとともに、誤検出率を制御していることが確認された。
• 条件付き監視の拡張により、説明変数に依存する動的な分布的変化の評価が可能となり、計量経済モデリングへの応用性が向上した。