[論文レビュー] Non-parametric estimation in a semimartingale regression model. Part 1. Oracle Inequalities

Victor Konev, Serguei Pergamenchtchikov|ArXiv.org|Sep 17, 2009

Stochastic processes and financial applications参考文献 13被引用数 5

ひとこと要約

本稿は、一般の半マルティンググールのノイズを伴う連続時間回帰モデルにおける周期的関数の非パラメトリック推定のためのモデル選択手順を提案する。ノイズ構造に対する最小限の仮定の下で、拡散成分およびジャンプ成分を含む広範なノイズ過程のクラスにおいて、最適な推定性能を保証する鋭い非漸近的オラクル不等式を確立する。

ABSTRACT

This paper considers the problem of estimating a periodic function in a continuous time regression model with a general square integrable semimartingale noise. A model selection adaptive procedure is proposed. Sharp non-asymptotic oracle inequalities have been derived.

研究の動機と目的

• 一般の平方可積分半マルティングールのノイズを伴う連続時間回帰モデルにおける周期的信号の適応的推定手順の開発。
• 未知の信号の滑らかさおよびノイズ特性に基づいて推定リスクを定量化する非漸近的オラクル不等式の導出。
• 信号の滑らかさやノイズ分布の事前知識がなくても、最適な収束速度を達成するように提案手順を保証すること。
• 従来の非パラメトリック推定理論を、混合拡散およびジャンプ成分を有する半マルティングール駆動モデルに拡張すること。
• 未知の正則性およびノイズ構造に適応する理論的裏付けに基づく、モデル選択に基づく手法の提供。

提案手法

• 著者たちは、信号が1周期の周期関数であり、ノイズが一般の平方可積分半マルティングールである連続時間回帰モデルを検討する。
• 半マルティングールのノイズに関する確率積分を定義し、条件 $\mathbb{E}[I_n^2(f)] \leq \sigma^* \int_0^n f^2(s) ds$ を用いてモーメントの上限を確立する。
• 複雑さパラメータでインdex付けられた推定量の族に基づき、データ駆動型ペナルティ関数を用いたモデル選択手順を構築する。
• 周期的信号のフーリエ基底展開に依存し、異なる正則性仮定下でのフーリエ係数の性質を活用する。
• 確率積分および局所マルティングールの上限の非漸近的解析を通じて、バイアス・バリアンスのトレードオフを制御することで、鋭いオラクル不等式を導出する。
• ノイズ過程の上限および複合ポアソン成分のモーメント推定を含む分析により、可積分性および収束性を保証する。

実験結果

リサーチクエスチョン

• RQ1 半マルティングール回帰モデルにおける周期的信号を伴う非パラメトリック推定に対して、非漸近的オラクル不等式を確立できるか？
• RQ2 未知の信号の滑らかさおよび未知のノイズ特性に適応するモデル選択手順をどのように設計できるか？
• RQ3 ノイズが一般の半マルティングール（拡散成分およびジャンプ成分を含む）である場合、周期的関数を推定する際の最適な収束速度は何か？
• RQ4 信号の $L^2$-ノルムおよびノイズ強度 $\sigma^*$ に基づいて、推定リスクをどの程度まで抑えられるか？
• RQ5 異なる正則性条件下で、信号のフーリエ係数は推定手順の性能にどのように影響を与えるか？

主な発見

• 本稿は、周期的信号および半マルティングールノイズのクラスに一様に推定リスクを制御する鋭い非漸近的オラクル不等式を確立する。
• 提案されたモデル選択手順は、信号の滑らかさやノイズ分布の事前知識がなくても、最適な収束速度を達成する。
• 微分可能な周期的信号 $S$ に対して、$\sup_{l \geq 2} l \sum_{j=l}^\infty \theta_j^2 \leq 4 |\dot{S}|_1^2$ が成り立つ。これは推定手順におけるバイアスの上限を求める上で重要である。
• 確率積分 $I_n(f) = \int_0^n f_s d\xi_s$ は期待値が0で、分散が $\sigma^* \int_0^n f^2(s) ds$ で有界であるため、推定量の安定性が保証される。
• 分析により、ノイズ過程 $\xi_t = \varrho_1 w_t + \varrho_2 z_t$（$z_t$ は複合ポアソン過程）が、オラクル不等式が成立するための必要なモーメント条件を満たすことが確認された。
• モーメント推定（$\mathbb{E}|Y_1|^3$ および $\mathbb{E}N_n^3$ を含む）により、混合ノイズタイプ（連続的拡散および不連続的ジャンプ成分）に対しても、手法のロバスト性が示された。