[論文レビュー] Expected Supremum Representation of the Value of a Singular Stochastic Control Problem

Luis H. R. Alvarez E., Pekka Matomäki|arXiv (Cornell University)|Aug 12, 2015

Capital Investment and Risk Analysis参考文献 30被引用数 3

ひとこと要約

本稿では、特異確率的制御問題における価値関数の新たな表現を確立する。これは、制御された拡散過程の導関数関数の期待上界としての表現である。定常境界反射方策の価値を未知関数の期待上界に等置することで、著者らは表現関数を明示的に導出し、最適性がこの関数の微分が消える閾値に対応することを示している。これは標準的なC²滑らかさ条件と一致する。

ABSTRACT

We consider the problem of representing the value of singular stochastic control problems of linear diffusions as expected suprema. Setting the value accrued from following a standard reflection policy equal with the expected value of a unknown function at the running supremum of the underlying is shown to result into a functional equation from which the unknown function can be explicitly derived. We also consider the stopping problem associated with the considered singular stochastic control problem and present a similar representation as an expected supremum in terms of characteristics of the control problem.

研究の動機と目的

• 基礎となる拡散過程の走査上界関数の関数として、特異確率的制御問題の価値を期待上界として表現すること。
• 線形拡散設定において表現関数を明示的に導出し、閉形式解析を可能にすること。
• 特異制御における滑らかさ条件と、表現関数の微分が消えることとの関係を確立すること。
• 関連する最適停止問題への表現を拡張し、類似する期待上界構造を示すこと。

提案手法

• 定常境界反射方策の価値を、定常境界で割引された収益フローの積分として定式化する。
• 既知の第一通過分布を用いて、指数分布に従う確率的時間における走査上界の未知関数の期待値を表現する。
• 二つの表現を等置することで、表現関数を明示的に決定する関数方程式を構築する。
• 0で停止する拡散過程の上界の既知の分布を用いて、期待上界項を計算する。
• 線形拡散におけるスケール関数およびスピード測度の性質を活用して、得られた恒等式を解き、表現関数を導出する。
• 最適境界が表現関数の微分が消える点に一致することを検証し、標準的なC²滑らかさ条件と整合することを確認する。

実験結果

リサーチクエスチョン

• RQ1 特異確率的制御問題の価値は、基礎となる過程の走査上界関数の関数として期待上界として表現可能か？
• RQ2 定常反射境界を持つ線形拡散設定において、表現関数の明示的形態は何か？
• RQ3 反射境界の最適性は、表現関数の特定の性質（例えば微分が消えること）に対応するか？
• RQ4 特異制御問題の表現関数は、関連する最適停止問題の価値関数とどのように関係するか？
• RQ5 特異制御問題における限界価値関数に対しても、類似の期待上界表現を確立できるか？

主な発見

• 反射境界が最適でない場合でも、特異制御問題の表現関数は境界で消える。これは最適停止問題とは対照的である。
• 特異制御問題における最適性は、表現関数の微分が消える閾値に正確に一致する。これは境界をまたいで標準的なC²滑らかさ条件と一致する。
• 指数関数的および累乗成分を含む線形拡散のクラスにおいて、表現関数が閉形式で明示的に導出可能である。
• 最適境界では、表現関数は状態空間全体で非負のまま保たれるが、部分最適境界では関数が負になる領域が生じる。
• 限界価値関数に対しても、ある条件下で関連する最適停止問題の価値関数に対応する類似の期待上界表現が確立された。
• 制御問題と停止問題の表現関数の間の関係は、境界特徴付けに要する正則性条件の相違を説明する。