[论文解读] Expected Supremum Representation of the Value of a Singular Stochastic Control Problem

Luis H. R. Alvarez E., Pekka Matomäki|arXiv (Cornell University)|Aug 12, 2015

Capital Investment and Risk Analysis参考文献 30被引用 3

一句话总结

本文将奇异随机控制问题中的值函数表示为受控扩散过程导出函数的期望上确界。通过将恒定边界反射策略的值等同于未知函数在运行上确界上的期望上确界，作者显式推导出表示函数，并证明最优性对应于该函数导数为零的阈值——与标准的C²-光滑性条件完全一致。

ABSTRACT

We consider the problem of representing the value of singular stochastic control problems of linear diffusions as expected suprema. Setting the value accrued from following a standard reflection policy equal with the expected value of a unknown function at the running supremum of the underlying is shown to result into a functional equation from which the unknown function can be explicitly derived. We also consider the stopping problem associated with the considered singular stochastic control problem and present a similar representation as an expected supremum in terms of characteristics of the control problem.

研究动机与目标

• 将奇异随机控制问题的值表示为底层扩散过程运行上确界函数的期望上确界。
• 在线性扩散设定下显式推导表示函数，实现闭式分析。
• 建立奇异控制中光滑性条件与表示函数导数为零之间的联系。
• 将该表示方法扩展至关联的最优停止问题，表明其具有类似的期望上确界结构。

提出的方法

• 将恒定边界反射策略的值表述为以恒定边界折现的收益流积分。
• 利用已知的首达时分布，表达在指数分布随机时间下运行上确界未知函数的期望值。
• 将两个表达式等同，形成一个函数方程，从而显式确定表示函数。
• 利用扩散过程在0处吸收时上确界的已知分布，计算期望上确界项。
• 通过利用线性扩散中权函数和速度测度的性质，求解所得恒等式，推导出表示函数。
• 验证最优边界恰好对应于表示函数导数为零的点，与标准的C²-光滑性条件一致。

实验结果

研究问题

• RQ1 奇异随机控制问题的值能否表示为底层过程运行上确界函数的期望上确界？
• RQ2 在具有恒定反射边界的线性扩散设定下，表示函数的显式形式是什么？
• RQ3 反射边界的最优性是否对应于表示函数的某一特定性质，例如其导数为零？
• RQ4 奇异控制问题的表示函数与关联最优停止问题的值函数有何关系？
• RQ5 能否为奇异控制问题中的边际值函数建立类似的期望上确界表示？

主要发现

• 无论反射边界是否最优，奇异控制问题的表示函数在边界处均趋于零，这与最优停止问题形成对比。
• 奇异控制问题中的最优性恰好出现在表示函数导数为零的阈值处，该点与标准的C²-光滑性条件在边界处一致。
• 对于包含幂函数和指数成分的线性扩散类，表示函数以闭式显式推导得出。
• 对于最优边界，表示函数在整个状态空间上保持非负；而次优边界则导致函数变为负的区域。
• 在特定条件下，为边际值函数建立了类似的期望上确界表示，其对应于关联最优停止问题的值。
• 控制问题与停止问题表示函数之间的联系，解释了边界表征所需不同正则性条件的原因。