[论文解读] A solvable two-dimensional singular stochastic control problem with non convex costs

Tiziano De Angelis, Giorgio Ferrari+1 more|arXiv (Cornell University)|Nov 10, 2014

Stochastic processes and financial applications参考文献 16被引用 5

一句话总结

本文为一个具有非凸成本的二维奇异随机控制问题提供了完整的解析解，其背景源于布朗运动价格下的电力储能问题。推导出了价值函数、最优控制及自由边界的显式表达式——包含两个单调、不连续的排斥型边界，且在恒定部分满足光滑匹配条件，全面刻画了在终端成本和有限容量约束下的最优电池充电策略。

ABSTRACT

In this paper we provide a complete theoretical analysis of a two-dimensional degenerate non convex singular stochastic control problem. The optimisation is motivated by a storage-consumption model in an electricity market, and features a stochastic real-valued spot price modelled by Brownian motion. We find analytical expressions for the value function, the optimal control and the boundaries of the action and inaction regions. The optimal policy is characterised in terms of two monotone and discontinuous repelling free boundaries, although part of one boundary is constant and the smooth fit condition holds there.

研究动机与目标

• 为具有非凸成本的二维退化奇异随机控制问题提供完整的理论解。
• 分析在由布朗运动建模的随机现货价格电力市场中的最优电池充电策略。
• 在分析上刻画价值函数、最优控制以及动作与非动作区域边界的结构。
• 通过在布朗运动下求解问题，解决先前在Ornstein-Uhlenbeck动力学下未解决的开放案例。
• 在非凸成本框架下，建立自由边界的结构，包括不连续性与光滑匹配条件。

提出的方法

• 通过哈密顿-雅可比-贝尔曼（HJB）方程，将问题表述为具有状态依赖梯度约束的有限燃料奇异随机控制问题。
• 将现货价格建模为一维布朗运动，允许取负值，以反映现实电力市场的动态特征。
• 将最优控制识别为具有两个自由边界的奇异控制：一个恒定边界与一个不连续边界，且在恒定部分满足光滑匹配条件。
• 采用具有d.c.（凸函数之差）结构的成本泛函，以体现总期望成本的非凸性。
• 结合黏性解方法与不同区域（非动作区、动作区、终端控制区）中价值函数的显式构造，实现求解。
• 通过拉普拉斯变换及其逆变换，推导出价值函数及其导数的显式表达式，涉及特殊函数与边界参数。

实验结果

研究问题

• RQ1 在具有非凸成本与布朗运动价格动态的二维奇异随机控制问题中，最优控制策略的结构是怎样的？
• RQ2 动作与非动作区域的自由边界如何表现？光滑匹配条件在何种条件下成立？
• RQ3 对于此类非凸问题，价值函数与最优控制能否以闭式表达显式刻画？
• RQ4 非凸成本泛函如何影响奇异随机控制与最优停止问题之间的关联？
• RQ5 有限电池容量约束对最优充电策略与边界结构有何影响？

主要发现

• 价值函数被显式刻画为分段定义函数，其在非动作区、动作区与终端控制区具有不同的表达式。
• 最优控制通过两个自由边界实现：一个恒定边界与一个不连续边界，后者单调且具有排斥特性。
• 光滑匹配条件在恒定边界段成立，此时价值函数的导数与控制的边际成本相匹配。
• 自由边界通过包含反拉普拉斯变换与特殊函数的非线性方程组求解，显式依赖于初始库存水平 $ c $。
• 该解证实，d.c.结构的成本泛函导致复杂的边界行为，且仅在特定参数范围内与最优停止问题存在关联。
• 分析表明，由于控制方向与扩散方向正交，该问题具有退化性，但解在该结构挑战下依然成立。