[论文解读] Linear-Quadratic Optimal Control Problems for Mean-Field Stochastic Differential Equations --- Time-Consistent Solutions
本文针对具有确定系数的平均场随机微分方程中的线性二次最优控制问题,提出了时间一致的解法。通过变分法与多人微分对策,推导出开环与闭环均衡解,建立了闭环解的对称Riccati方程组,并利用Volterra积分方程与基本矩阵分析,证明了解的存在性与唯一性。
Linear-quadratic optimal control problems are considered for mean-field stochastic differential equations with deterministic coefficients. Time-inconsistency feature of the problems is carefully investigated. Both open-loop and closed-loop equilibrium solutions are presented for such kind of problems. Open-loop solutions are presented by means of variational method with decoupling of forward-backward stochastic differential equations, which lead to a Riccati equation system lack of symmetry. Closed-loop solutions are presented by means of multi-person differential games, the limit of which leads to a Riccati equation system with a symmetric structure.
研究动机与目标
- 解决具有确定系数的平均场随机微分方程中线性二次最优控制问题的时间不一致性。
- 开发时间一致的开环与闭环均衡解,避免标准LQ控制中常见的动态不一致性。
- 通过N人微分对策的极限,建立闭环解的对称Riccati方程组。
- 利用Volterra积分方程与基本矩阵分析,证明所推导Riccati系统的解的存在性与唯一性。
- 以Riccati方程与Lyapunov型方程的矩阵解表示均衡控制与值函数的显式反馈形式。
提出的方法
- 应用变分法,解耦正倒向随机微分方程(FBSDEs),以推导开环均衡解。
- 通过N人微分对策的极限推导闭环均衡解,导出对称Riccati方程组。
- 引入双参数Riccati系统(Γ(s,t), Γ̂(s,t))以表示闭环解的对称结构。
- 建立离散逼近(Δ)到连续解的收敛性,通过Lipschitz连续性与有界性证明ΘΔ对Θ的统一收敛。
- 利用基本矩阵Φ(s;t)将闭环形式的状态过程表示出来,实现显式反馈控制表示。
- 通过将两个解的差值转化为具有连续核的线性齐次Volterra积分方程,证明Riccati解的唯一性。
实验结果
研究问题
- RQ1如何通过均衡解解决平均场SDE中线性二次最优控制问题的时间不一致性?
- RQ2刻画平均场LQ控制中闭环均衡解的Riccati方程组具有何种结构?
- RQ3N人微分对策的极限如何在平均场设定下导出对称Riccati系统?
- RQ4在该时间不一致框架下,确保均衡解存在性与唯一性的条件是什么?
- RQ5均衡控制能否表示为与初始对(t,x)无关的状态反馈形式?这与Riccati解有何关联?
主要发现
- 闭环均衡解由对称Riccati方程组(Γ(s,t), Γ̂(s,t))刻画,其为N人微分对策极限的自然结果。
- 均衡控制具有状态反馈形式:u*(s) = -Θ(s)X*(s),其中Θ(s)由对称Riccati方程组的解导出。
- 值函数显式表示为V(t,x) = ⟨P(t)x, x⟩,其中P(t) = Γ(t,t),确保最优代价的二次表示。
- Riccati系统的解存在且唯一,其证明基于转化为具有连续核的线性齐次Volterra积分方程。
- 离散逼近(Δ)对连续解的收敛性在时间上一致成立,且当∥Δ∥ → 0时,有∥ΘΔ(s) - Θ(s)∥ → 0。
- 基本矩阵Φ(s;t)满足由闭环动态驱动的随机微分方程,从而实现显式解表示X*(s) = Φ(s;t)x。
更好的研究,从现在开始
从阅读论文到最终审阅,大幅缩短您的研究时间。
无需绑定信用卡
本解读由 AI 生成,并经人工编辑审核。