[论文解读] Extended deterministic mean-field games

Diogo A. Gomes, Vardan Voskanyan|arXiv (Cornell University)|May 12, 2013

Stochastic processes and financial applications参考文献 4被引用 7

一句话总结

本文提出了一种扩展的确定性平均场博弈框架，通过在 $L^q$ 空间中引入随机变量表述，不仅考虑了状态，还纳入了代理人的集体行为。作者使用一种新颖的不动点论证，证明了在一般条件下解的存在性与唯一性，并建立了与主方程的联系，将平均场博弈理论推进至经典表述之外。

ABSTRACT

In this paper, we consider mean-field games where the interaction of each player with the mean-field takes into account not only the states of the players but also their collective behavior, To do so, we develop a random variable framework that is particularly convenient for these problems. We prove an existence result for extended mean-field games and establish uniqueness conditions. In the last section, we consider the Master Equation and discuss properties of its solutions.

研究动机与目标

• 开发一种平均场博弈的随机变量框架，其中代理人的相互作用依赖于个体状态和集体行为。
• 为具有对平均场路径非马尔可夫依赖的扩展平均场博弈系统，建立粘性解与经典解的存在性。
• 在不假设概率测度绝对连续性或解高正则性的情况下，提供唯一性条件。
• 在该新框架下分析主方程，并将其与扩展平均场博弈解联系起来。
• 通过允许哈密顿量和终端成本依赖于平均场路径的时间导数，推广现有结果。

提出的方法

• 将扩展的平均场博弈表述为耦合系统：哈密顿-雅可比方程的哈密顿量依赖于平均场路径 $\mathbf{X}$ 及其导数 $\dot{\mathbf{X}}$，以及 $\mathbf{X}$ 在 $L^q(\Omega; \mathbb{R}^d)$ 中的常微分方程。
• 为哈密顿-雅可比方程采用粘性解框架，确保即使在经典解不存在时也能保证适定性。
• 应用一种新的不动点论证证明存在性，克服了由于 $\dot{\mathbf{X}}$ 依赖导致的常微分方程右端项缺乏局部利普希茨连续性的问题。
• 引入随机变量表述，使集体行为建模成为可能，并支持在该扩展设定下对主方程的分析。
• 通过两种方法建立唯一性：针对经典解采用拉斯利翁-利翁单调性论证，针对粘性解采用基于拉格朗日的最优性条件。
• 推导出两类哈密顿量的显式解：$H = \frac{|p|^2}{2} + \beta p \mathbb{E}[Z] + V(x,X)$ 和 $H = \frac{|\beta \mathbb{E}[Z] + p|^2}{2} + V(x,X)$。

实验结果

研究问题

• RQ1 能否严格表述并求解依赖于平均场时间导数的扩展平均场博弈？
• RQ2 当哈密顿-雅可比方程由于右端项非利普希茨性而缺乏经典解时，何种条件可保证解的存在性？
• RQ3 在不假设概率测度绝对连续性或解高正则性的情况下，如何建立唯一性？
• RQ4 在该扩展框架中，主方程的作用是什么？它与扩展平均场博弈系统解之间有何关系？
• RQ5 能否为有意义的扩展平均场博弈模型类别构造显式解？

主要发现

• 本文证明了粘性解 $u \in C([0,T] \times \mathbb{R}^d; \mathbb{R})$ 和 $C^{1,1}$ 路径 $\mathbf{X} \in C^{1,1}([0,T]; L^q(\Omega; \mathbb{R}^d))$ 存在，且可解耦合的扩展平均场博弈系统 (1)。
• 解 $u$ 在空间上为利普希茨连续，在时间上为拟凹，其显式界通过拉格朗日函数及其导数的格朗沃尔型估计导出。
• 通过两种不同方法建立唯一性：针对经典解采用单调性论证，针对粘性解采用不依赖于概率测度绝对连续性或 $u$ 正则性的拉格朗日基最优性条件。
• 本文提供了两类哈密顿量的显式例子，其解可显式计算，展示了该框架的可计算性。
• 主方程在该框架内被证明是适定的，其解通过命题 3 和 4 与扩展平均场博弈系统相联系。
• 随机变量表述使在不使用倒向-正向随机微分方程的情况下，对由共同噪声引起的代理人行为相关性进行建模成为可能，从而扩展了先前的工作。