[论文解读] Entropies, convexity, and functional inequalities

Djalil Chafaï|arXiv (Cornell University)|Nov 6, 2002

Mathematical Approximation and Integration参考文献 28被引用 105

一句话总结

本文提出了一套统一的 $Φ$-Sobolev 不等式框架，通过 $Φ$-熵将 Poincaré 不等式和对数 Sobolev 不等式进行推广，证明了其在张量积、卷积和有界扰动下的稳定性。核心贡献在于，在 $Φ$ 的凸性假设下，识别出一大类测度——如超收缩扩散过程、对数凹测度、Wiener 空间和泊松空间——使得这些不等式成立，其证明基于凸分析的基本原理。

ABSTRACT

Our aim is to provide a short and self contained synthesis which generalise and unify various related and unrelated works involving what we call Phi-Sobolev functional inequalities. Such inequalities related to Phi-entropies can be seen in particular as an inclusive interpolation between Poincare and Gross logarithmic Sobolev inequalities. In addition to the known material, extensions are provided and improvements are given for some aspects. Stability by tensor products, convolution, and bounded perturbations are addressed. We show that under simple convexity assumptions on Phi, such inequalities hold in a lot of situations, including hyper-contractive diffusions, uniformly strictly log-concave measures, Wiener measure (paths space of Brownian Motion on Riemannian Manifolds) and generic Poisson space (includes paths space of some pure jumps Levy processes and related infinitely divisible laws). Proofs are simple and relies essentially on convexity. We end up by a short parallel inspired by the analogy with Boltzmann-Shannon entropy appearing in Kinetic Gases and Information Theories.

研究动机与目标

• 通过 $Φ$-Sobolev 不等式的单一框架，统一并推广 Poincaré 不等式和对数 Sobolev 不等式。
• 建立 $Φ$-Sobolev 不等式在张量积、卷积和测度有界扰动下的稳定性。
• 在最小凸性假设下，识别出一大类测度——如超收缩扩散过程、均匀对数凹测度、Wiener 空间和泊松空间——使得这些不等式成立。
• 阐明 $Φ$-熵在泛函不等式中的作用，并与统计力学和信息论中 Boltzmann-Shannon 熵的类比关系。

提出的方法

• 将 $Φ$-熵定义为 $\mathbf{Ent}_{\mu}^{\Phi}(f) = \int \Phi(f)\,d\mu - \Phi(\int f\,d\mu)$，推广方差和 Shannon 熵。
• 利用无穷小生成元 $\mathbf{L}$ 和 carré du champ $\Gamma$ 描述马尔可夫过程及其相关的 Dirichlet 型形式。
• 在 $\Phi$ 凸性假设下，建立形如 $\mathbf{Ent}_{\mu}^{\Phi}(f) \leq C \cdot \int \Gamma(f,f)\,d\mu$ 的 $Φ$-Sobolev 不等式。
• 通过乘积测度结构证明张量积下的稳定性，并利用对数凹性和凸性证明卷积下的稳定性。
• 将该方法应用于具体情形：超收缩扩散过程、黎曼流形上的 Wiener 空间，以及纯跳跃 Lévy 过程的泊松空间。
• 与 Boltzmann-Shannon 熵建立类比，强调共轭凸函数和最大熵原理的作用。

实验结果

研究问题

• RQ1 在何种 $\Phi$ 条件下，$\u03a6$-Sobolev 不等式在 Poincaré 和对数 Sobolev 不等式之间插值？
• RQ2 $\u03a6$-Sobolev 不等式在底层测度的张量积、卷积和有界扰动下如何表现？
• RQ3 在何种温和凸性假设下，哪些随机过程——如扩散过程、布朗运动或 Lévy 过程——允许 $\u03a6$-Sobolev 不等式成立？
• RQ4 $\u03a6$-熵在多大程度上继承了 Shannon 熵和 Boltzmann-Shannon 熵的性质，特别是子可加性和最大熵原理？

主要发现

• 在 $\Phi$ 的温和凸性假设下，$\u03a6$-Sobolev 不等式对所有均匀严格对数凹测度成立，推广了已知结果。
• 不等式在张量积下保持稳定：若其在单个分量上成立，则在乘积测度下以相同常数成立。
• 在 Wiener 空间（黎曼流形上的布朗运动）上，$\u03a6$-Sobolev 不等式在相同的 $\Phi$ 凸性假设下成立。
• 该不等式在与纯跳跃 Lévy 过程相关的泊松空间上也成立，将框架扩展至跳跃过程。
• $\Phi$ 为凸函数时，$\u03a6$-熵泛函在其变量上是凸的，且当 $\Phi$ 严格凸时，当且仅当 $f$ 几乎处处为常数 $\mu$ 时，该泛函为零。
• 该框架恢复了最大熵原理：在线性约束下，$\u03a6$-熵 $\mathbf{H}^{\Phi}$ 在 Boltzmann-Gibbs 型测度处取得最大值，其密度由 $\widehat{\Phi}$ 的 Young 共轭的逆导数给出。