WikiEdge:ArXiv-2409.07219v1
本文的基本信息如下：
- 标题：On time-inconsistent extended mean-field control problems with common noise
- 中文标题：时间不一致的具有共同噪声的扩展均值场控制问题研究
- 发布日期：2024-09-11T12:19:52+00:00
- 作者：Zongxia Liang, Xiang Yu, Keyu Zhang
- 分类：math.OC
- 原文链接：http://arxiv.org/abs/2409.07219v1
摘要：本文讨论了一类在非指数折现下存在共同噪声的时间不一致均场控制（MFC）问题，其中McKean-Vlasov动力学的系数依赖于状态和控制的条件联合分布。我们研究了这些扩展MFC问题的闭环时间一致均衡策略，并提供了其表征的充分必要条件。此外，我们推导了一个主方程系统，为我们的问题提供了等价表征。然后，我们将这些结果应用于时间不一致的线性二次（LQ）MFC问题，利用非局部Riccati系统的解来表征均衡策略。为了说明这些发现，提出了两个金融应用。最后，还讨论了一个非LQ的例子，其中闭环均衡策略可以被明确表征和验证。
章节摘要
本文研究了一类具有共同噪声的时变不一致的均场控制（MFC）问题，这类问题在非指数折扣下存在，其中McKean-Vlasov动态的系数依赖于状态和控制的联合条件分布。我们探讨了这些扩展MFC问题的闭环时变一致平衡策略，并为这些策略提供了一个充分必要条件。此外，我们推导出了一个主方程系统，为我们的问题提供了等价的描述。然后我们将这些结果应用于时变不一致的线性二次（LQ）MFC问题，以非局部Riccati系统的解来表征平衡策略。为了说明这些发现，我们提出了两个金融应用的例子。最后，还讨论了一个非LQ的例子，其中闭环平衡策略可以明确地表征和验证。
- 引言：介绍了均场控制（MFC）问题及其与均场博弈（MFG）的联系，以及MFC问题在不同背景下的处理方法。讨论了时间一致性问题，并提出了本文研究的动机和贡献。
- 问题描述：定义了符号和预备知识，包括集合和函数、积分和概率、Wasserstein空间中的微分等。提出了受控条件McKean-Vlasov SDE，并对其系数进行了假设。
- 闭环平衡策略的特征：给出了闭环策略的充分必要条件，并推导出了主方程系统。证明了在一定条件下，主方程系统提供了平衡策略和值函数的等价描述。
- 时变不一致的LQ扩展MFC问题：专注于LQ类型的扩展MFC问题，并提供了主方程系统解的存在性。讨论了两个金融应用的例子，包括条件均值-方差投资组合选择和具有共同噪声的银行系统风险模型。
- 非LQ MFC问题的例子：研究了一个非LQ MFC问题，其中主方程系统可以求解，闭环平衡策略可以明确地表征和验证。
- 技术证明：提供了前面章节中一些主要结果的详细技术证明。
研究背景
这篇文献的背景主要集中在以下几个方面：
- 均场控制（Mean Field Control, MFC）问题的重要性：
- 均场控制问题，或称为McKean-Vlasov动力学的最优控制问题，近年来因其在多个领域的广泛应用和均场理论的新进展而受到越来越多的关注。
- 与均场博弈（Mean Field Game, MFG）问题相比，均场控制问题考虑的是合作情形，其中所有参与者共同优化社会最优解，从而实现社会规划者的最优控制。
- 时间不一致性问题：
- 在现实生活中，一个决策者可能会偏离之前认为最优的决策，导致时间不一致的行为。例如，当成本函数涉及非指数折扣时，决策过程本质上是时间不一致的。
- 为了解决时间不一致性问题，通常采用时间一致规划下的个人间均衡方法，要求决策者考虑未来自我的行为，并通过博弈论思维寻求控制策略，以确保所选策略的时间一致性。
- 共同噪声下的均场控制问题：
综上所述，这篇文献的背景强调了在均场控制领域中对时间不一致问题的研究，以及在共同噪声影响下的均场控制问题的复杂性。作者提出了一种新的研究方法，旨在为这类问题提供闭环均衡策略的描述和验证。
问题与动机
作者面对的是时间不一致的均场控制（MFC）问题，特别是在存在共同噪声和非指数折扣的情况下。具体问题包括：
- 时间一致性问题：在非指数折扣下，决策制定本质上是时间不一致的，即今天确定的最优控制可能在未来不再是最优的。
- 均场控制问题的复杂性：在均场控制问题中，需要考虑所有代理（agents）共同优化社会最优解，这增加了问题的复杂性。
- 均场模型中的共同噪声影响：在均场模型中，代理间的交互通过联合状态-控制条件法则依赖性发生，这使得问题更加复杂。
研究方法
这篇论文的工作方法主要围绕解决时变不一致的扩展均场控制问题，特别是那些在共同噪声影响下、非指数折扣的条件下的问题。以下是这部分的主要内容：
- 时变不一致性（Time-Inconsistency）：
- 论文首先定义了时变不一致性的概念，即在连续时间决策框架下，一个在当前被认为是最优的控制策略，在未来可能不再是最优的。
- 扩展均场控制（Extended Mean-Field Control， MFC）：
- 研究了一类在共同噪声影响下的MFC问题，这些问题的特点是状态和控制的系数依赖于状态和控制的条件联合分布。
- 闭环时间一致性均衡策略（Closed-Loop Time-Consistent Equilibrium Strategies）：
- 论文提出了闭环时间一致性均衡策略的概念，并为这些扩展MFC问题提供了一个充分必要条件，用以表征这些策略。
- 主方程系统（Master Equation System）：
- 导出了一个主方程系统，该系统为问题提供了一个等价的表征，并且可以用来推导出闭环均衡策略和相应的价值函数。
- 线性二次型（Linear Quadratic， LQ）MFC问题：
- 将上述结果应用于时变不一致的LQ MFC问题，并以非局部Riccati方程系统的形式表征了均衡策略。
- 金融应用案例（Financial Applications）：
- 通过两个金融应用案例，即条件均值-方差投资组合选择和带有共同噪声的银行系统性风险模型，来说明理论结果，并讨论了得到的均衡策略的金融含义。
- 非LQ型MFC问题（Non-LQ MFC Problem）：
- 研究了一个非LQ MFC问题，其中主方程系统可以被求解，闭环均衡策略可以被明确表征和验证。
研究结论
根据提供的文献内容，这篇论文的主要结论可以概括如下：
- 时间一致性均衡策略的刻画：论文针对带有共同噪声的时变不一致均场控制问题，提出了闭环时间一致性均衡策略，并给出了这类策略的特征化条件。
- 主方程系统：研究者推导出了一个主方程系统，该系统为均场模型中的闭环均衡策略和相应的价值函数提供了等价的刻画。
- 非局部Riccati系统的建立：在时变不一致线性二次型均场控制问题的框架下，论文建立了一个非局部Riccati方程系统，并证明了该系统解的存在性。
- 金融应用实例：通过两个金融应用实例——条件均值-方差投资组合选择和带有共同噪声的银行间系统性风险模型，论文展示了理论结果的应用，并讨论了得到的均衡策略的金融含义。
- 非线性二次型均场控制问题：论文还研究了一个非线性二次型均场控制问题，其中主方程系统可以被求解，闭环均衡策略可以被明确地刻画和验证。
术语表
这篇文章的术语表如下：
- 均场控制（Mean Field Control）：均场控制问题考虑在均场（或McKean-Vlasov）动力学下的最优控制问题，其中控制过程影响状态过程的分布。
- 时间不一致性（Time-Inconsistency）：当一个决策者在不同时间点可能做出不同的最优选择，即使初始条件和目标函数未发生变化，这种现象称为时间不一致性。
- 共同噪声（Common Noise）：在多智能体系统中，如果存在一个影响所有智能体的随机因素，这个随机因素被称为共同噪声。
- 非指数折扣（Non-exponential Discount）：在决策过程中，未来收益或成本的当前价值不是通过指数函数来计算的折扣方式。
- 闭环策略（Closed-loop Strategy）：闭环策略是指控制规则依赖于当前状态的策略，它不需要知道整个状态的历史路径。
- 随机最大原则（Stochastic Maximum Principle）：随机最大原则是解决受随机扰动影响的最优控制问题的一种方法，它将随机过程的动态与最优控制理论结合起来。
- 动态规划原理（Dynamic Programming Principle）：动态规划原理是一种解决多阶段决策过程最优化问题的方法，它通过将问题分解为一系列简单的子问题来逐步求解。
- Wasserstein空间（Wasserstein Space）：Wasserstein空间是概率测度构成的度量空间，其中的度量是基于概率测度之间的Wasserstein距离。
- 非局部Riccati方程（Non-local Riccati Equation）：非局部Riccati方程是一类包含状态和控制的动态系统的方程，其特点是方程中包含对状态和控制的非局部（即在整个时间区间上）依赖。
- 主方程系统（Master Equation System）：主方程系统是描述均场控制问题中闭环均衡策略和价值函数的一组方程，它提供了问题的一个等价描述。