Optimal control of SPDEs driven by time-space Brownian motion
本文研究由时空布朗运动驱动的随机偏微分方程系统的最优控制问题,应用时空白噪声演算推导出Pontryagin型随机最大值原理的最优性充分与必要条件,并通过线性二次控制和最优收获问题验证了理论结果。
2024-01-02 math.OC
Stochastic control of mean-field SPDEs with jumps
在\textit{partial information}控制的情形下,研究了由布朗运动和独立Poisson随机测度驱动的平均场随机偏微分方程(随机发展方程)的最优控制问题.我们的问题的一个重要的新颖性是由\textit{general mean-field}运营商的介绍,作用于受控状态过程和控制过程。首先,我们制定了充分和必要的最大值原理这种类型的控制。然后证明了这类一般的正、倒向平均场随机偏微分方程解的存在唯一性。最后,我们应用我们的结果,找到明确的最优控制的最优收获问题。
2017-04-11 math.OC
Numerical Methods for Optimal Control Problems with SPDEs
本文研究由 SPDEs 支配的 SLQ 最优控制问题,开发了开环与闭环两种全离散数值方法,分别结合有限元与 Euler 法及 Riccati 方程反馈策略,提供了严格的收敛速度与计算框架。
2024-11-18 math.OC
A stochastic optimal control problem governed by SPDEs via a spatial-temporal interaction operator
在本文中,我们首先引入一个新的时空相互作用算子来描述时空相关的不定常现象。然后,我们考虑一个新的系统的随机最优控制的随机偏微分方程与时空相互作用算子。为了解决这类随机最优控制问题,通过定义一个Hamilton泛函,导出了一个具有时空依赖性的伴随倒向随机偏微分方程,并给出了充分必要的(Pontryagin-Bismut-Bensoussan型)最大值原理.并证明了相应的伴随倒向随机偏微分方程解的存在唯一性。最后,将所得结果应用于研究具有时空不定常现象的种群增长问题。
2020-03-05 math.OC
SPDEs with space interactions and application to population modelling
研究一类新的非局部随机偏微分方程(SPDE)的最优控制问题。SPDE具有空间相互作用,在这个意义上,系统在时间$t$和空间x中的位置的动力学也取决于相邻点的值的空间平均值。这是一个有许多应用的模型,例如人口增长研究和流行病学。证明了一类具有空间相互作用的随机偏微分方程解的存在唯一性,并证明了在一定条件下,当初值为导出了此类系统最优控制的充分必要最大值原理。最后,我们将结果应用于研究流行病的最优疫苗策略问题,通过将人口密度建模为空间平均随机反应扩散方程。
2021-06-30 math.OC
On the existence of optimal controls for SPDEs with boundary-noise and boundary-control
考虑一类带边界噪声和边界控制的热方程的随机最优控制问题。在适当的系数假设下,通过求解相关的随机哈密顿系统,证明了强意义下最优控制的存在性。
2011-10-29 math.OC math.PR
Maximum Principles for Partially Observed Controls of Forward SPDEs and Backward SDEs with Jumps
Auburn University(奥本大学);University of Connecticut(康涅狄格大学);Oak Ridge National Laboratory(橡树岭国家实验室)
本文提出两种最大原理,用于部分观测控制的耦合前向和后向随机偏微分方程与随机微分方程,解决了具有跳跃的SPDE的适定性问题。
2026-03-01 math.OC math.PR
Transposition Approach to Optimal Control of McKean-Vlasov SPDEs
Technische Universität Berlin(柏林工业大学);Freie Universität Berlin(柏林自由大学)
针对系数依赖于状态过程分布的McKean-Vlasov随机偏微分方程,利用尖峰变分法和含Lions导数的伴随倒向随机偏微分方程,建立了非凸控制集下的Pontryagin型随机最大值原理。
2026-06-16 math.OC math.PR
SPDE Games Driven by a Brownian Sheet with Applications to Pollution Minimization
本文研究了共享空间域污染控制中的非零和随机微分博弈,利用最大值原理推导了由 Brownian sheet 驱动的 SPDE 的 Nash 均衡策略充要条件,并通过案例展示了空间与随机动态对均衡策略的影响。
2025-03-06 math.OC
Stochastic maximum principle for optimal control of a class of nonlinear SPDEs with dissipative drift
在Pontryagin意义下,证明了无穷维加性噪声驱动的随机偏微分方程的有限时域最优控制的随机最大值原理的一个版本.特别是,我们对待的情况下,其中的非线性项是Nemytskii型,耗散和多项式增长。待优化的性能泛函是相当一般的,并且可以依赖于控制方程的点评估。所得结果可应用于诸如反应扩散方程等一类非线性抛物型方程。
2015-03-17 math.OC math.PR
Optimal insider control of stochastic partial differential equations
研究了由布朗运动和Poisson随机测度驱动的随机发展方程的最优内部控制问题。我们的最优控制问题是新的在两个方面:(i)控制器有机会获得内部信息,即获得有关系统的未来状态的信息,(ii)的积分-微分算子的SPDE可能取决于控制。在本文的第一部分中,我们给出了这类控制问题的充分必要最大值原理,在两种情况下:(1)当控制既依赖于时间t又依赖于空间变量x时。(2)当控件不允许依赖于x时。在本文的第二部分中,我们将上述结果应用于一类非线性系统的最优控制问题,当内部控制器只有系统状态的噪声观测值时。利用非线性滤波的结果,我们将这个噪声观测的SPDE内部控制问题转化为一个完全观测的SPDE内部控制问题。最后给出了具体的算例。
2016-08-30 math.OC
A limit theory for controlled McKean-Vlasov SPDEs
Albert-Ludwigs University of Freiburg(弗莱堡大学)
本文基于变分框架,研究受控均场随机偏微分方程的极限理论,证明了均场极限和粒子近似的存在性结果,并建立了集合值传播混沌结果,展示了经验分布集在Hausdorff度量拓扑下收敛于均场极限集。此外,讨论了与随机最优控制理论相关的极限定理,并通过受控相互作用粒子系统应用到随机多孔介质方程中。
2026-05-18 math.AP math.OC math.PR
Stochastic maximum principle for SPDEs with delay
本文以庞特里亚金最大值原理的形式,给出了一类具有时滞的无穷维发展方程的最优控制问题的最优性必要条件.在成本泛函中,我们允许最终成本取决于状态的历史。为了处理这样的成本泛函,我们引入了一种新的形式的预期向后随机微分方程,它起着对偶方程的作用与控制问题。
2016-03-23 math.OC math.PR
Optimal incentives in a limit order book: a SPDE control approach
随着电子市场的分散,交易所现在正在竞争,以吸引其平台上的交易活动。因此,他们开发了几种监管工具来控制其流动性池的流动性供应/消费。在本文中,我们研究的问题,交易所使用的激励措施,以增加市场的流动性。我们将限价订单簿建模为随机偏微分方程(SPDE)的解,如[12]所示。对市场参与者提出的激励措施是他们的限价指令到中间价的时间和距离的函数。我们制定的控制问题的交易所谁希望修改的形状,订单簿,增加量在特定的限制。由于SPDE控制问题的特殊性质,我们能够用经典的Feynman-Kac表示定理来描述解决方案。此外,当研究解的渐近行为时,一个特定的罚函数使交易所能够在订单簿的每个极限处获得封闭形式的激励。我们数值研究了激励的形式及其对订单簿形状的影响,并分析了激励对市场参数的敏感性。
2022-10-14 math.OC q-fin.MF q-fin.TR
Dual Approaches to Stochastic Control via SPDEs and the Pathwise Hopf Formula
Shanghai Center for Data Science(上海数据科学中心);NYU-ECNU Institute of Mathematical Sciences, NYU Shanghai(纽约大学-华东师范大学数学科学研究所,上海纽约大学)
本文提出双重方法解决连续时间随机控制问题,通过SPDE和霍普夫公式计算高维空间的鲁棒双重界,结合庞特里亚金最大原理和推广霍普夫公式,证明了霍普夫公式的有效性,并通过数值实验验证了其与深度BSDE和深度actor-critic方法的互补性。
2026-04-09 cs.NA math.NA math.OC
Set-valued propagation of chaos for controlled path-dependent McKean-Vlasov SPDEs
Albert-Ludwigs University of Freiburg(弗赖堡大学)
本文研究了受控路径依赖 McKean-Vlasov 随机微分方程的极限理论,采用 Da Prato 和 Zabczyk 的半群方法,证明了均场极限和粒子近似的存在性,并在 Hausdorff 距离拓扑下建立了集合值传播混沌,同时讨论了其对随机最优控制的应用,以及对 Peng 的带有漂移相互作用的 $G$-布朗运动的传播混沌结果。
2026-05-18 math.AP math.OC math.PR
Stochastic maximum principle for optimal control of SPDEs
Politecnico di Milano(米兰理工大学);Université Rennes 1(雷恩第一大学);Università di Milano-Bicocca(米兰比可卡大学)
针对由有限维维纳过程驱动的随机偏微分方程,提出了一种庞特里亚金型最大值原理,通过引入两个伴随过程处理依赖于控制参数的扩散系数和一般控制空间。
2013-02-01 cs.SY eess.SY math.OC
Spatially Controlled Evolution of Composite Materials via Stochastic Partial Differential Equations
本文研究复合材料建模中的受控随机偏微分方程,证明温和解存在性,用随机最大值原理推导最优性充要条件,并通过分段常数扩散率复合材料的可解例子验证理论结果。
2025-02-21 math.OC
Asymptotic strong Feller and weak observability inequality
University of Science and Technology Beijing(北京科技大学);Peking University(北京大学)
研究一类非自治线性随机偏微分方程,通过结合偏微分方程控制理论与马利瓦因微积分,建立渐近正则化等之间的等价关系及半线性方程准则,并应用于随机奥森等方程。
2026-07-21 math.OC math.PR
Pontryagin Maximum Principle for McKean-Vlasov Stochastic Reaction-Diffusion Equations
本文研究McKean-Vlasov型半线性随机反应扩散方程的随机控制问题。基于Banach空间值函数的Lions导数方法,证明了控制到状态映射的可微性,导出了Pontryagin极大值原理与成本泛函梯度的显式表示,并证明了线性倒向SPDE的存在唯一性及确定性最优控制的存在性。
2025-08-11 math.OC math.PR
Deterministic Control of Stochastic Reaction-Diffusion Equations
考虑半线性随机偏微分方程的确定性控制问题。在乘性噪声的情况下,最优控制的存在性和最优性的必要条件。在加性噪声的情况下,我们通过伴随演算获得了成本泛函的梯度表示。对确定性控制和加性噪声的限制避免了引入后向SPDE的必要性。基于这种新的表示,我们提出了一种概率非线性共轭梯度下降法来逼近最优控制,并将我们的结果应用于随机Schlögl模型.在随机系统的最优控制不同于确定性系统的最优控制的情况下,我们也给出了一些分析。
2020-07-13 math.OC math.PR
Peng's Maximum Principle for Stochastic Partial Differential Equations
本文将一维空间中具有非凸控制域和控制依赖扩散系数的半线性随机偏微分方程的Peng最大值原理推广到具有Nemytskii型系数的一般代价泛函的情形.我们的分析是基于一种新的方法来表征的二阶伴随状态的解决方案的功能值向后SPDE。
2021-08-10 math.OC math.PR
Necessary and Sufficient Conditions for Optimal Control of Semilinear Stochastic Partial Differential Equations
本文利用函数值倒向SPDE表示的二阶伴随状态,计算了受控半线性SPDE最优轨迹上值函数的粘性超微分与次微分,建立了Pontryagin最大值原理与动态规划的联系,并导出了完全非线性HJB方程的随机验证定理。
2023-12-08 math.OC math.PR
A Stochastic Maximum Principle for Control Problems Constrained by the Stochastic Navier-Stokes Equations
本文考虑了\cite{ocpc}中引入的多维区域上的随机Navier-斯托克斯方程的控制问题,该问题仅限于由Q-Wiener过程定义的噪声项.利用随机最大值原理,推导出了一个基于伴随方程的最优控制设计的必要最优性条件,该伴随方程由倒向随机微分方程给出。此外,我们证明了最优控制满足一个充分的最优性条件。因此,我们可以解决唯一的随机Navier-斯托克斯方程约束的控制问题,特别是对于二维以及三维区域。
2018-10-26 math.OC
Unified Systems of FB-SPDEs/FB-SDEs with Jumps/Skew Reflections and Stochastic Differential Games
我们研究了四个系统及其相互作用。首先,我们制定了一个统一的系统的耦合向前倒向随机偏微分方程(FB-SPDE)的Levy跳跃,其漂移,扩散,跳跃系数可能涉及部分微分算子。FB-SPDE的解由4元组一般维度随机向量-场过程连同域上的位置参数一起随时间演变来定义(例如,超盒或流形)。在广义局部线性增长的无穷序列和利普希茨条件下,证明了在适当构造的拓扑空间上适应的4元强解的适定性.其次,我们考虑一个统一的系统FB-SDES,一种特殊形式的FB-SPDE,然而,斜边界反射。在随机线性增长和利普希茨条件以及反射的一般完全S条件下,利用Skorohod问题和一个振动不等式,证明了FB-SDEs的带边界调节器的自适应6元组弱解的适定性.特别地,如果反射矩阵的谱半径在某种意义下严格小于1,则涉及适应的6元组强解。第三,我们建立了一个基于FB-SDES的一般局中人数的随机微分对策(SDG)。通过对FB-SPDE的求解,得到了在给定控制规则下FB-SDES的解,进而得到了SDG的Pareto最优纳什均衡策略过程。第四,我们研究了FB-SPDE/FB-SDES在量子系统和量子统计中的应用,同时我们使用它们来激发SDG。
2015-09-14 cs.GT math-ph math.MP
Stochastic Spatio-Temporal Optimization for Control and Co-Design of Systems in Robotics and Applied Physics
Georgia Institute of Technology(佐治亚理工学院);Institute of Robotics and Intelligent Machines(机器人与智能机器研究所)
与机器人系统中增加自由度的趋势相关的是机器人和控制界对由偏微分方程(PDE)描述的时空系统的兴趣增加的类似趋势。这些系统往往表现出显着的欠驱动,高维,分叉,多模态不稳定性。它们的控制代表了机器人和自动化社区目前面临的许多挑战。这些系统不仅难以控制,而且其驱动设计本身就是一个NP难题。最近的方法要么在优化之前将空间离散化,要么在限制性线性假设下应用线性系统理论的工具,以获得控制解决方案。该手稿提供了一种新的基于采样的随机优化框架,完全基于希尔伯特空间适合一般类的\textit{semi-linear} SPDE,它描述了许多系统的机器人和应用物理。该框架用于同时进行策略优化和执行器协同设计优化。所得到的算法是基于变分优化,并执行联合的情节优化的反馈控制法律和驱动设计的情节。我们研究了一阶和二阶系统,并在这样做的情况下,扩展到二阶SPDE的几个结果。最后,我们证明了所提出的方法的有效性与几个模拟实验的各种SPDE在机器人和应用物理,包括一个无限自由度的软机器人机械手。
2021-02-18 cs.RO math.OC physics.app-ph
Maximum Principle for Forward-Backward Doubly Stochastic Control Systems and Applications
在扩散系数不包含控制变量,但控制域不需要是凸的条件下,得到了全局形式的完全耦合正倒向双随机微分方程(简称FBDSDEs)最优控制问题的最大值原理.应用随机最大值原理研究了一类随机偏微分方程的最优控制问题。作为SMP的一个例子,我们还解决了一类正倒向双随机线性二次型最优控制问题。在最后一节中,我们利用FBDSDES的解得到了线性二次型随机最优控制问题的最优控制的显式形式和非零和微分对策问题的开环Nash平衡点。
2010-05-22 math.OC
Superposition and mimicking theorems for conditional McKean-Vlasov equations
我们考虑有条件的McKean-Vlasov随机微分方程(SDES),如在大系统极限的平均场游戏和粒子系统的平均场相互作用时,常见的噪音。这些随机微分方程解的条件时间边际满足二阶非线性随机偏微分方程,而条件时间边际的规律在概率测度空间上遵循Fokker-Planck方程.我们证明了两个叠加原理:第一个建立,任何解决方案的SPDE可以解除到一个解决方案的条件McKean-Vlasov插值,第二个保证,任何解决方案的福克-普朗克方程的空间上的概率测度可以解除到一个解决方案的SPDE。我们使用这些结果,以获得一个模仿定理表明,条件的时间边际的伊藤过程可以模拟的解决方案的条件McKean-Vlasov马尔可夫系数。这产生,特别是,一个工具,用于转换开环控制到马尔可夫的背景下,受控的McKean-Vlasov动态。
2020-03-31 math.AP math.OC math.PR
Rectified deep neural networks overcome the curse of dimensionality for nonsmooth value functions in zero-sum games of nonlinear stiff systems
University of Oxford(牛津大学)
在本文中,我们建立了一个广泛的控制随机微分方程(SDEs)与刚性系数,相应的零和对策的值函数可以表示为一个深度人工神经网络(DNN),其复杂性增长最多多项式在两个维度的状态方程和所需的精度的倒数。这样的非线性刚性组可以产生于例如受控随机偏微分方程(SPDE)的Galerkin近似,或者具有不确定初始条件和源项的受控PDE。这意味着DNN可以打破PDE和SPDE的数值逼近和最优控制中的维数灾难。我们证明的主要成分是构建一个合适的离散时间系统,以有效地近似底层随机动力学的演化。类似的思想也可以应用于获得由具有状态切换系数的刚性组诱导的值函数和由一般Lévy噪声驱动的DNN的表达率。
2020-05-13 cs.LG cs.NA math.NA