Linearly Solvable Stochastic Control Lyapunov Functions
针对一类非线性随机控制系统,提出了一种综合随机控制李雅普诺夫函数的新方法。该技术依赖于一个经典的非线性Hamilton-Jacobi-Bellman偏微分方程的一个线性偏微分方程的一类问题的一个特殊的约束随机强迫的转换。然后,该线性偏微分方程可以松弛为线性微分包含,允许使用平方和编程生成松弛解。由此产生的松弛的解决方案,实际上是粘性的上/下解决方案,并通过最大值原理是逐点的上下界的基本值函数,即使是粗糙的多项式逼近。此外,逐点上界被证明是一个随机控制李雅普诺夫函数,产生一个方法,用于生成非线性控制器的逐点有界距离时,使用最优控制器的最优成本。这些近似解可以通过半定最优化问题的层次以不增加的误差来计算。最后,本文开发了先验界限的轨迹次优时,使用这些近似值功能,以及证明这些方法,和界限,可以应用到更一般的一类非线性系统不服从随机强迫的约束。模拟例子说明的方法。
2017-09-05 math.OC
A pointwise tracking optimal control problem for a fractional, semilinear PDE
Universidad Técnica Federico Santa María(智利联邦圣马利亚技术大学);University of Tennessee, Knoxville(田纳西大学诺克斯维尔分校)
研究分数半线性椭圆PDE的点跟踪最优控制问题,分析状态点评估的well-posed性,解决非凸性和分数偏微分方程的奇异右端项问题,推导一阶和二阶最优性条件。
2026-04-16 math.OC
Global maximum principle for mean-field forward-backward stochastic systems with delay and application to finance
本文的目的是探讨平均场前向后延迟控制系统最优性的必要条件。证明了一个新的估计,它是处理时滞平均场型最优控制问题的有力工具。与经典情形不同,本文的一阶伴随系统是一个期望平均场倒向随机微分方程,二阶伴随系统是一个矩阵值过程系统,而不是平均场型,利用这两个伴随系统,证明了状态变分的二阶展开式$Y$,从而证明了Peng随机最大值原理.作为一个说明性的例子,我们将我们的结果应用到金融中的平均场博弈。虽然为了方便起见,我们只研究了一个点态时滞的情况,但我们的方法对于分析点态时滞的情况是足够的。
2018-11-04 math.OC
Pointwise Tracking Optimal Control Problem for Cahn Hilliard Navier Stokes system
Indian Institute of Science Education and Research(印度科学教育研究所)
本文研究了Cahn-Hilliard Navier-Stokes系统的点wise跟踪最优控制问题,分析了控制量对相变量的影响,并推导了伴随系统的一阶必要最优性条件。
2026-02-06 math.OC
Optimal control of quasilinear parabolic PDEs with gradient terms and pointwise constraints on the gradient of the state
本文研究含二次梯度项等一阶非线性的拟线性抛物型偏微分方程最优控制问题,通过扩展改进正则性分析,在积分约束和逐点约束两种梯度约束情形下分别建立了一阶必要最优性条件。
2025-07-02 math.OC
Second Order Necessary Conditions for Endpoints-Constrained Optimal Control Problems on Riemannian manifolds
研究了在黎曼流形上演化的最优控制问题,其中初、终状态满足不等式和等式型约束,控制集是可分的度量空间.得到了积分形式和拟点态形式的二阶必要条件,这两个条件都适用于Pontryagin型临界控制,并且涉及到曲率张量.此外,我们将积分形式的条件应用到Bolza问题,其中的初始和最终状态受到等式的类型约束。
2020-07-10 math.OC
Forecasting Outside the Box: Application-Driven Optimal Pointwise Forecasts for Stochastic Optimization
School of Business, Universidad Adolfo Ibáñez(阿道夫·伊瓦涅斯大学商学院);Faculty of Engineering and Sciences, Universidad Adolfo Ibáñez(阿道夫·伊瓦涅斯大学工程与科学学院)
针对带固定补偿与固定成本的两阶段随机规划,提出最优场景概念,结合决策聚焦学习的双层优化证明点状预测可渐近逼近最优场景,数值实验验证其优于基准方法。
2025-10-28 cs.LG math.OC
First and second order necessary conditions for stochastic optimal controls
本文的主要目的是利用经典的变分分析方法建立随机最优控制的一阶和二阶最优性必要条件。控制系统由一个随机微分方程控制,其中漂移项和扩散项都可以包含控制变量,并且控制集可以是非凸的。对于随机最优控制,只需引入一个伴随方程即可得到一阶必要条件,而只需引入两个伴随方程即可得到二阶必要条件.
2016-11-07 math.OC
Necessary conditions for optimality for stochastic evolution equations
在可分的希尔伯特空间上,给出了随机发展系统控制问题的最大值原理。特别地,利用伴随向后随机发展方程,导出了该随机最优控制问题最优性的必要条件。此外,允许出现在该系统中的所有系数取决于控制变量。我们通过半群的方法实现我们的结果。
2013-08-27 math.OC
Second order necessary conditions for quantum stochastic optimal control problems
School of Mathematics, Shandong University(山东大学数学学院);School of Mathematics Sciences, Hebei Normal University(河北师范大学数学科学学院)
本文通过变分方法建立量子随机系统的最优控制二阶必要条件,研究了受费米布朗运动驱动的量子随机微分方程中的控制问题,为量子随机控制的优化研究提供理论基础。
2026-03-15 math.OC
On Necessary and Sufficient Conditions for Near-Optimal Singular Stochastic Controls
研究了由非线性随机微分方程(简称SDEs)驱动的系统的近优奇异随机控制的充要条件。我们的结果的证明是基于Ekeland的变分原理和一些微妙的估计的状态和伴随过程。这一结果是将Zhou的近最优性随机最大值原理推广到奇异控制问题。
2011-10-25 math.OC
Error estimates for a pointwise tracking optimal control problem of a semilinear elliptic equation
考虑一类半线性椭圆型偏微分方程的逐点跟踪最优控制问题。我们推导出最优解的存在性,并分析了第一,必要和充分,二阶最优性条件。我们设计了两种离散化策略,以近似的解决方案的最优控制问题:一个半离散计划的控制变量是不离散-所谓的变分离散化途径-和一个完全离散计划的控制变量是离散化与分段常数函数。对于这两种解决方案的技术,我们分析了离散化的收敛性,并推导出误差估计。
2021-12-15 cs.NA math.NA math.OC
Weak Necessary and Sufficient Stochastic Maximum Principle for Markovian Regime-Switching Diffusion Models
本文证明了马尔可夫区切换随机最优控制问题的一个弱充要最大值原理。我们没有坚持汉密尔顿算子的极大条件,而是证明了0属于汉密尔顿算子的克拉克广义梯度与最优控制处控制约束集的克拉克法锥之和。在哈密顿量的联合凸性条件和终端目标函数的凸性条件下,该必要条件成为充分条件。我们给出了四个例子来证明弱随机最大值原理。
2013-09-14 math.OC
Second order necessary and sufficient optimality conditions for singular solutions of partially-affine control problems
在这篇文章中,我们研究系统的最优控制问题,是仿射的一些控制变量和非线性的其他有关。我们考虑了许多等式和不等式约束的初始值和最终值的状态。研究了这类问题的奇异最优解,得到了积分形式的弱最优性的二阶充要条件。我们还得到了Goh点态必要最优性条件。我们给出一个例子来说明结果。
2017-07-11 math.OC
The necessary and sufficient conditions for stochastic differential systems with multi-time states cost functional
从经济学的角度出发,研究了一类由具有多时间状态代价泛函的随机微分方程驱动的最优控制问题。通过构造一系列一阶伴随方程,我们建立了这一新的最优控制问题的随机最大值原理和最优性充分条件最优性条件。还研究了约束问题.最后,我们发展了一般成本泛函的近最优控制问题。
2016-09-14 math.OC
Necessary Conditions for Optimal Control of SPDE with locally monotone coefficients
本文的目的是导出一个由局部单调系数的随机偏微分方程(SPDE)控制问题的最大值原理。特别地,利用伴随倒向随机偏微分方程(BSPDE),得到了该随机最优控制问题最优性的必要条件。
2019-10-09 math.OC
First and Second Order Necessary Optimality Conditions for Controlled Stochastic Evolution Equations with Control and State Constraints
本文的目的是建立具有控制约束和状态约束的随机发展方程最优控制问题的一阶和二阶最优性必要条件。控制作用于漂移项和扩散项,控制区域是可分希尔伯特空间的非空闭子集。我们利用一些经典的集值分析工具和向量值倒向随机发展方程的转置解和算子值倒向随机发展方程的松弛转置解的理论,导出了这些最优性条件。二阶伴随方程的修正部分在二阶最优性条件中起着基础性的作用,而修正部分在一阶最优性条件中是不出现的。
2019-01-19 math.OC
Lagrangian dual method for solving stochastic linear quadratic optimal control problems with terminal state constraints
研究了在终态上具有逐点线性等式约束的随机线性二次型(LQ)最优控制问题。在代价泛函的一致凸性条件和线性约束映射的满射性条件下,证明了一个强Lagrange对偶定理。基于拉格朗日对偶,提出了两种求解约束随机LQ问题的方法。首先,给出了利用强对偶性构造封闭解的理论方法。其次,提出了一种迭代算法,称为增广拉格朗日方法(ALM)。证明了ALM产生的迭代序列的强收敛性。此外,还得到了约束映射满射的一些充分条件。
2023-01-20 math.OC
Necessary Conditions for Stochastic Optimal Control Problems in Infinite Dimensions
本文的目的是建立无限维随机最优控制的一阶和二阶必要条件。控制系统由一个随机发展方程控制,其中漂移项和扩散项都可以包含控制变量,并且允许控制集是非凸的。通过引入一个伴随方程,利用经典的变分分析方法,或在确定性条件下很自然的假设下,得到了保证最优控制存在的一阶最优性必要条件.更重要的是,为了避免高阶伴随方程适定性的本质困难,再次使用经典的变分分析方法,只需要一阶和二阶伴随方程就可以建立二阶必要最优性条件,其中二阶伴随方程的解是在松弛转置的意义下理解的.
2018-12-26 math.OC
Risk-sensitive Necessary and Sufficient Optimality Conditions and Financial Applications: Fully Coupled Forward-Backward Stochastic Differential Equations with Jump diffusion
在本文中,我们的目标集中在风险敏感的性能泛函下的最优控制问题,其中系统是由一个完全耦合的向前-向后随机微分方程跳跃。风险中性控制系统已被用作初步步骤,其中容许控制是凸的,并且存在最优解。证明了风险敏感性能的充分必要最优性条件。在本文的最后,我们通过一个均值-方差风险敏感控制问题在现金流市场中的应用来说明我们的主要结果。
2019-03-05 math.OC
A bilinear pointwise tracking optimal control problem for a semilinear elliptic PDE
本文研究了半线性椭圆PDE的双线性点跟踪最优控制问题,推导了最优解的存在性,并证明了局部最优控制的正则性性质。
2025-12-14 math.AP math.OC
Optimal control problems with $L^0(Ω)$ constraints: maximum principle and proximal gradient method
我们研究了具有$L^0$约束的最优控制问题,这些约束限制了控制的支持度。证明了Pontryagin最大值原理型最优性的必要条件。这里,使用了遵守$L^0$约束的特殊控制扰动。首先得到积分形式的最大值原理,然后将其转化为逐点形式。此外,分析了一种近似梯度型优化算法。在一定的假设下,迭代序列包含强收敛的连续性,其极限是可行的,并满足一个子集的必要最优性条件。
2022-08-03 math.OC
Necessary Condition for Near Optimal Control of Linear Forward-backward Stochastic Differential Equations
研究了一类由正倒向随机微分方程所控制的线性随机控制系统的近最优控制,其中漂移项和扩散项均允许依赖于控制,且控制域不假设为凸的.以前工作中(定理3.1)[ \textit{% Automatica} \textbf{46}(2010)397-404],本文讨论了一类具有控制依赖扩散的近最优控制问题,本文的结果可以看作是对这一问题的直接回应.在Yong [1]的最优变分原理的框架下,建立了近最优性的必要条件. \textit{SIAM J. Control Optim.} \textbf{48}(2010)4119--4156],并由Wu [% \textit{Automatica} \textbf{49}(2013)1473--1480]通过收敛技术处理无界控制域中的FBSED的最优控制而获得。本文给出了一些新的估计来处理近似最优性。此外,还讨论了一个示例。
2015-01-22 math.OC
Fully Coupled Nonlinear Forward-Backward Stochastic Difference Equations: Spectral Contraction and Infinite-Horizon Maximum Principle
Fudan University(复旦大学);Shandong University(山东大学)
本文提出显式谱压缩方法,研究无穷时域全耦合非线性正倒向随机差分方程,推导随机最大值原理及验证定理,并用投资组合示例展示应用。
2026-09-11 math.OC
Optimal Control of a Class of Reaction-Diffusion Systems with Pointwise State Constraints
Universidad de Cantabria(坎塔布里亚大学);National Technical University of Athens(雅典国立技术大学);IACM, FORTH(FORTH IACM);Universidad de Oviedo(奥维耶多大学)
研究一类半线性反应-扩散系统的最优控制,在无非负性假设下证明解的存在唯一性,推导一阶必要与二阶充分条件,数值验证边界控制有效性。
2026-10-07 math.AP math.OC
Properties for transposition solutions to operator-valued BSEEs, and applications to robust second order necessary conditions for controlled SEEs
Beijing Institute of Technology(北京理工大学)
本文研究了在传统Pontryagin型最大原理退化情况下,随机演化方程的鲁棒二阶必要条件,通过交换方法和Malliavin算子推导点wise鲁棒最优性条件。
2025-12-06 math.OC
Ergodicity Conditions For Controlled Stochastic Non-Linear Systems Under Information Constraints
考虑一个随机非线性系统控制在一个可能有噪声的通信信道。一个重要的问题是描述最大类的信道,存在编码和控制策略,使闭环系统是随机稳定的。在本文中,我们考虑(渐近)遍历性的稳定性概念。我们证明下界的信道容量必要的,以实现稳定的标准。在温和的技术假设下,我们得到了所需的信道容量是下界的对数行列式的线性化,双平均的状态和噪声空间。我们通过引入一个修正的不变熵和利用逐点遍历定理所保证的样本路径的几乎必然收敛来证明这个界。所得到的基本界推广了线性系的著名公式,并且在某些情况下比通过信息论方法得到的非线性系统的基本界更精确。
2021-02-09 math.OC
Second Order Necessary Conditions for Optimal Control Problems on Riemannian Manifolds
本文研究了黎曼流形上的最优控制问题,并考虑了两种典型情况。第一种情况是端点空闲时。对于这种情况,控制集被假定为可分的度量空间。通过引入与流形曲率张量相关的对偶方程,建立了积分形式的二阶最优性充要条件最优性条件。特别地,当控制集是波兰空间时,二阶必要条件被简化为逐点形式。作为一个关键的初步结果,也是一个有趣的副产品,我们得到一个几何引理,这可能有一些独立的利益。第二种情况是当端点固定时。对于这种更困难的情况,假设控制集在欧几里得空间中是开放的。我们得到了二阶最优性的充分必要条件最优性条件,其中曲率张量也显式地出现。我们的最优性条件可以用来恢复下列著名的几何结果:连接黎曼流形上两个不动点的测地线满足能量的二阶变分;而现有的控制文献中的最优性条件不能给出相同的结果。
2016-11-07 math.OC
A pointwise tracking optimal control problem for the stationary Navier--Stokes equations
研究带控制约束的稳态 Navier–Stokes 方程逐点跟踪最优控制问题,分析解的存在性与最优性条件,并提出半离散和全离散两种策略及先验误差估计。
2023-09-25 cs.NA math.NA math.OC
Backward stochastic differential equations with conditional reflection and related recursive optimal control problems
本文引入了一类新的反射倒向随机微分方程(BSDEs),它的反射约束被施加在它的主解分量上,按惯例记为$Y$,但根据它的条件期望$\mathbb{E}[Y_t|\mathcal{G}_{t}]$在一般的子滤子$\{\mathcal{G}_{t}\}.$上,因此我们称这种方程为条件反射BSDEs(简称条件RBSDEs).条件RBBNN包含了经典的带逐点反射障碍的RBNN和最近发展的带平均反射约束的BNN,作为其两种特殊和极端的情况:它们分别对应于$\{\mathcal{G}_{t}\}$表示完全信息的完全过滤和确定性场景的退化过滤。在较弱的条件下,结合Snell包络方法和Skorokhod引理,得到了条件RBB-R的存在唯一性.我们还讨论了它的连接,在线性驱动器的情况下,一类最优停止问题存在的部分信息。作为副产品,得到了一个新的比较定理。利用这一联系,我们研究了一类具有反射递归泛函的最优控制问题的弱形式,刻画了相关的最优解和值。此外,在递归泛函是具有逐点反射的RBNN的特殊情况下,我们研究了相关的随机后向递归控制和零和博弈的强公式,这两个问题都是在非马尔可夫框架下,它们各自感兴趣的,并且还没有被现有文献充分探讨过。
2022-11-14 math.OC math.PR
Necessary stochastic maximum principle for dissipative systems on infinite time horizon
在多项式增长和联合单调性假设下,对无限水平上的有限维随机控制问题,建立了一个必要的随机最大值原理.第二个假设概括了通常的意义上,它是制定为一个联合条件的漂移和扩散项。主要的困难在于通过求解无界时间区间上的向后方程来构造一阶和二阶伴随过程。第一个伴随过程的特点是作为一个解决方案的一个落后的,这是良定感谢对偶参数。第二个可以通过另一个对偶关系来定义,该对偶关系用系统的哈密顿量和线性化的状态方程来表示。一些已知的模型验证联合单调性假设进行了讨论。
2015-03-26 math.OC math.PR
Necessary and Sufficient Conditions for Optimal Control of Semilinear Stochastic Partial Differential Equations
本文利用函数值倒向SPDE表示的二阶伴随状态,计算了受控半线性SPDE最优轨迹上值函数的粘性超微分与次微分,建立了Pontryagin最大值原理与动态规划的联系,并导出了完全非线性HJB方程的随机验证定理。
2023-12-08 math.OC math.PR
A necessary and sufficient condition on the stability of the infimum of convex functions
设凸集C \subseteq \R上的凸函数f \colon C \to [- \infty,\infty ]是无穷稳定的,如果对点态收敛于f的凸函数f_n \colon C \to [- \infty,\infty ]的任何序列(f_n),有\inf_C f_n \to \inf_C f.给出了凸函数下确界稳定的一个简单的充要条件。如果用Moore-Smith网(f_v)代替序列(f_n),同样的条件仍然是必要和充分的。本说明的动机是金融/经济学中风险/不平等度量的稳定性的某些应用。
2013-08-01 math.CA math.OC
Pointwise and dynamic programming control synthesis for finite-level open quantum memory systems
Australian National University(澳大利亚国立大学);University of Sydney(悉尼大学)
本文研究有限级量子记忆系统在外部量子噪声下的动态变量保持问题,通过点状控制设计和动态规划方法,提出最小化均方偏差和控制惩罚的控制策略,并推导了非线性HJB方程的渐近解。
2026-03-31 cs.SY eess.SY math.OC
Stochastic Training is Not Necessary for Generalization
University of Siegen(锡根大学);University of Maryland(马里兰大学)
人们普遍认为,SGD的隐式正则化是我们在神经网络中观察到的令人印象深刻的泛化行为的基础。在这项工作中,我们证明了非随机全批训练可以使用现代架构在CIFAR-10上实现SGD的强大性能。为此,我们证明了SGD的隐式正则化可以完全替换为显式正则化,即使在与强大且经过充分研究的基线进行比较时。我们的观察表明,全批量训练的感知困难可能是其优化特性以及ML社区为小批量训练调整优化器和超参数所花费的不成比例的时间和精力的结果。
2022-04-19 cs.LG math.OC
Necessary and sufficient optimality conditions for relaxed and strict control problems of backward systems
我们考虑一个随机控制问题的严格(经典)控制集不一定是凸的,系统由一个非线性向后随机微分方程。通过引入一种新的方法,我们建立了两个模型的最优性的必要条件和充分条件。第一个是关于放松控制的,放松控制是度量值过程。第二个是第一个的特殊情况,涉及严格控制问题。
2008-12-20 math.OC math.PR
A general necessary and sufficient optimality conditions for singular control problems
我们考虑一个随机控制问题,其中严格(经典)控制集不一定是凸的,变量控制有两个组成部分,第一个是绝对连续的,第二个奇异。该系统是由一个非线性随机微分方程,其中的绝对连续的控制分量进入漂移和扩散系数。通过引入一种新的方法,我们建立了两个模型的最优性条件。第一种是松弛奇异控制,它们是第一个分量是测度值过程的一对过程。第二个是第一个的特殊情况,涉及严格的奇异控制问题。这些结果是以全局随机最大值原理的形式给出的,只使用了一阶展开式和相应的伴随方程。这改进和推广了以往关于受控随机微分方程的最大值原理的工作。
2008-12-20 math.OC math.PR
Evaluability of paired comparison data in stochastic paired comparison models: Necessary and sufficient condition
针对允许三种选择的随机成对比较模型,本文用最大似然估计对象强度与决策边界,并给出数据可评估性的充要条件,仿真表明其优于已有充分条件。
2025-02-19 math.OC math.ST stat.TH
Pointwise Feasibility of Gaussian Process-based Safety-Critical Control under Model Uncertainty
University of California, Berkeley(加州大学伯克利分校)
控制障碍函数和控制李雅普诺夫函数分别是增强被控系统安全性和稳定性的常用工具。它们通常用于建立约束,这些约束可以并入求解安全关键控制输入的最小范数二次规划(CBF-CLF-QP)中。然而,由于这些约束依赖于系统的模型,当该模型不准确时,安全性和稳定性的保证很容易丧失。在本文中,我们提出了一种基于高斯过程(GP)的方法来解决使用CBF和CLF的安全关键控制器中的模型不确定性问题。所考虑的模型的不确定性是受状态和控制输入。我们推导出这样的模型的不确定性对CBF和CLF的动态的影响的概率界。然后,我们使用这些界限来建立安全性和稳定性的机会约束,可以纳入一个最小范数凸优化为基础的控制器,称为GP-CBF-CLF-SOCP。作为本文的主要理论结果,我们提出了所提出的优化问题的逐点可行的必要条件和充分条件。我们认为,这些条件可以作为理解从真实系统收集的数据分布的最低要求的起点,以保证安全。最后,我们验证了所提出的框架与数值模拟的自适应巡航控制器的汽车系统。
2021-10-01 cs.LG cs.SY eess.SY
Optimal Savings and Value of Population in A Stochastic Environment: Transient Behavior
该研究将人口最优投资消费模型拓展至一般随机框架,通过结合概率方法与偏微分方程理论,证明了含奇异项的非典范HJB抛物方程经典解的适定性,解决了宏观经济学中的长期问题。
2024-08-14 math.AP math.OC math.PR