On Necessary and Sufficient Conditions for Near-Optimal Singular Stochastic Controls
研究了由非线性随机微分方程(简称SDEs)驱动的系统的近优奇异随机控制的充要条件。我们的结果的证明是基于Ekeland的变分原理和一些微妙的估计的状态和伴随过程。这一结果是将Zhou的近最优性随机最大值原理推广到奇异控制问题。
2011-10-25 math.OC
Distributed sub-optimal resource allocation over weight-balanced graph via singular perturbation
在本文中,我们考虑分布式优化设计的资源分配问题的权重平衡图。借助奇异扰动分析,我们提出了一个简单的次优连续时间优化算法。证明了算法平衡点的存在唯一性,并证明了算法的指数收敛性。最后,我们验证了算法的次优性,当可调参数趋于零时,算法可以逼近最优解。
2017-02-06 math.OC
Optimal Control of Singular Parabolic PDEs Modeling Multiphase Stefan-type Free Boundary Problems
分析了多维多相Stefan型自由边界问题的分布形式奇异非线性抛物型偏微分方程的最优控制。利用有限差分方法,给出了有限维最优控制问题的逼近序列。证明了最优控制的存在性和离散最优控制问题序列关于泛函和控制的收敛性。特别地,在系数的极小正则性假设下,得到了奇异偏微分方程的有限差分方法的收敛性、存在性、唯一性和稳定性估计.
2020-06-12 math.AP math.OC
Causal State Feedback Representation for Linear Quadratic Optimal Control Problems of Singular Volterra Integral Equations
研究一类奇异Volterra积分方程的线性二次型最优控制问题。在适当的凸性条件下,最优控制唯一存在,并且可以通过希尔伯特空间中二次泛函的弗雷歇导数或最大值原理型必要条件来刻画.然而,这些(等价)特征具有缺点,即最优控制的当前值取决于最优状态的未来值。实际上,这是不可行的。本文的主要目的是得到最优控制的因果状态反馈表示。
2021-09-16 math.OC
Method for Solving Bang-Bang and Singular Optimal Control Problems using Adaptive Radau Collocation
提出了一种用自适应Legendre-Gauss-Radau(LGR)配置法求解bang-bang和奇异最优控制问题的方法。该方法分为几个部分。首先,开发了一种结构检测方法,该方法识别控制中的开关次数,并分析相应的开关函数,用于解决方案是bang-bang或奇异的部分。第二,在检测到结构之后,将域分解成多个域,使得多域公式包括表示最优控制中的切换时间的附加决策变量。在被分类为bang-bang的域中,控制被设置为其上限或下极限。在确定为奇异的域中,目标函数用正则化项来增加以避免奇异弧。一个迭代过程,然后开发奇异域,以获得一个控制,在于接近的奇异控制。该方法被证明在四个例子中,其中三个有一个bang-bang和/或奇异的最优控制,而第四个有一个光滑和非奇异的最优控制。结果表明,本文的方法提供了准确的解决方案,其解决方案是邦邦或奇异的问题相比,以前开发的网格细化方法,不适合解决非光滑和/或奇异的最优控制问题,并产生的结果,相当于使用以前开发的网格细化方法最优控制问题的解决方案是光滑的。
2022-01-27 math.OC
Singular trajectories in multi-input time-optimal problems: Application to controlled mechanical systems
本文研究了一类控制系统的时间最优控制问题,该系统包括具有可能耗散项的受控机械系统。与这类力学系统相联系的李代数具有某些特殊性质。这些属性进行了探讨,并与庞特里亚金最大值原理,以确定奇异极值的结构,特别是时间最优轨迹。该理论与应用程序的一类水下航行器的时间最优问题进行说明
2002-05-02 math.OC
Stochastic nonzero-sum games: a new connection between singular control and optimal stopping
本文建立了一类最优停止的二人非零和对策与一类奇异控制的$2$ -局中人非零和对策之间的新联系。我们表明,每当纳什均衡的停止游戏中达到首中时在两个不同的边界,那么这样的边界也触发了纳什均衡的奇异控制的游戏。此外,在两个博弈中,参与者的价值函数之间存在着差异性联系。
2017-12-27 math.OC
Optimal stopping, randomized stopping and singular control with partial information flow
本文的目的是双重的:我们延长了著名的最佳停止和随机停止一个给定的随机过程的情况下,可用的信息流是一个过滤没有先验假设的过滤过程之间的关系。我们称这些问题为最优停止和随机停止一般信息。遵循Krylov [K]的思想,我们引入了一个特殊的具有一般信息的奇异随机控制问题,并证明这也等价于部分信息最优停止和随机停止问题。然后我们证明了这个奇异控制问题的解可以用部分信息变分不等式表示。
2021-04-27 math.OC
Singularities of optimal time control-affine systems: the limit case
本文研究了具有二维控制的四维最小时间控制仿射问题的奇异性。正则化后,问题归结为研究奇异轨迹中某个幂零平衡点的分支。我们表明,极值流-因此,指数映射-是光滑的分层,因此分段光滑。
2020-11-03 math.DS math.OC
Continuity and estimates for multimarginal optimal transportation problems with singular costs
我们考虑一些排斥性的多边际最优运输问题,其中包括,作为一个特殊的情况下,库仑成本。我们证明了一个正则性的极小化(最优运输计划),从中我们推导出的对偶问题(Kantorovich潜在的)的最大化的存在性和一些基本的规律性。然后,这是适用于获得一些估计的成本和连续性的研究。
2016-08-31 math.OC
A stochastic maximum principle for singular mean-field regime-switching optimal control
University of Rwanda(卢旺达大学);African Institute for Mathematical Sciences (AIMS)(非洲数学科学研究所);University of Ghana(加纳大学)
本文提出了一种适用于均场切换奇异随机最优控制问题的随机最大原理,并应用于带有交易成本的银行间借贷模型分析。
2025-11-26 math.OC
On average control generating families for singularly perturbed optimal control problems with long run average optimality criteria
本文的目的是开发工具,用于分析和构造具有长期平均最优性准则的奇异摄动(SP)最优控制问题的近最优解。我们利用的思想是,首先渐近近似一个给定的问题的最优控制的SP系统的某一平均最优控制问题,然后将此平均问题转化为一个无限维(ID)的线性规划(LP)问题,然后近似后者的半无限LP问题。我们表明,这些半无限LP问题的最优解和它们的最优解(可以找到一个可用的LP软件的修改的帮助下)允许一个构建近最优控制的SP系统。我们证明了一个数值例子的建设。
2014-08-19 math.OC
On second order conditions for singular optimal control of port-Hamiltonian systems
TU Berlin(柏林工业大学);FGV EMAp(巴西圣地亚哥基金会应用数学学院)
本文研究了端点哈密顿系统非线性奇异最优控制问题,推导了二阶最优条件并扩展到非线性描述系统。
2025-11-26 math.OC
Minimum-time strong optimality of a singular arc: the multi-input non involutive case
考虑多输入控制仿射系统的最小时间问题,其中我们假设被控向量场生成一个非对合的常维分布,并且我们不假设控制的先验界.我们使用Hamilton方法证明了一个合适的二阶变分与Pontryagin奇异弧的相关性足以证明其强局部最优性。我们提供了一个应用程序的Dubins问题的推广的结果。
2014-04-29 math.OC
Second order necessary and sufficient optimality conditions for singular solutions of partially-affine control problems
在这篇文章中,我们研究系统的最优控制问题,是仿射的一些控制变量和非线性的其他有关。我们考虑了许多等式和不等式约束的初始值和最终值的状态。研究了这类问题的奇异最优解,得到了积分形式的弱最优性的二阶充要条件。我们还得到了Goh点态必要最优性条件。我们给出一个例子来说明结果。
2017-07-11 math.OC
Singular Arcs in Optimal Control: Closed-loop Implementations without Workarounds
本文提出利用集成残差方法(IRM)在经济模型预测控制框架下求解含奇异弧的最优控制问题,无需特殊处理即可抑制波动,实现闭环结果与解析最优解高度吻合。
2025-04-23 cs.SY eess.SY math.OC
Stochastic Singular Linear Systems and Related Linear-Quadratic Optimal Control Problems under Finite and Infinite Horizons
本文研究随机奇异线性系统的适定性条件,将有限与无限时域线性二次最优控制问题转化为标准形式,建立PBH秩判据并给出最优控制反馈解。
2024-09-03 math.OC
Distributed sub-optimal resource allocation via a projected form of singular perturbation
研究了资源分配问题的分布式优化问题,提出了一种次优连续时间算法。我们的算法具有较低的阶动态比别人,以减少计算和通信的负担,并适用于重量平衡图。与现有的次优算法相比,该算法能够同时处理局部集合约束和耦合的不等式约束,并且消除了对费用函数二次可微的要求.然而,该算法是不容易分析,因为它涉及奇异扰动型动力学投影不可微的右手边。我们克服了遇到的困难,并获得的结果,包括存在的平衡,次优,算法的收敛性。
2020-02-12 math.OC
Optimal Liquidation in Target Zone Models and Neumann Problem of Backward SPDEs with Singular Terminal Condition
利用动态规划方法研究了目标区模型中的最优清算问题。这样的控制问题允许随机微分方程的反射和随机系数。值函数的特征在于具有奇异终端条件的倒向随机偏微分方程(BSPDE)的Neumann问题。讨论了这类倒向随机微分方程强解的存在唯一性,从而得到了最优反馈控制。此外,还证明了一般半线性倒向随机微分方程Neumann问题强解的唯一存在性,一个比较定理,以及正倒向随机微分方程与倒向随机微分方程之间的一个新联系.
2019-12-16 math.OC
An adaptive adjoint-oriented neural network for solving parametric optimal control problems with singularities
ShanghaiTech University(上海科技大学);Shanghai Lixin University of Accounting and Finance(上海立信会计金融学院)
本文提出自适应伴随导向神经网络,用于求解具有奇点的参数最优控制问题,通过结合深度自适应采样技术提升模型泛化能力。
2025-12-21 math.OC
Hidden regularity in singular optimal control of port-Hamiltonian systems
针对线性端口哈密顿系统最小能量供应的状态转移问题,通过刻画最优性微分代数系统的正则性并提出秩最小二次扰动方法,解决了奇异弧下最优控制难以确定的难题。
2023-11-20 math.OC
Second-order sufficient conditions for sparse optimal control of singular Allen--Cahn systems with dynamic boundary conditions
本文研究了具有动态边界条件的Alen-Cahn型抛物型初边值问题的最优控制。相场系统的这种类型的管理与非保守的顺序参数发生在容器和其表面上,分别耦合扩散相变过程的演变。它被假定为非线性函数驱动的物理过程中的体积和表面上的对数型的双阱势的导数成为奇异的边界上的各自的定义域。对于这样的系统,最优控制问题在过去已经被研究过。我们在这里集中的情况下,当成本功能的最优控制问题包含一个不可微的长期一样,$L^1$ -规范导致稀疏的最优控制。对于这种情况,我们得到了局部最优控制的二阶充分条件。
2023-03-29 math.OC
Singular extremals of optimal control problems with $L^1$ cost
SISSA(斯萨高等研究学院)
本文研究了具有 $L^1$ 成本的最优控制问题,提出奇极值的强广义勒杰兰-克勒布施条件,并证明其对于局部强最优性的必要性。
2025-11-30 math.DS math.OC
Extended Mean Field Games with Singular Controls
本文建立了一类具有奇异控制的平均场对策的均衡结果的存在性。交互通过状态和控件进行。使用了松弛的解决方案。为了规避紧度问题,我们首先考虑相应的连续控制而不是奇异控制的平均场博弈,然后进行近似,从而证明均衡的存在性。
2022-05-07 math.OC
Optimality of doubly reflected Levy processes in singular control
考虑一类双边奇异控制问题。一个控制器增加或减少一个给定的谱负Levy过程,以使总成本最小化,其中总成本包括运行成本和控制成本,后者与控制的大小成比例。我们提供了一个充分条件的双障碍策略的最优性,特别是表明,它保持运行时的费用函数是凸的。利用双反射Levy过程的涨落理论,我们用标度函数简明地表示了最优策略和价值函数。数值算例验证了分析结果。
2015-02-05 math.OC math.PR
Mean Field Games with Singular Controls
本文建立了具有奇异控制的平均场对策松弛解的存在性。我们还证明了近似的解决方案的结果,为一个特定的一类MFG的奇异控制的解决方案,分别控制规则,为MFG的纯定期控制。我们的存在性和逼近结果强烈依赖于使用的Skorokhod $M_1$拓扑上的càdlàg函数的空间。
2017-08-03 math.OC
Singular Arcs on Average Optimal Control-Affine Problems
Escola de Matemática Aplicada, Fundação Getulio Vargas EMAp-FGV(应用数学学院,巴西瓦图里奥·热图利奥基金会)
本文研究了系统参数服从概率分布的平均性能最优控制问题,采用庞特里亚金极大值原理刻画反馈形式的奇异弧,并通过生物灭虫技术验证方法的有效性。
2025-03-26 math.OC
Approximation of Mean Field Games to N-Player Stochastic Games, with Singular Controls
本文证明了具有奇异控制的$N$ -局中人随机对策(速度有界或有限变差)都可以近似为具有速度有界的奇异控制的平均场对策(MFG).更具体地,它示出了i)具有有界速度的奇异控制的MFG的最优控制$θ$被示出为具有$ε_N = O(\frac{1}{\sqrt{N}})$的具有有界速度的奇异控制的$N$ -玩家博弈的$ε_N$-NE,以及(ii)该MFG的最优控制是具有有限变化的奇异控制的$(ε_N + ε_θ)$ -NE到$N$ -玩家博弈,其中,$ε_θ$是取决于$θ$的误差项。这项工作概括了经典的结果近似$N$ -玩家游戏的MFG,允许不连续的控制。
2020-04-26 math.OC
Optimal Control Problems with Nonlocal Conservation Laws: Existence of Optimizers and Singular Limits in Approximations of Local Conservation Laws
University of Rostock(罗斯托克大学);Friedrich-Alexander-University Erlangen-Nürnberg(埃尔朗根-纽伦堡弗里德里希·阿历山大大学)
本文研究非局部守恒律下的最优控制问题,证明了优化解的存在性,并展示了当非局部核趋近于狄拉克分布时,解向局部守恒律问题的收敛性,同时提供了数值验证。
2025-12-19 math.OC
Singular perturbations in stochastic optimal control with unbounded data
研究了一类具有无界数据的双尺度随机控制系统的奇异扰动。这些假设旨在涵盖深度神经网络的一些松弛问题。构造了HJB型抛物型方程的有效Hamilton量和初值,证明了其值函数收敛于极限(有效)Cauchy问题的解.我们使用的概率,黏性解和均匀化的方法。
2023-03-28 math.AP math.OC math.PR
The $H^{\infty}$-control problem for parabolic systems with singular Hardy potentials
我们解决了具有分布扰动的无穷维抛物型边界控制系统的状态反馈$H^{\infty}$ -控制问题,并将结果应用于分布控制和边界控制情况下具有奇异性的Hardy势方程.
2023-03-28 math.OC
Averaging and linear programming in some singularly perturbed problems of optimal control
本文旨在发展一种分析和构造无限时间范围内奇异摄动(SP)最优控制问题(即SP系统的最优控制问题)的近最优解的装置。我们主要集中在时间折扣准则的问题,但结果的可能性,以周期最优化问题进行了讨论。我们的考虑是基于较早的结果平均SP控制系统和最优控制问题的线性规划配方。我们利用的思想是,首先渐近近似一个给定的SP系统的最优控制问题的某个平均的最优控制问题,然后将此平均问题重新表示为一个无限维(ID)线性规划(LP)问题,然后近似后者的半无限LP问题。我们表明,这些半无限LP问题的最优解和它们的最优解(可以找到一个可用的LP软件的修改的帮助下)允许一个构建近最优控制的SP系统。我们证明了两个数值例子的建设。
2014-08-19 math.OC
An optimal multibarrier strategy for a singular stochastic control problem with a state-dependent reward
本文研究奇异随机控制问题,针对谱负Lévy过程建立单屏障策略最优性条件,并验证布朗运动情形下多屏障策略的最优性,同时给出计算屏障值的算法。
2024-07-16 math.OC
A complete classification of control sets for singular linear control systems on the Heisenberg group
Yildiz Technical University(伊尔迪兹理工大学);Universidade Estadual de Campinas(坎皮纳斯州立大学)
本文在李代数秩条件下,通过分析2×2子矩阵的迹和行列式,完全刻画了海森堡群上奇异线性控制系统的控制集。
2025-10-09 math.OC
Numerical Solutions of Optimal Risk Control and Dividend Optimization Policies under A Generalized Singular Control Formulation
本文发展了求解最优红利支付和再保险策略的数值方法。引入了一种广义奇异控制的盈余和折扣支付函数,其中盈余模型的状态切换过程受到常规和奇异控制。为了逼近价值函数和最优控制,利用马尔可夫链逼近技术构造了一个具有两个分量的离散时间受控马尔可夫链。给出了逼近序列收敛于盈余过程和值函数的证明。比例和超额损失再保险的例子来说明数值方法的适用性。
2011-11-10 math.OC math.PR q-fin.CP
Time-Optimal Trajectories of Generic Control-Affine Systems Have at Worst Iterated Fuller Singularities
本文研究了n维流形上单输入仿射控制系统时间最优轨线的正则性问题。我们证明,在一般条件下的漂移和控制向量场,任何控制u与最佳轨迹是光滑的可数集的时间。更准确地说,存在一个整数K,只依赖于维数n,使得u的非光滑集由孤立点、孤立点的累积等组成,直到K阶迭代累积。
2018-05-22 math.DG math.OC
The singular set and aspects of global control dynamics
控制系统的全局方法,我们一直在追求的其他工作有利于通过控制实现动态的研究。它采用某些全局定义的几何对象,并试图在一般情况下描述它们。在这项工作中,我们定义了奇异集,并研究了它的一些一般性质。然后,我们简要地研究其在控制动力学的全球设计中的作用。
2018-12-12 math.OC
Singular Optimal Controls for Stochastic Recursive Systems under Convex Control Constraint
本文研究了由正倒向随机微分方程(简称FBSDEs)所控制的系统的两类奇异最优控制(简称SOC)问题,其中控制分为正则控制和奇异控制两部分.漂移项和扩散项都可以涉及常规控制变量。正则控制域被假定为凸的。在一定的假设下,在Malliavin演算的框架下,我们得到了经典意义下随机SOC的逐点二阶必要条件。这个条件是由两个伴随过程,一个极大条件的哈密尔顿支持一个说明性的例子。得到了最优奇异控制的一个新的必要条件。此外,作为一个副产品,SOC的验证定理推导通过黏性解不涉及任何导数的价值函数。值得指出的是,该定理比限制性经典验证定理具有更广泛的适用性。最后,在不假设值函数足够光滑的情况下,讨论了最大值原理与动态规划原理之间的联系。
2020-12-21 math.OC
A general necessary and sufficient optimality conditions for singular control problems
我们考虑一个随机控制问题,其中严格(经典)控制集不一定是凸的,变量控制有两个组成部分,第一个是绝对连续的,第二个奇异。该系统是由一个非线性随机微分方程,其中的绝对连续的控制分量进入漂移和扩散系数。通过引入一种新的方法,我们建立了两个模型的最优性条件。第一种是松弛奇异控制,它们是第一个分量是测度值过程的一对过程。第二个是第一个的特殊情况,涉及严格的奇异控制问题。这些结果是以全局随机最大值原理的形式给出的,只使用了一阶展开式和相应的伴随方程。这改进和推广了以往关于受控随机微分方程的最大值原理的工作。
2008-12-20 math.OC math.PR
Singular Limit of Two Scale Stochastic Optimal Control Problems in Infinite Dimensions by Vanishing Noise Regularization
本文研究了具有圆柱噪声和可能退化扩散的两尺度无限维随机控制系统的值函数的极限。该极限被表示为一个新的简化控制问题(在一个简化的状态空间上)的值函数。圆柱形噪声的存在阻止了HJB方程的黏性解极限的表示,而扩散系数的简并阻止了经典的Bjm的表示。我们使用消失噪声正则化技术。
2021-03-30 math.OC
Reinforcement learning for irreversible reinsurance problems: the randomized singular control approach
Tsinghua University(清华大学);The Hong Kong Polytechnic University(香港理工大学)
研究无限期不可逆再保险问题的连续时间强化学习,提出含辅助奇异控制和熵正则化的随机化方法,将其表述为两阶段最优控制问题,建立平衡奇异控制律存在性,并用参数化和神经网络设计算法,数值实验展示优越收敛性。
2026-07-20 math.OC
Singular optimal control of stochastic Volterra integral equations
研究了随机Volterra积分方程的最优奇异正则组合控制,其中解X^{u,n}(t)=X(t)由X(t)= n(t)+ \int_{0}^{t} }b(t,s,X(s),u(s))ds+ \int_{0}^{t} σ(t,s,X(s),u(s))dB(s)+ \int _{0}^{t} \int_{0}^{t} h(t,s)d n(s)给出.这里dB(s)表示布朗运动Itô型微分,dB(s)表示奇异控制(关于勒贝格测度在时间t上奇异),u表示正则控制(关于勒贝格测度绝对连续)。这样的系统可以例如用于对具有记忆的群体的收获进行建模,其中X(t)表示时间t处的群体密度,并且奇异控制过程f表示收获努力率。对于给定的函数f_{0}、f_{1}和g,来自收获的总收入由J(u,t)=E[ \int _{0}^{T} \int_{0}^{T} f_{0}(t,X(t),u(t))dt+ \int _{0}^{T} \int_{0}^{T} f_{1}(t,X(t))d dt(t)+g(X(T))]表示,其中T>0是表示收获的终止时间的常数。请注意,允许控制是奇异的是很重要的,因为在某些情况下,最优控制就是这种类型。利用Hida-Malliavin演算,证明了控制最优性的充分条件和必要条件。由此得到一类新的具有奇异漂移的倒向随机Volterra积分方程.最后,为了说明我们的结果,我们应用它们来讨论…
2021-04-14 math.OC math.PR
Games of singular control and stopping driven by spectrally one-sided Levy processes
研究了一个零和对策,其中谱单边Levy过程的演化被奇异控制器修改并被停止器终止。奇异控制器使运行费用、控制费用和终端费用的期望值最小,而阻塞器使它们最大。利用涨落理论和标度函数,我们得到了博弈的一个鞍点和价值函数。文中还给出了位相型Levy过程下的数值例子。
2014-08-07 math.OC
Boundary controllability for a coupled system of degenerate/singular parabolic equations
本文研究了两个耦合退化/奇异抛物型方程系统的边界能控性,其中控制只作用于一个方程。我们分析了近似和零边界可控性。此外,我们提供了一个零控制成本的估计。证明的基础上使用的矩法Fattorini和罗素连同一些结果双正交家庭。
2021-04-01 math.OC
Approximation of N-player stochastic games with singular controls by mean field games
Department of Industrial Engineering and Operations Research, University of California at Berkeley(加州大学伯克利分校)
本文研究具有奇异控制的N人随机博弈,证明有界速度奇异控制平均场博弈的最优控制可分别以O(1/√N)和O(1/√N)+ε_θ的误差逼近有界速度与有限变差奇异控制的N人博弈纳什均衡,从而将平均场博弈逼近理论推广到不连续控制情形。
2022-05-02 math.OC
A Non Convex Singular Stochastic Control Problem and its Related Optimal Stopping Boundaries
已知具有凸性能准则的奇异随机控制(SSC)的问题与最优停止的相关问题之间的等价性,参见例如Karatzas和Shreve [SIAM J. Control Optim. 22(1984)]。本文的目的是调查多远这种类型的连接推广到一个非凸的问题,购买电力。在经典的等价打破,我们提供了替代连接到最优停止问题。我们考虑了一个非凸的无限时域SSC问题,其状态由一个代表实值商品价格的不受控扩散和一个代表库存的受控递增有界过程组成。我们分析的几何形状的动作和不动作区域的特征(最佳)的边界。与凸SSC问题的情况下,我们发现,最佳的边界可能是反射和排斥,这是很自然的解释问题与任意停止SSC之一。
2014-11-12 math.OC q-fin.PM
Optimal Policy Characterization for a Class of Multi-Dimensional Ergodic Singular Stochastic Control Problems
Politecnico di Milano(米兰理工大学);Bielefeld University, Center for Mathematical Economics (IMW)(比勒费尔德大学,数学经济中心(IMW))
本文研究多维ergodic奇异随机控制问题,通过Skorokhod反射在Y依赖自由边界中确定最优策略,并解决两个二维最优库存管理问题,首次将多维ergodic奇异随机控制与最优停止联系起来。
2026-06-28 math.OC math.PR
Singular Infinite Horizon Quadratic Control of Linear Systems with Known Disturbances: A Regularization Approach
研究了具有已知附加干扰的线性系的无穷时域二次型性能指标的最优控制问题。该问题的特点是成本泛函中控制成本的权重矩阵是奇异的。由于这种奇异性,该问题既不能通过应用庞特里亚金的最大值原理来求解,也不能使用Hamilton-Jacobi-Bellman方程方法来求解,即该问题是奇异的。由于控制成本的权矩阵是奇异的,一般不为零,只有一部分控制坐标是奇异的,而其他的是正则的。这个问题通过正则化方法来解决。也就是说,它是与一个新的最优控制问题相同的动力学方程。在这个新的问题中的成本泛函是原来的成本泛函和一个无限的水平积分的平方的奇异控制坐标与一个小的正权重的总和。由于这个系数很小,新问题是一个部分廉价控制问题。利用摄动技术,这部分廉价的控制问题进行了渐近分析。在此基础上,导出了原问题中代价泛函的下确界,并设计了最小化的状态反馈控制序列。奇异轨迹跟踪的说明性例子。
2016-03-06 math.OC
Singular Perturbation-based Reinforcement Learning of Two-Point Boundary Optimal Control Systems
这项工作提出了一种学习系统的技术,其中的学习过程是由系统的物理知识指导的。特别地,我们利用强化学习解决了具有未知模型动态的线性时变系统的两点边界最优控制问题。借用奇异摄动理论的技巧,我们将时变最优控制问题转化为一对时不变的子问题。这允许利用偏离策略的迭代方法来学习控制器增益。我们表明,基于学习的控制器的性能近似的基于模型的最优控制器和近似的精度提高的时间范围的控制问题的增加。最后,通过仿真实例验证了本文的结论.
2021-04-29 cs.SY eess.SY math.OC
A Reinforcement Learning Framework for Some Singular Stochastic Control Problems
Tsinghua University(清华大学);The Hong Kong Polytechnic University(香港理工大学)
本文提出一个连续时间强化学习框架,用于解决无熵正则化的奇异随机控制问题,通过试错过程识别最优区域,并发展了策略改进定理和q函数算法。
2026-08-25 math.OC
Optimal Singular Dividend Problem under the Sparre Anderson Model
考虑一家保险公司,其准备金过程遵循Sparre Anderson模型。本文研究了Bai,Ma和Xing [9]等公司的最优股利分配问题。然而,我们取消了对股息率的常数限制,即最优化问题是奇异型的。在这种情况下,值函数不再有界,相应的HJB方程是一个包含一阶积分-微分算子和梯度约束的变分不等式。我们使用其他的技巧来证明值函数的正则性,并表明值函数是相关的HJB方程的约束黏性解。此外,我们证明了值函数是一类下解的上确界的上半连续包络。
2018-07-21 math.OC
Equilibrium for regular-singular control under mean-variance criterion: A unified approach via control laws
Tsinghua University(清华大学);The Hong Kong Polytechnic University(香港理工大学)
本文针对均值方差准则下的混合正则-奇异控制问题,在个人内博弈框架中提出新均衡概念,推导了均衡的数学刻画,并为再保险问题构造了显式耦合均衡解,退化情形下解可简化为独立单控制均衡组合。
2026-08-20 math.OC
A Hamiltonian Algorithm for Singular Optimal LQ Control Systems
本文提出了一种哈密顿算法,理论上和数值上都得到了实现Pontryagine最大值原理的奇异线性二次型最优控制问题的简化方程。该算法的灵感来自著名的Rabier-Rheinhboldt约束算法用于解决微分-代数方程。它的几何内容是充分利用实施的Hamilton扩展,这是更接近Gotay-Nester前辛约束算法用于解决奇异哈密顿系统。这样,给出了一个最优反馈以隐式形式给出的最优控制问题,得到了描述Pontryaguine最大值原理最大值原理的一阶微分条件的相容方程组.这样的方程被证明是哈密尔顿和一组第一类约束对应的控制,没有确定的,得到明确的。该算法的强度显示通过展示一个数值实现与部分反馈的控制,提供了一个部分最优反馈法的问题。数值算法的灵感来自作者以前的分析奇异线性-二次最优控制问题的一致性条件。数值算法是显式的哈密顿。它表明,只有两种可能性可以出现约化的哈密顿PMP:即简化方程是完全确定的,或者它们依赖于一个家庭的自由参数,将被称为“规范”控制的第一类约束所确定的系统。这些额外自由度的存在为寻求解决方案提供了新的可能性。通过讨论各种相关的数值实验,算法的稳定性的数值证据。
2012-04-11 math.OC
Maximum Principle for State-Constrained Optimal Control Problems of Volterra Integral Equations having Singular and Nonsingular Kernels
本文研究了具有奇异核和非奇异核的Volterra积分方程所描述的状态方程具有终端约束和不等式约束的最优控制问题。奇异核引入了状态轨迹相对于$α\in (0,1)$参数的异常行为。我们的状态方程是能够涵盖各种状态动力学,如任何类型的Volterra积分方程与非奇异的内核,分数微分方程(在Riemann-Liouville或Caputo的意义上),和常微分状态方程。利用广义Gronwall不等式和具有奇异和非奇异被积函数的积分的适当估计,我们得到了状态方程的适定性(在$L^p$和$C$空间中)和精确估计.然后,我们证明了相应的状态约束最优控制问题的最大值原理。在推导最大值原理时,由于存在状态约束,控制空间又是一个可分的度量空间,我们必须利用Ekeland变分原理和尖峰变分技术,结合距离函数的内在性质和广义Gronwall不等式,得到所需的最优性必要条件。实际上,由于状态方程既有奇异核又有非奇异核,所以本文的最大值原理是新的,其证明比现有文献中研究的Volterra积分方程问题更复杂.最后给出了算例来说明本文的理论结果。
2022-06-07 math.OC