An infinite-horizon optimal control problem and the stability of the adjoint variable (in Russian)
在无限时域最优控制问题中,伴随变量的稳定性意味着伴随变量沿着最优解在无穷远处消失。
2010-12-16 math.OC
The Maximum Principle for Discounted Optimal Control of Partially Observed Forward-Backward Stochastic Systems with Jumps on Infinite Horizon
研究了无穷水平上带跳的部分可观测正倒向随机系统的折扣最优控制问题。控制域是凸的,并引入了一类无穷时域观测方程。得到了带跳的无穷时域正(倒)向随机微分方程的唯一可解性,并对后向情形作了进一步的推广分析。首先给出并证明了临界变分不等式的一些新的估计。然后通过引入无穷水平伴随方程,得到了一个遍历的最大值原理,该方程的唯一可解性是必要的。最后,对两类有代表性的无限时域随机系统及其相关的最优控制进行了比较。
2022-01-02 math.OC
Infinite-horizon problems under periodicity constraint
本文研究了非周期拉格朗日函数在周期函数空间上的无限时域最优化问题。主要的策略是通过引入一个平均算子将问题归结到有限水平上,然后给出了相应的平均拉格朗日量的存在性结果和必要的最优性条件.
2016-02-02 math.OC
Infinite horizon optimal control of forward-backward stochastic differential equations with delay
研究了一类由正倒向时滞随机微分方程控制的无限时域系统的最优控制问题。在无限时域上,导出了部分信息下最优控制的充分必要最大值原理。我们说明我们的结果的应用程序的最优消费问题的递归效用从现金流延迟。
2013-12-06 math.OC
A Time-Inconsistent Stochastic Optimal Control Problem in an Infinite Time Horizon
本文研究无限时间跨度下含非退化扩散的时间不一致随机最优控制问题,通过假设长期后理性,将其分解为无限时间一致问题与有限时间不一致问题,并构造均衡策略,涵盖Bolza型与递归成本问题。
2025-09-18 math.OC
When does stabilizability imply the existence of infinite horizon optimal control in nonlinear systems?
研究了当被控系统是指数可镇定或稳定时,无限时域最优控制的存在性问题。根据稳定性、可镇定性、可检测性和增长条件,确定了一类存在无限时域最优控制的非线性控制系统。然后应用所得结果估计相应的哈密顿系统中稳定流形的存在区域。所得结果还应用于非线性有限时间最优控制问题的收费公路性质的几何分析。
2021-06-08 math.OC
On extension for infinite horizon game of pursuit-evasion
构造了一个具有无限时域的冲突控制问题的推广。这个扩张就是限制对策的投射极限。研究了“目标集灵敏度”与最优控制存在性的关系。特别关注的是“联合控制/放松控制”的追逃对策。
2010-12-16 math.OC
Treating the Future Equally: Solving Undiscounted Infinite Horizon Optimization Problems
无限时域最优化问题伴随着两个困惑。首先,效用序列的无穷级数可能会发散。第二,在无限终端时间的边界条件可能不会严格表达。在本文中,我们证明了在两个相当一般的条件下,在超越准则的意义下,未贴现的有限时间问题的解的极限是最优的可行路径中的未贴现的无限时间问题。应用到一个简单的拉姆齐模型,我们表明,派生的路径包含有趣的属性。我们也理解的合法性,通过解决的困惑与非标准的参数导出路径。
2007-05-28 math.OC
Lightening of Assumptions for Pontryagin Principles in Infinite Horizon and Discrete Time
在无限时域和离散时间框架下,我们建立了Pontryagin的最大值原理,其假设条件弱于已有结果.我们避免了连续性和Fr{é} chet-可微性和线性独立性的几个假设。MSC 2010:49J21、65K05、39A99。
2016-02-02 math.OC
Infinite Horizon Impulse Control of Stochastic Functional Differential Equations
研究了Lévy过程驱动的随机微分方程在系数上附加的$L^p$ -利普希茨条件下的脉冲控制问题.我们的研究结果,这是第一次推导出一个一般的随机最优化问题在无限时域脉冲控制,然后应用到控制SFDE的情况下,适用于无限时域以及随机时域设置。所采用的方法来显示存在的最优控制是一个概率的基础上的概念Snell信封。
2020-08-17 math.OC
Technical Report: Infinite Horizon Discrete-Time Linear Quadratic Gaussian Tracking Control Derivation
这份技术报告是目前正在审查的论文“差异化私人LQ控制”的补充。本技术报告提供了一个完整的推导无限时域离散时间线性二次高斯跟踪控制器,我们无法找到现有的文献。
2018-12-06 math.OC
A maximum principle for infinite horizon delay equations
证明了无穷水平上随机时滞方程最优控制的一个最大值原理。建立了该问题的第一、第二充分随机最大值原理和必要条件。我们说明我们的结果的应用程序的最优消费率从一个经济量。
2012-06-28 math.OC
Higher-order infinite horizon variational problems in discrete quantum calculus
利用离散量子算子得到了变分法高阶无穷视界问题的最优性条件。
2011-12-04 math.OC
Linear Programming Formulations of Deterministic Infinite Horizon Optimal Control Problems in Discrete Time
本文研究离散时间中具有时间折扣和时间平均准则的无限时域最优控制问题。我们建立,这些问题涉及到某些无限维线性规划(IDLP)问题。我们还建立了时间折扣和长期平均准则下问题的最优值之间的渐近关系。
2017-02-02 math.OC
Second-Order Conditions for Infinite-Horizon Semilinear Parabolic Control Problems without Tikhonov Regularization
Universidad de Cantabria(坎塔布里亚大学);Eberhard-Karls-Universität Tübingen(蒂宾根大学)
本文研究了带有Neumann边界条件、控制约束和无限时间 horizon 的半线性抛物型最优控制问题,提出二阶最优性条件并证明有限时间问题的局部最优状态在时间趋于无穷时逼近无限时间问题的局部最优状态。
2026-03-19 math.OC
On Supervised On-line Rolling-Horizon Control for Infinite-Horizon Discounted Markov Decision Processes
本文研究了具有无限时域折扣期望回报准则的马尔可夫决策过程的滚动时域控制问题。与经典的值迭代方法不同,本文提出了一种基于策略迭代的异步在线算法,并结合策略切换的多策略改进方法。通过仅在当前访问状态下更新当前解来生成预测时域子MDP的单调改进解序列,实际上构建了无限时域上MDP的滚动时域控制策略。如果有“主管”的反馈,也可以在更新时纳入。我们专注于与MDP的过渡结构的收敛问题。该算法在有限时间内实现整体收敛到最优预测策略或局部收敛到“局部最优”固定策略。
2022-06-04 math.OC
On Infinite-horizon Minimum Energy Control
针对线性时不变有限维系统,研究无限时域最小能量控制问题,证明其存在解当且仅当系统可镇定且矩阵A无虚特征值。
2025-02-25 math.OC
On the Optimal Solutions of the Infinite-Horizon Linear Sensor Scheduling Problem
研究了具有线性观测函数的线性高斯过程的无限时域传感器调度问题。最优无限时域调度的几个重要性质的推导。特别地,在一定的条件下,证明了最优无限时域平均每级费用和相应的最优传感器调度与初态的协方差阵无关.同时证明了最优估计费用可以用有限周期的周期调度任意逼近。此外,它表明,序列的平均每阶段的费用的最优调度必须收敛。这些理论结果为各种无限时域传感器调度算法的设计和分析提供了有价值的见解。
2014-03-20 math.OC
Linear Quadratic Stochastic Two-Person Zero-Sum Differential Games in an Infinite Horizon
研究了无限时间范围内常系数线性二次随机二人零和微分对策。引入了开环和闭环鞍点。闭环鞍点的存在性由代数Riccati方程在一定稳定条件下的可解性来刻画。使我们的方法有效的一个关键结果是一类线性倒向随机微分方程在无限水平上的唯一可解性。
2014-04-29 math.OC
Recursive Variational Problems in Nonreflexive Banach Spaces with an Infinite Horizon: An Existence Result
在非自反巴拿赫空间中研究了无穷维无穷维微分包含所支配的具有递归积分泛函的变分问题,并给出了一个存在性结果.在Cesari型条件下,我们在取值于Banach空间的索伯列夫空间中找到了一个最优解.我们还研究了微分包含初值问题解存在的充分条件。
2017-07-29 math.OC
Linear Programming Based Optimality Conditions and Approximate Solution of a Deterministic Infinite Horizon Discounted Optimal Control Problem in Discrete Time
最近的研究表明,离散时间的确定性无限时域折扣最优控制问题与某个无限维线性规划问题及其对偶问题密切相关。在本文中,我们使用这些结果建立这个最优控制问题的最优性条件,并应用它们来构造一个近最优控制。
2018-02-16 math.OC
Stochastic differential switching game in infinite horizon
本文研究了无限时域上的零和随机微分切换对策。我们证明了对策值的存在性,并将其刻画为双边障碍拟变分不等式系统的唯一黏性解。我们还得到了一个验证定理,提供了一个最优策略的游戏。最后,给出了两种区域的数值例子。
2018-05-03 math.OC
Transversality Conditions for Infinite Horizon Variational Problems on Time Scales
我们考虑无界时间尺度上的变分问题。证明了时间尺度上的Euler-Lagrange方程对无限视界问题的有效性,并给出了一个新的横截性条件。
2010-03-20 math.OC
A two-player game representation for a class of infinite horizon control problems under state constraints
本文给出了一类带状态约束的参数化无限时域控制问题的反馈律。我们提供了一个两个球员表示假设不定常动态和拉格朗日和设置约束仅仅是紧凑的。使用可行性结果最近调查的无限地平线设置存在的状态约束,我们扩展了一些已知的结果的线性二次调节器问题的控制问题的非线性动态的状态和仿射控制。在适当的可控性假设下,得到反馈律。
2020-03-02 math.OC
An approximate solution to the decentralized two-controller infinite-horizon scalar LQG problem: Part II- slow dynamics
继续论文的第一部分,我们考虑了具有两个控制器的标量分散平均费用无限时域LQG问题。本文针对系统特征值较小时的慢动态情形,证明了单控制器最优策略--线性策略--在所有分布式控制策略中是常数比最优的。
2013-08-23 math.OC
Pontryagin's Maximum Principle for Infinite Horizon Optimal Control Problems with Bounded Processes and with State Constraints
研究了一类带状态约束的无限时域最优控制问题。通过将针变分方法推广到无限水平情形,我们得到了一套完整的以Pontryagin最大值原理形式表示的强局部极小的最最优性条件,并证明了几个横截性条件在无穷远处的有效性.为此,我们在连续函数的空间中发展了一种收敛于无穷远点的方法。考虑包括最优性和横截性条件的新成果,在连续函数的巴拿赫空间,针变分方法和在无界时间范围上的状态约束的问题。
2020-07-19 math.OC
Approximation of Discrete-Time Infinite-Horizon Mean-Field Equilibria via Finite-Horizon Mean-Field Equilibria
该研究严格证明有限时域平均场博弈的均衡聚点可逼近无限时域的非平稳与平稳均衡,改进了迭代收缩率,推导了指数衰减误差界并提出新的唯一性判据,还可支撑未知系统下的学习逼近方法。
2025-09-01 math.OC
Seierstad Sufficient Conditions for Stochastic Optimal Control Problems with Infinite Horizon
针对无限时间水平的随机最优控制问题,基于Bismut-Pontryagin最大值原理中BSDEs描述的对偶变量随机性,提出了 overtaking 最优性的Seierstad充分条件的类似形式。
2025-04-17 math.OC
Infinite horizon stochastic optimal control with sign-changing discount factor
Université Paris-Dauphine, PSL Research University(巴黎第九大学,PSL研究大学);Collège de France(法兰西公学院)
研究具有变号贴现因子的无限时域随机最优控制问题,借助汉密尔顿-雅可比-贝尔曼方程,揭示了贴现因子依状态值变号的特性。
2026-07-16 math.OC
Stochastic Singular Linear Systems and Related Linear-Quadratic Optimal Control Problems under Finite and Infinite Horizons
本文研究随机奇异线性系统的适定性条件,将有限与无限时域线性二次最优控制问题转化为标准形式,建立PBH秩判据并给出最优控制反馈解。
2024-09-03 math.OC
Mean-Field Stochastic Control with Elephant Memory in Finite and Infinite Time Horizon
本文的目的是研究具有大象记忆的平均场随机微分方程驱动的系统的随机控制问题,即系统(象大象一样)永远不会忘记它的历史.我们研究了有限时域情形和无限时域情形。- 在有限水平情形下,给出了这类系统解的存在唯一性结果。此外,我们证明了充分以及必要的随机最大值原理的最优控制这样的系统。我们应用我们的结果来解决平均场线性二次控制问题。- 对于无限视界,我们得到了充分必要的最大值原理。作为一个例子,我们解决了一个最优消费问题的现金流建模的大象记忆平均场系统。
2019-06-21 math.OC
Dissipativity in infinite horizon optimal control and dynamic programming
本文扩展动态规划技术研究紧致控制不变集上具有状态无关最佳渐近平均成本的离散时间无限时域最优控制问题,通过分析耗散性与最优控制的相互作用,提出求解 shifted Bellman Equations 的新型递归方法。
2023-05-18 math.OC
Weak Local Extrema in Infinite Horizon Optimal Control Problems
本文研究无限时域最优控制问题。在加权函数空间中,利用极值问题的弱变分,以伴随方程和一个变分不等式的形式证明了其存在的必要条件。所得到的最优性条件包含几个横截性条件和Mangasarian型充分条件的有效性。在国家的限制存在所产生的困难进行了讨论。
2018-07-04 math.OC
Infinite Horizon Optimal Control Problems for a Class of Semilinear Parabolic Equations
研究半线性抛物型方程的无限时域开环最优控制问题。的控制受到成本功能,促进稀疏的时间。重点放在推导一阶最优性条件。这是不依赖于一个良好定义的控制到状态的映射在一个邻域的极小。证明的技术是基于一个家庭的有限时间问题的原问题的近似。最优性条件允许推导出时间上的最优控制的稀疏性。
2021-12-13 math.OC
Infinite Horizon Optimal Control Problems with Discount Factors
Universidad de Cantabria(坎塔布里亚大学);University of Graz(格拉茨大学);Austrian Academy of Sciences(奥地利科学院)
本文研究了受半线性抛物方程约束的无限 horizon 最优控制问题,探讨了不同折扣因子对二阶优化条件的影响,并证明了有限 horizon 问题对无限 horizon 问题的收敛性。
2026-04-23 math.OC
Optimality Conditions for Weak and Strong Local Extrema in Infinite Horizon Optimal Control Problems
本文总结了我们在无限时域最优控制方面的结果。在加权函数的框架下,给出了弱局部极小的最优性条件。此外,我们制定了庞特里亚金最大值原理的强局部极小的轨迹收敛于无穷远。所考虑的问题,要求和结果取决于函数空间的选择。
2018-07-04 math.OC
Constrained stochastic LQ control on infinite time horizon with regime switching
研究了具有区域切换、随机系数和锥控制约束的无限时域随机线性二次型(LQ)最优控制问题。为了解决这一问题,引入了两个新的扩展随机Riccati方程(ESRE)。通过有限时间范围内的ESRE序列证明了标准和奇异情形下非负解的存在性。在此基础上,利用一些近似技巧,我们得到了随机LQ问题的最优状态反馈控制和最优值。最后,我们应用这些结果来解决一个终身投资组合选择问题的跟踪给定的财富水平与政权切换和投资组合约束。
2021-12-27 math.OC
Infinite horizon sparse optimal control
讨论了一类具有$0<p\leq 1$的$L^p$型代价泛函的无限时域最优控制问题.研究了凸$p=1$情形和非凸$0<p<1$情形下最优控制的存在性,并分析了$L^p$型罚函数所促进的最优控制的稀疏结构.提出了一种动态规划方法来数值逼近相应的稀疏最优控制器。
2016-02-29 math.OC
The "Eating up Assumption", Transversality Conditions, and Steady States for Discrete Time Infinite Horizon Problems
本文考虑一般离散时间无限时域最优控制问题的最优解的构造。在修正的最优性准则的意义下,我们建立了最优性的充要条件。我们还考虑了横截性条件与稳态的关系。结果被应用到两个例子,以证明如何在本文中得到的新的横截性条件不同于以往文献中给出的。
2013-10-04 math.OC
Remarks on finite and infinite time-horizon optimal control problems
在最优控制问题的背景下,解决了能量类成本泛函的最小化问题。对于一般的一类动力系统,可能是不稳定的和非线性的自由动态,它表明,有限时间范围的最优控制问题的解决方案的序列近似的解决方案的模拟无限时间范围的问题。后者的解决方案和相应的最优成本值函数不被假定为已知的先验。数值模拟验证了几个例子的理论研究结果,包括由普通和偏微分方程的系统。
2022-12-05 math.OC
On a sufficient condition for infinite horizon optimal control problems
通过与Mangasarian充分性定理的比较,得到了新形式的充分最优性条件.由于隐含了超越最优性和弱超越最优性的概念,因此目标泛函的值既可以是有限的,也可以是无限的。例子,可以应用新的条件。当哈密顿量关于状态和控制是线性的时,这些条件是充分必要的。
2019-09-17 math.OC
Necessary Conditions for Infinite Horizon Optimal Control Problems Revisited
本文讨论了具有无限时域控制问题的最大值原理形式的最优性条件。由于采用了超越或弱超越最优性的概念,目标泛函既可以是有限值也可以是无限值。得到了新形式的最优性条件,并与文献中常用的横截性条件进行了比较。这些横截性条件可能会失败,而新的条件成立的例子。对于资本积累的Ramsey问题,导出了一个简单形式的最优性条件,该条件在零贴现情况下也成立.
2017-01-12 math.OC
Adaptive dynamic programming-based algorithm for infinite-horizon linear quadratic stochastic optimal control problems
研究了一类连续时间随机系统的无限时域线性二次型随机(LQS)最优控制问题。利用自适应动态规划(ADP)技术,提出了一种新的无模型策略迭代(PI)算法。该PI算法不需要系统系数矩阵的所有信息,仅利用在固定时间间隔上采集的输入和系统状态数据进行迭代。最后,通过数值算例验证了算法的可行性.
2022-10-10 math.OC
Model order reduction approaches for infinite horizon optimal control problems via the HJB equation
研究了偏微分方程无穷时域最优控制问题的反馈控制。该方法是基于Hamilton-Jacobi-Bellman(HJB)方程和模型降阶技术之间的耦合。众所周知,HJB方程遭受所谓的维数灾难,因此,降低系统的维数是强制性的。在这份报告中,我们专注于无限时域最优控制问题的二次成本泛函。我们比较了几种模型降阶法,如适当的正交分解,平衡截断和一个新的代数Riccati方程为基础的方法。最后,我们给出了数值例子,并讨论了几个不同的方法的特点分析的优点和缺点的减少方法。
2016-07-08 math.OC
Infinite horizon Stochastic Optimal Control for Volterra equations with completely monotone kernels
研究了具有完全单调核的无穷维积分微分方程在无穷水平上的最优控制问题,其中我们假设在引入控制时噪声进入系统.首先,我们将状态方程转化为一个半线性发展方程,可以用半群方法来处理。应用于最优控制提供了其他有趣的结果,并要求生成半群的性质的精确描述。主要工具是研究与重构问题相对应的无穷时域正倒向系统的可微性,以及相应的HJB方程的温和解的存在唯一性的证明。
2014-01-21 math.OC
Infinite-Horizon Linear-Quadratic Difference Games with Coupled Affine Inequality Constraints: Open-Loop Generalized Nash Equilibria
研究具有状态和控制变量耦合仿射不等式约束的确定性无限时域线性二次差分博弈,推导开环广义纳什均衡存在的必要条件,并在附加假设下通过关联两个无限时域耦合线性互补系统的平方可和解建立充分性,将问题转化为大规模线性互补问题求解。
2026-07-08 math.OC
Pattern preservation in finite to infinite-horizon optimal control problems for dissipative systems
Politecnico di Torino(都灵理工大学);Università di Udine(乌迪内大学);Aeronautics Institute of Technology (ITA)(航空技术学院)
研究耗散系统无限时域最优控制问题及其与有限时域公式的关系,通过存在强制存储函数时状态方程的耗散性,证明无限时域最优控制可由有限时域极限得到,建立相关理论联系并给出数值示例。
2026-07-07 math.OC
Robust Optimal Control Using Conditional RiskMappings in Infinite Horizon
本文利用一步条件风险映射建立了离散时间无限时域上受控马尔可夫过程的风险厌恶型总费用问题。假设非负的一步成本是下半连续的,但不一定有界。我们推导出了最优策略存在的条件,并通过在非常温和的条件下给出鲁棒动态规划方程来显式求解该问题。我们进一步给出了一个$ε$ -最优逼近的解决方案,并说明我们的算法在最优投资和LQ调节器问题的两个例子。
2018-06-04 math.OC
Non-optimality of conical parts for Newton's problem of minimal resistance in the class of convex bodies and the limiting case of infinite height
我们考虑牛顿的最小阻力问题,特别是我们解决的问题所产生的限制,如果高度趋于无穷大。我们建立的解决方案的存在性和缺乏径向对称的解决方案。此外,我们表明,某些圆锥部分包含在边界的凸体抑制最优性的经典牛顿问题的有限高度。这一结果被应用到某些机构在文献中考虑,这被证明是最佳的经典牛顿问题,我们表明,他们不是。
2021-05-11 math.OC
Deterministic Differential Games in Infinite Horizon Involving Continuous and Impulse Controls
考虑两人零和确定性微分对策,其中每个局中人在无限时间内同时使用连续控制和脉冲控制。我们假设脉冲是通项,而代价依赖于系统的状态。利用动态规划原理和黏性解方法证明了该博弈的Hamilton-Jacobi-Bellman-Isaacs(HJBI)偏微分方程(PDE)解的存在唯一性.在Isaacs条件下证明了上下值函数重合。
2022-09-22 math.OC
Linear-Quadratic Optimal Control for Mean-Field Stochastic Differential Equations in Infinite-Horizon with Regime Switching
本文研究切换状态下含条件平均场项的无限时域随机线性二次最优控制问题,通过正交分解推导出代数Riccati方程和倒向随机微分方程,并利用其可解性刻画闭环与开环最优策略。
2025-01-01 math.OC
Compactification Method in Linear Programming Approach to Infinite-Horizon Optimal Control Problems with a Noncompact State Constraint
针对离散时间无限时域最优控制中状态约束非紧的难题,本文采用Alexandroff紧化处理无界状态约束的无限维LP问题,并建立时间贴现与长期平均准则最优值间的渐近关系。
2023-04-24 math.OC
Mean-Field Linear-Quadratic Stochastic Differential Games in an Infinite Horizon
研究了无限水平上两人平均场线性二次非零和随机微分对策。开环和闭环纳什均衡的介绍。利用无穷水平上平均场正倒向随机微分方程组的可解性和代价泛函的凸性刻画了开环Nash均衡的存在性,并通过求解两个耦合的非对称代数Riccati方程组给出了开环Nash均衡的闭环表示.闭环Nash均衡的存在性是由两个耦合的对称代数Riccati方程组的可解性来表征的。本文还研究了无限时间范围内两人平均场线性二次零和随机微分对策。利用具有静态稳定解的两个耦合广义代数Riccati方程组的可解性,证明了开环和闭环鞍点的存在性.讨论了无穷时域平均场线性二次随机最优控制问题,证明了开环可解性与闭环可解性是等价的。
2021-04-07 math.OC
A Linear-Quadratic Optimal Control Problem for Mean-Field Stochastic Differential Equations in Infinite Horizon
研究了无穷域上常系数平均场随机微分方程的线性二次型(简称LQ)最优控制问题。研究了控制系统的可镇定性,并讨论了LQ问题的适定性。最优控制可以表示为一个包含状态及其均值的线性状态反馈,通过求解两个代数Riccati方程。利用半定规划方法研究了这类Riccati方程的可解性。
2012-08-27 math.OC