Cesàro 值迭代
The Cesàro Value Iteration
AI总结:
本文研究确定性系统在无限时间 horizon 下的最优控制问题,针对经典值迭代不收敛的情况,引入Cesàro均值定义无限时间 horizon 最优控制问题及价值函数,并证明Cesàro值迭代在周期最优操作行为的特殊情况下收敛。
摘要:
在本文中,我们考虑确定性系统在无限时间 horizon 下的无折扣最优控制问题,其状态和输入空间是不可数的。我们特别针对经典值迭代不收敛的情况进行研究。对于此类系统,我们使用Cesàro均值来定义无限时间 horizon 最优控制问题及相应的无限时间 horizon 价值函数。此外,针对此价值函数,我们引入Cesàro值迭代并证明其在系统具有周期最优操作行为的特殊情况下收敛。对于此类情况,我们还证明Cesàro价值函数在后者良好定义时可以恢复无折扣无限时间 horizon 最优成本。
英文摘要:
In this paper, we consider undiscouted infinite-horizon optimal control for deterministic systems with an uncountable state and input space. We specifically address the case when the classic value iteration does not converge. For such systems, we use the Ces`aro mean to define the infinite-horizon optimal control problem and the corresponding infinite-horizon value function. Moreover, for this value function, we introduce the Cesàro value iteration and prove its convergence for the special case of systems with periodic optimal operating behavior. For this instance, we also show that the Cesàro value function recovers the undiscounted infinite-horizon optimal cost, if the latter is well-defined.
机构、总结、中文摘要均由AI分析而来,可能存在错误,请以论文正文为准。