arXivDaily arXiv每日学术速递 周一至周五更新
arXiv周末暂无论文更新,休息一下吧,周末愉快~~
arXiv 2510.20152eess.SYcs.SY
收藏

基于不确定参数的系统控制软切换专家策略

Soft Switching Expert Policies for Controlling Systems with Uncertain Parameters

Graduate School of Engineering The University of Osaka(大阪大学大学院工学研究科)

Junya Ikemoto

AI总结:

本文提出基于仿真的强化学习算法,通过两阶段策略缓解现实与仿真间的差距,利用在线凸优化实现控制策略的自适应切换,降低学习复杂度。

摘要:

本文提出了一种基于仿真的强化学习算法,用于控制具有不确定和变化系统参数的系统。尽管模拟器在安全学习控制策略方面很有用,但现实与仿真的差距仍然是主要挑战。为缓解这一挑战,我们提出了一种两阶段算法。首先,在模拟器中为具有不同系统参数的系统学习多个控制策略。其次,对于实际系统,利用基于观察的在线凸优化算法自适应切换控制策略。这种方法预计可以比现有依赖单一策略解决现实差距的方法降低学习复杂度。

英文摘要:

This paper proposes a simulation-based reinforcement learning algorithm for controlling systems with uncertain and varying system parameters. While simulators are useful for safely learning control policies, the reality gap remains a major challenge. To alleviate this challenge, we propose a two-stage algorithm. First, multiple control policies are learned for systems with different system parameters in a simulator. Second, for a real system, the control policies are adaptively switched using an online convex optimization algorithm based on observations. This approach is expected to reduce learning complexity compared with existing approaches that rely on a single policy to address the reality gap.

机构、总结、中文摘要均由AI分析而来,可能存在错误,请以论文正文为准。

↑