arXivDaily arXiv每日学术速递 周一至周五更新
arXiv周末暂无论文更新,休息一下吧,周末愉快~~
arXiv 1509.01186eess.SYcs.SY
收藏

基于最终时间 horizon 的模型驱动强化学习

Model Based Reinforcement Learning with Final Time Horizon Optimization

Georgia Institute of Technology(佐治亚理工学院)

Wei Sun, Evangelos Theodorou, Panagiotis Tsiotras

AI总结:

本文提出一种基于模型的强化学习与轨迹优化算法,通过最优控制理论和动态规划推导出反向微分方程,提供最优控制策略和时间 horizon。在低维线性问题中恢复理论最优解,并在非线性系统中验证应用效果。

摘要:

我们提出了一种基于模型的强化学习与轨迹优化算法,该算法具有自由最终时间 horizon。基于最优控制理论和动态规划,我们推导出一组反向微分方程,用于传播价值函数并提供最优控制策略和最优时间 horizon。所提出的方法扩展了之前基于模型的轨迹优化结果。我们的分析表明,在线性低维问题中,所提出的算法能够恢复理论最优解。最后,我们在非线性系统中提供了应用结果。

英文摘要:

We present one of the first algorithms on model based reinforcement learning and trajectory optimization with free final time horizon. Grounded on the optimal control theory and Dynamic Programming, we derive a set of backward differential equations that propagate the value function and provide the optimal control policy and the optimal time horizon. The resulting policy generalizes previous results in model based trajectory optimization. Our analysis shows that the proposed algorithm recovers the theoretical optimal solution on linear low dimensional problem. Finally we provide application results on nonlinear systems.

机构、总结、中文摘要均由AI分析而来,可能存在错误,请以论文正文为准。

↑