返回
Low-Complexity Q-Value Iteration Learning for Linear Quadratic Regulators Without Initial Stabilizing Gain
DOI:10.1109/TAC.2025.3632464.png)
摘要
En 中文
强化学习(RL)在数据驱动的线性二次调节器(LQR)控制器设计中已展现出良好的效果。然而,现有的基于RL的LQR控制器设计方法在计算复杂度、样本复杂度、系统稳定性以及对稳定增益的要求方面面临挑战。为解决这些问题,本文提出了一种新颖的低复杂度Q值迭代算法。我们证明了该算法生成的迭代序列的收敛性和单调性。此外,设计了一种算法停止条件,以确保所得控制增益具有稳定性。与现有的数据驱动方法相比,所提出的算法在计算和样本效率方面均实现了显著提升,并消除了对稳定增益的要求。通过对比仿真研究验证了所提算法的有效性。
Keyword:
Linear quadratic regulator (LQR)
low-complexity
Q-value iteration (VI)
reinforcement learning (RL)
期刊
IF:
7
论文数:
1.3W
被引数:
6.7W
机构
引用论文
Value iteration and adaptive dynamic programming for data-driven adaptive optimal control design数据驱动的自适应最优控制设计的值迭代和自适应动态规划
AUTOMATICA
IF5.9
Adaptive optimal control for continuous-time linear systems based on policy iteration基于策略迭代的连续时间线性系统自适应最优控制
AUTOMATICA
IF5.9

