arrow
返回

Low-Complexity Q-Value Iteration Learning for Linear Quadratic Regulators Without Initial Stabilizing Gain

delete2025-11-13
delete0
PRE
AI
L
Longyang Huang
L
Lin Zhao
张
张卫东 (Weidong Zhang)
DOI:10.1109/TAC.2025.3632464delete
delete原文链接
delete原文求助
delete分享
delete收藏
摘要

摘要

En 中文
强化学习(RL)在数据驱动的线性二次调节器(LQR)控制器设计中已展现出良好的效果。然而,现有的基于RL的LQR控制器设计方法在计算复杂度、样本复杂度、系统稳定性以及对稳定增益的要求方面面临挑战。为解决这些问题,本文提出了一种新颖的低复杂度Q值迭代算法。我们证明了该算法生成的迭代序列的收敛性和单调性。此外,设计了一种算法停止条件,以确保所得控制增益具有稳定性。与现有的数据驱动方法相比,所提出的算法在计算和样本效率方面均实现了显著提升,并消除了对稳定增益的要求。通过对比仿真研究验证了所提算法的有效性。
Keyword:
Linear quadratic regulator (LQR)
low-complexity
Q-value iteration (VI)
reinforcement learning (RL)

期刊

IEEE Transactions on Automatic Control 封面图
IEEE Transactions on Automatic Control
IF:
7
论文数:
1.3W
被引数:
6.7W

机构

S
shanghai jiao tong university
学者数:
15.7W
论文数: 11.7W
被引数: 159
N
National University of Singapore
学者数:
7.6W
论文数: 6.5W
被引数: 11.4W
引用论文

引用论文

On the Sample Complexity of the Linear Quadratic Regulator
err2019-08-05
err0
PREAI
errSarah Dean; Horia Mania; Nikolai Matni; Benjamin Recht; Stephen Tu
err分享
err收藏
LQR-Assisted Whole-Body Control of a Wheeled Bipedal Robot With Kinematic Loops
err2020-04-01
err0
errOAAI
errVictor Klemm; Alessandro Morra; Lionel Gulich; Dominik Mannhart; David Rohr; Mina Kamel; Yvain de Viragh; Roland Siegwart
err分享
err收藏
err分享
err收藏
Efficient Off-Policy Q-Learning for Data-Based Discrete-Time LQR Problems
err2023-05-01
err19
errOAAI
errLopez, Victor G.; Alsalti, Mohammad; Mueller, Matthias A.
err分享
err收藏
学者 查看更多内容