arrow
返回

A novel reinforcement learning framework-based path planning algorithm for unmanned surface vehicle

delete2025-08-08
delete0
delete
OA
AI
牟
牟健慧 (Jianhui Mou)
B
Bo Shi
B
Bo Wang
C
Chengcheng Yu
钟馥声 封面图
钟馥声 (Fusheng Zhong)
L
Li Zheng
王坚 封面图
王坚 (Jian Wang)
J
Junjie Li *
DOI:10.3389/fmars.2025.1641093delete
delete原文链接
delete原文求助
delete分享
delete收藏
摘要

摘要

En 中文
无人水面艇(USVs)如今已被广泛应用于海洋观测任务中;帮助研究人员监测气候变化;收集环境数据;并观察海洋生态系统过程。然而,USVs在海洋观测任务中的路径规划常常面临几种固有困难:对环境信息的高度依赖;收敛时间长;以及生成的路径质量低。为解决这些问题,本文提出了一种基于新型人工势场-启发式奖励-平均深度Q网络(APF-RADQN)框架的路径规划算法,旨在为USVs寻找最优路径。首先,将USV路径规划建模为马尔可夫决策过程(MDP)。其次,设计了一个综合奖励函数,结合人工势场(APF)启发,以引导USV到达目标区域。随后,构建了一个带有奖励平均策略的优化深度神经网络,以有效提升算法的学习和收敛速度,从而进一步提高USV路径规划的全局搜索能力和界面性能。此外,应用贝塞尔曲线使生成的路径更具可行性。最后,通过模拟实验将所提出的算法与DQN、A*和APF算法进行比较,验证了其有效性。模拟结果表明,APF-RADQN提升了界面能力和路径质量,显著增强了USV导航安全性和海洋观测任务的运行效率。
Keyword:
USVs
path planning
artificial potential field
deep Q-network
reward-averaging
Bezier curve

期刊

Frontiers in Marine Science 封面图
Frontiers in Marine Science
IF:
3
论文数:
2.6K
被引数:
4.0W

机构

Y
Yantai University
学者数:
8.4K
论文数: 5.7K
被引数: 9.9K
S
Suzhou Tongyuan Software & Control Technology Co.
学者数:
1
论文数: 1
被引数: 0
H
huazhong university of science and technology
学者数:
2.7W
论文数: 8.1K
被引数: 5
学者 查看更多机构
引用论文

引用论文

Surveying a Floating Iceberg With the USV SEADRAGON
err2021-07-14
err0
errOAAI
errMingxi Zhou; Ralf Bachmayer; Brad DeYoung
err分享
err收藏
Air-Sea Heat Fluxes Associated With Convective Cold Pools
err2023-10-21
err2
errOAAI
errWills, Samantha M.; Cronin, Meghan F.; Zhang, Dongxiao
err分享
err收藏
err分享
err收藏
学者 查看更多内容