arrow
返回

Multiple-UAV Reinforcement Learning Algorithm Based on Improved PPO in Ray Framework

delete2022-07-04
delete30
delete
OA
AI
G
Guang Zhan *
X
Xinmiao Zhang
Z
Zhongchao Li
徐
徐琳 (Lin Xu)
D
Deyun Zhou
Z
Zhen Yang
DOI:10.3390/drones6070166delete
delete原文链接
delete原文求助
delete分享
delete收藏
摘要

摘要

En 中文
分布式多agent协同决策技术是一般人工智能的关键。本文以自主开发的Unity3D协同作战环境为测试场景,设置了需要异构无人机 (uav) 执行分布式决策并完成协同任务的任务。针对传统近端策略优化 (PPO) 算法在基于分布式训练框架Ray的复杂多agent协作场景下性能较差的问题,对PPO算法中的Critic网络进行改进,学习一个中心化的值函数,并提出了多智能体邻近策略优化 (MAPPO) 算法。同时,采用基于课程学习的继承训练方法,提高了算法的泛化性能。在实验中,与其他算法相比,MAPPO可以获得最高的平均累积奖励,并且可以在收敛后以最少的步骤完成任务目标,这充分证明了MAPPO算法优于现有技术。
Keyword:
multiple UAVs
deep reinforcement learning
PPO
curriculum learning
Ray

期刊

D
Drones
IF:
4.8
论文数:
3.9K
被引数:
8.3K

机构

A
aviation industry corporation of china (avic)
学者数:
1.7K
论文数: 1.4K
被引数: 2
N
Northwestern Polytechnical University
学者数:
4.6W
论文数: 3.7W
被引数: 5.3W
N
northeastern university - china
学者数:
3.2W
论文数: 2.7W
被引数: 37
学者 查看更多机构
引用论文

引用论文

The Function of Fish Cytokines
err2016-05-24
err0
errOAAI
errJun Zou; Christopher Secombes
err分享
err收藏
err分享
err收藏
Flight Test of Autonomous Formation Management for Multiple Fixed-Wing UAVs Based on Missile Parallel Method
errDRONES
IF4.8
err2022-04-19
err5
errOAAI
errZhan, Guang; Gong, Zheng; Lv, Quanhui; Zhou, Zan; Wang, Zian; Yang, Zhen; Zhou, Deyun
err分享
err收藏
Photochemistry of acyldisilanes
err2002-05-01
err0
PREAI
errA. G. Brook; Alfred Baumegger; Alan J. Lough
err分享
err收藏
学者 查看更多内容