arrow
返回

A multi-head adaptive actor-critic algorithm for solving vehicle routing problems

delete2025-08-04
delete0
PRE
AI
D
Dawen Xia *
Y
Youlong Jin *
M
Meiying Guo
杨虎 封面图
杨虎 (Yang Hu)
Y
Yujia Huo
Z
Ziqiang Wang
F
Fujian Feng
Y
Yantao Li
H
Huaqing Li *
DOI:10.1007/s10489-025-06778-7delete
delete原文链接
delete原文求助
delete分享
delete收藏
摘要

摘要

En 中文
车辆路径问题(VRPs)在智能交通系统(ITSs)中构成显著挑战,并在交通路由规划中发挥关键作用。基于编码器-解码器结构的深度强化学习(DRL)模型已展现出在VRPs应用中的巨大潜力。然而,基于传统演员-评论家(AC)算法的编码器-解码器结构受限于环境信息的不佳适应能力、控制规则参数的静态生成以及单一的解码策略,导致DRL在VRPs中的求解能力较低。为解决上述问题,提出了一种多头自适应演员-评论家(MHAAC)算法,并将其整合到端到端的深度强化学习框架中。所提算法整合了多头注意力机制和环境动态参数生成策略,显著增强了信息处理能力及环境适应性。具体而言,我们在编码器与解码器结构之间引入了加性注意力层,以生成动态上下文向量并提取细粒度特征嵌入。随后,设计了多头演员网络以解决解构造过程,并通过评论家网络的适应机制调节演员网络。此外,提出了一种集成多种传统搜索方法的混合解搜索算法(HS),以提升解质量,并采用梯度策略优化整个框架的参数。最终,在包含10、20、50和100个客户节点的四个标准数据集上的实证评估表明,MHAAC在解质量和效率两方面均优于现有的专用求解器及其他DRL方法。
Keyword:
Intelligent transportation systems
Vehicle routing problems
Deep reinforcement learning
Multi-head attention mechanism
Adaptive actor-critic algorithm

期刊

Applied Intelligence 封面图
Applied Intelligence
IF:
3.5
论文数:
7.6K
被引数:
1.7W

机构

S
State Key Laboratory of Public Big Data
学者数:
18
论文数: 11
被引数: 0
C
college of electronic and information engineering
学者数:
165
论文数: 64
被引数: 0
C
College of Data Science and Information Engineering
学者数:
11
论文数: 3
被引数: 0
C
College of Computer Science
学者数:
359
论文数: 172
被引数: 0
学者 查看更多机构
引用论文

引用论文

err分享
err收藏
Variable neighbourhood search: methods and applications变邻域搜索: 方法与应用
err2009-10-28
err643
PREAI
errHansen, Pierre; Mladenovic, Nenad; Moreno Perez, Jose A.
err分享
err收藏
A general heuristic for vehicle routing problems
err2007-08-01
err981
PREAI
errPisinger, David; Ropke, Stefan
err分享
err收藏
err分享
err收藏
The cumulative capacitated vehicle routing problem: New formulations and iterated greedy algorithms
err2018-12-01
err35
PREAI
errNucamendi-Guillen, Samuel; Angel-Bello, Francisco; Martinez-Salazar, Iris; Cordero-Franco, Alvaro E.
err分享
err收藏
The Vehicle Routing Problem
err
IF0
err2012-05-25
err0
PREAI
err
err分享
err收藏
学者 查看更多内容