arrow
返回

Integrating Actor–Critic Reinforcement Learning With Evolutionary Algorithm for Multimodal Multiobjective Optimization

delete2025-11-03
delete0
PRE
AI
K
Kaili Xiang
T
Tenglong Huang
L
Lei Yang
J
Jie Lin
DOI:10.1109/TNNLS.2025.3624785delete
delete原文链接
delete原文求助
delete分享
delete收藏
摘要

摘要

En 中文
有效解决多模态多目标优化问题(MMOPs)需要在多样性和收敛性之间保持最佳平衡。传统算法在环境选择适应性方面往往面临挑战,导致在各类MMOPs中表现次优。本文创新性地将行为者-评价者强化学习(RL)与进化算法相结合,通过其行为者和评价者组件之间的协同在线学习,显著提升了环境选择适应性。建立了一个动态优化小生境大小的RL过程,该过程关键性地决定了多样性与收敛性偏好之间的权衡。该过程通过定义以下内容进行公式化:1)将收敛性和多样性度量作为状态;2)将小生境大小调整作为连续动作;3)将状态改进作为奖励。采用两个专门的完全连接神经网络,分别作为行为者网络用于动作生成和评价者网络用于价值估计,二者通过实时在线学习协同适应种群状态。这种自适应小生境技术,结合局部收敛质量评估,能够全面评估多样性和潜在收敛性。广泛的实验验证表明,所提算法在48个基准问题和实际应用中,相较于十种当前最先进的算法表现出更优性能。结果一致显示,与现有算法相比,在平衡维持和整体优化效果方面均有显著提升。
Keyword:
Actor–critic reinforcement learning (RL)
adaptability
local convergence quality
multimodal multiobjective optimization
niche size

期刊

IEEE Transactions on Neural Networks and Learning Systems 封面图
IEEE Transactions on Neural Networks and Learning Systems
IF:
8.9
论文数:
7.6K
被引数:
7.2W

机构

N
northwest a&f university
学者数:
3.9K
论文数: 1.0K
被引数: 0
C
Chongqing University
学者数:
5.1W
论文数: 4.1W
被引数: 6.0W
H
hunan university
学者数:
4.5W
论文数: 3.3W
被引数: 70
学者 查看更多机构
引用论文

引用论文

err分享
err收藏
学者 查看更多内容