arrow
返回

Smart Maintenance Optimization for Large Scale Parallel Systems Using Deep Reinforcement Learning

delete2025-12-30
delete0
PRE
AI
F
Fariba Azizi
Z
Zahra Rezvani
H
Hasan Rasay
A
Abdollah Safari
M
Mehrnaz Salmani
F
Farnoosh Naderkhani
DOI:10.1109/TR.2025.3639363delete
delete原文链接
delete原文求助
delete分享
delete收藏
摘要

摘要

En 中文
在工业4.0时代,随着数据的空前可用性和技术的进步,采用智能动态维护调度已成为必要,尤其是对于大型系统,以实现最佳运行效率。为此,本文提出了一种基于机器学习的多单元系统维护决策框架。具体而言,我们将深度强化学习(DRL)应用于一个针对受随机劣化和随机故障影响的并行多单元系统的动态维护模型。每个单元通过三状态齐次马尔可夫过程独立劣化,在健康、不健康或故障状态之间转换。我们通过组合各组件状态来定义整体系统状态,并利用二元生灭/生灭过程建模其相互作用。为最小化成本,我们采用马尔可夫决策过程框架求解最优维护策略。我们评估并比较了高级DRL方法,包括近端策略优化(PPO)和双重深度Q网络(DDQN),与几种基线方法进行了对比。结果表明,PPO持续优于所有方法,提供了最有效和可靠的维护策略。尽管DDQN优于某些基线方法,但有时不如其他方法。这些发现突显了不同强化学习技术在确定最优维护策略方面的优势和局限性。此外,我们提供了一个数值示例,说明强化学习方法在实际场景中的应用,强调了我们提出的框架对于大型系统的可扩展性和效率。我们的结果表明,在优化维护策略方面表现出色,为复杂工业系统的智能维护解决方案的进步做出了贡献。
Keyword:
Deep reinforcement learning (DRL)
dynamic maintenance
machine learning
manufacturing parallel systems
Markov decision process (MDP)

期刊

IEEE Transactions on Reliability 封面图
IEEE Transactions on Reliability
IF:
5.7
论文数:
2.8K
被引数:
8.5K

机构

U
University of Tehran
学者数:
2.4W
论文数: 2.3W
被引数: 2.7W
A
Alzahra University
学者数:
1.4K
论文数: 1.3K
被引数: 1.1K
K
Kermanshah University of Technology
学者数:
579
论文数: 870
被引数: 0
C
Concordia University
学者数:
1.1K
论文数: 599
被引数: 125
学者 查看更多机构
引用论文

引用论文

Reinforcement Learning-Based and Parametric Production-Maintenance Control Policies for a Deteriorating Manufacturing System
err2018-01-01
err63
errOAAI
errXanthopoulos, A. S.; Kiatipis, Athanasios; Koulouriotis, D. E.; Stieger, Sepp
err分享
err收藏
Birth/birth-death processes and their computable transition probabilities with biological applications
err2017-07-24
err0
errOAAI
errLam Si Tung Ho; Jason Xu; Forrest W. Crawford; Vladimir N. Minin; Marc A. Suchard
err分享
err收藏
Human-level control through deep reinforcement learning通过深度强化学习实现人类层面的控制
err2015-02-25
err0
PREAI
errVolodymyr Mnih; Koray Kavukcuoglu; David Silver; Andrei A. Rusu; Joel Veness; Marc G. Bellemare; Alex Graves; Martin Riedmiller; Andreas K. Fidjeland; Georg Ostrovski; Stig Petersen; Charles Beattie; Amir Sadik; Ioannis Antonoglou; Helen King; Dharshan Kumaran; Daan Wierstra; Shane Legg; Demis Hassabis
err分享
err收藏
学者 查看更多内容