arrow
返回

Optimizing CPU-GPU resource scheduling with deep reinforcement learning

delete2025-08-08
delete0
PRE
AI
K
K.C. Chen
K
Kai Huang
茅
茅剑 (Jian Mao)
J
Jiawei Hu
J
Jinliang Lin
Z
Z. Y. You
DOI:10.1016/j.future.2025.108065delete
delete原文链接
delete原文求助
delete分享
delete收藏
摘要

摘要

En 中文
物联网(IoT)和边缘计算的快速发展,在延迟敏感型应用中创造了实时、准确信息更新的更大需求。我们通过构建马尔可夫决策过程(MDP)模型,处理包括仅CPU、仅GPU及混合CPU-GPU设备在内的异构设备,该模型有效捕捉了这些设备与边缘服务器(ES)的动态特性。为充分利用无线设备(WDs)的异构性,我们提出了一种基于多头注意力(Multi-Head Attention)的深度强化学习(DRL)算法,其中每种设备类型被赋予独立的注意力权重,以高效捕捉其对任务调度决策的影响。为解决传统强化学习(RL)算法在完全未知系统下的收敛缓慢问题,我们提出了异构计算感知的决策后状态(PDS)学习。该机制结合了边缘环境中系统动态的部分先验知识,以加速探索和学习过程。实验结果表明,所提出的方法在异构边缘环境中显著优化了信息新鲜度(AoI)和能耗性能,优于现有方法。
Keyword:
IoT
Edge Computing
Markov Decision Process
Deep Reinforcement Learning
Age of Information

期刊

F
Future Generation Computer Systems
IF:
0
论文数:
642
被引数:
0

机构

X
xiamen jikuai technology co., ltd.
学者数:
2
论文数: 1
被引数: 0
J
Jimei University
学者数:
5.0K
论文数: 3.3K
被引数: 4.8K
引用论文

引用论文

Near-Optimal and Truthful Online Auction for Computation Offloading in Green Edge-Computing Systems
err2020-04-01
err103
errOAAI
errZhang, Deyu; Tan, Long; Ren, Ju; Awad, Mohamad Khattar; Zhang, Shan; Zhang, Yaoxue; Wan, Peng-Jun
err分享
err收藏
Learning for Computation Offloading in Mobile Edge Computing
err2018-12-01
err156
PREAI
errDinh, Thinh Quang; La, Quang Duy; Quek, Tony Q. S.; Shin, Hyundong
err分享
err收藏
When Edge Computing Meets Microgrid: A Deep Reinforcement Learning Approach
err2019-10-01
err49
PREAI
errMunir, Md. Shirajum; Abedin, Sarder Fakhrul; Tran, Nguyen H.; Hong, Choong Seon
err分享
err收藏
Energy-Optimal Mobile Cloud Computing under Stochastic Wireless Channel
err2013-09-01
err699
PREAI
errZhang, Weiwen; Wen, Yonggang; Guan, Kyle; Kilper, Dan; Luo, Haiyun; Wu, Dapeng Oliver
err分享
err收藏
学者 查看更多内容