返回
Duration-Informed Workload Scheduler
DOI:10.1007/978-3-032-07612-0_1.png)
摘要
En 中文
高性能计算系统是复杂的机器,其行为由其众多子系统的正确功能决定。其中,工作负载调度器对连续提交到计算资源的作业的及时执行具有关键影响。做出高质量调度决策取决于在执行前知道提交作业的持续时间,这对用户而言是一项非平凡的任务,可通过机器学习解决。在本工作中,我们设计了一种带有通过机器学习构建的持续时间预测模块的工作负载调度器。我们评估了其有效性,并使用来自Tier-0超级计算机的工作负载跟踪数据展示了其性能,表明所有作业的平均等待时间降低了约11%。更短的等待时间直接关系到从用户角度看的服务质量提升和从系统角度看更高的周转率。
Keyword:
High-Performance Computing
Duration Prediction
Machine Learning
期刊
机构
引用论文
OKCM: improving parallel task scheduling in high-performance computing systems using online learning
Machine learning approaches to predict the execution time of the meteorological simulation software COSMO机器学习方法预测气象模拟软件COSMO的执行时间
PM100: A Job Power Consumption Dataset of a Large-scale Production HPC SystemPM100:大规模生产型HPC系统的作业功耗数据集

