arrow
返回

Reinforcement Learning for Warehouse Management Using a Scenario-Based Simulation Testbed

delete2026-08-12
delete0
delete
OA
AI
L
Laura Acosta-Garcia *
J
Julen Cestero
A
Ander García
M
Marco Quartulli
DOI:10.3390/ai7080308delete
delete原文链接
delete原文求助
delete分享
delete收藏
摘要

摘要

En 中文
仓库作业涉及动态物品流动、波动需求和异构布局,使得自适应决策对于高效存储和订单履行至关重要。在此背景下,强化学习(RL)为在随机环境下学习自适应仓库控制策略提供了一种有前景的方法。然而,在真实仓库环境中评估基于RL的解决方案往往成本高昂且耗时,这促使需要真实且可复现的模拟环境。在本文中,我们介绍了一个可配置的仓库模拟环境,该环境模拟了随机物品到达、订单生成以及不同布局和工作负载条件下的内部物流作业。基于此环境,我们构建了一个由多个场景组成的可复现实验测试平台,这些场景范围从低负载到高度拥堵的设置。该测试平台已公开发布,以支持可复现的研究和学术界的比较评估。我们将仓库管理问题表述为马尔可夫决策过程(MDP),并应用可掩码的近端策略优化(Maskable PPO)代理来学习自适应控制策略。基于RL的方法在定义的场景中进行评估,并与启发式基线策略进行比较。实验结果表明,所提出的解决方案在性能上与强大的贪婪先进先出(FIFO)启发式方法相当,同时在具有挑战性的工作负载条件下将订单履行率提高了高达13.5个百分点。这些结果证明了RL能够学习稳健的仓库控制策略,这些策略能够自适应地优化性能并在广泛的不同场景中保持运营稳定。
Keyword:
warehouse management
reinforcement learning
simulation-based testbed
scenario-based evaluation
stochastic environments
autonomous warehouse operations

期刊

A
AI
IF:
5
论文数:
1.0K
被引数:
941

机构

Universidad Politécnica de Cartagena 封面图
Universidad Politécnica de Cartagena
学者数:
294
论文数: 124
被引数: 2.2K
V
vicomtech foundation
学者数:
12
论文数: 6
被引数: 0
引用论文

引用论文

An estimation distribution algorithm for wave-picking warehouse management
err2020-10-29
err14
PREAI
errLiang, Jingran; Wu, Zhengning; Zhu, Chenye; Zhang, Zhi-Hai
err分享
err收藏
Decision making strategies for warehouse operations
err2017-03-13
err0
errOAAI
errMichał Kłodawski; Konrad Lewczuk; Ilona Jacyna-Gołda; Jolanta Żak
err分享
err收藏
A Systematic Literature Review of A* Pathfinding
err2021-01-01
err0
errOAAI
errDaniel Foead; Alifio Ghifari; Marchel Budi Kusuma; Novita Hanafiah; Eric Gunawan
err分享
err收藏
An integrated approach for warehouse analysis and optimization: A case study
err2015-06-01
err59
PREAI
errDotoli, Mariagrazia; Epicoco, Nicola; Falagario, Marco; Costantino, Nicola; Turchiano, Biagio
err分享
err收藏
err分享
err收藏
Human-level control through deep reinforcement learning通过深度强化学习实现人类层面的控制
err2015-02-25
err0
PREAI
errVolodymyr Mnih; Koray Kavukcuoglu; David Silver; Andrei A. Rusu; Joel Veness; Marc G. Bellemare; Alex Graves; Martin Riedmiller; Andreas K. Fidjeland; Georg Ostrovski; Stig Petersen; Charles Beattie; Amir Sadik; Ioannis Antonoglou; Helen King; Dharshan Kumaran; Daan Wierstra; Shane Legg; Demis Hassabis
err分享
err收藏
学者 查看更多内容