arrow
返回

Minute-scale training for microrobot navigation

delete2026-09-28
delete0
PRE
AI
Y
Yinghan Sun
A
Aoji Zhu
X
Xiang Ji
李
李亚梅 (Yamei Li)
J
Jiachi Zhao
Y
Yun Wang
张莉 封面图
张莉 (Li Zhang) *
H
Hujun Gao *
杨
杨立冬 (Lidong Yang) *
DOI:10.1038/s42256-026-01305-wdelete
delete原文链接
delete原文求助
delete分享
delete收藏
摘要

摘要

En 中文
微机器人具有应用于各种场景的巨大潜力,其中目标导航是一项基本要求。深度强化学习 recently emerged as a powerful paradigm for fully autonomous microrobot navigation. 然而,当前基于深度强化学习的方法对学习效率与效果关注有限,模型训练需要数小时至数天。这阻碍了快速实际部署和参数优化。为解决这些挑战,我们提出了一种学习框架,可在数分钟内训练出有效的微机器人导航策略。在所提出的框架中,我们开发了一个完全矢量化模拟器,包含超过10,000个人工血管环境,通过并行化动力学、基于射线投射的视觉特征提取和可行性检查(跨数千环境),实现约190,000次状态转移每秒。为实现快速训练的有效性,我们提出了任务塑形-正则化奖励框架。该框架加速收敛,提高最终性能,减少动作变化至少33.7%,增加障碍物清除率至少2.1%(在所有评估场景中)。结果表明,所提出的框架将训练时间缩短至10分钟以内,同时支持跨不同微机器人类型和导航场景的零样本部署。总体而言,该框架可显著缩短设计周期并加速自主微机器人的部署。矢量化模拟器和结构化奖励框架使微机器人导航策略能在数分钟内训练完成,并在不同机器人和环境中无需重新训练即可转移。

期刊

Nature Machine Intelligence 封面图
Nature Machine Intelligence
IF:
23.9
论文数:
1.3K
被引数:
1.5W

机构

T
the hong kong polytechnic university
学者数:
1.3K
论文数: 604
被引数: 0
T
The Chinese University of Hong Kong
学者数:
973
论文数: 429
被引数: 0
H
Harbin Institute of Technology
学者数:
5.3K
论文数: 1.5K
被引数: 0
学者 查看更多机构
引用论文

引用论文

Reduced rotational flows enable the translation of surface-rolling microrobots in confined spaces
err2022-10-21
err28
errOAAI
errBozuyuk, Ugur; Aghakhani, Amirreza; Alapan, Yunus; Yunusa, Muhammad; Wrede, Paul; Sitti, Metin
err分享
err收藏
Ultra-extensible ribbon-like magnetic microswarm
err2018-08-21
err324
errOAAI
errYu, Jiangfan; Wang, Ben; Du, Xingzhou; Wang, Qianqian; Zhang, Li
err分享
err收藏
err分享
err收藏
Delivering drugs with microrobots用微型机器人运送药物
err2023-12-08
err0
PREAI
errBradley J. Nelson; Salvador Pané
err分享
err收藏
Ultrasound Microrobots with Reinforcement Learning
err2023-03-02
err16
errOAAI
errSchrage, Matthijs; Medany, Mahmoud; Ahmed, Daniel
err分享
err收藏
学者 查看更多内容