arrow
返回

A robot operating system framework for using large language models in embodied AI

delete2026-03-16
delete0
PRE
AI
C
Christopher E. Mower *
Y
Yuhui Wan
H
Hongzhan Yu
A
Antoine Grosnit
J
Jonas Gonzalez-Billandon
M
Matthieu Zimmer
P
Puze Liu
D
Daniel Palenicek
D
Davide Tateo
J
Jan Peters
K
Kaixian Qu
M
Mike Zhang
A
Andrei Cramariuc
C
César Cadena
M
Marco Hutter
G
Guangjian Tian
Y
Yuzhen Zhuang
K
Kun Shao
X
Xingyue Quan
J
Jianye Hao
J
Jun Wang
H
Haitham Bou-Ammar
DOI:10.1038/s42256-026-01186-zdelete
delete原文链接
delete分享
delete收藏
查看预印本
摘要

摘要

En 中文
自主机器人能够将自然语言指令转化为可靠的物理动作,仍然是人工智能领域的核心挑战。这里我们展示了将大型语言模型代理连接到机器人操作系统,能够实现一个适用于具身智能的灵活框架,并且我们发布了完整的实现作为免费开源代码。该代理能够自动将大型语言模型输出转化为机器人动作,支持可互换的执行模式(内联代码或行为树),通过模仿学习新的原子技能,并通过自动化优化和来自人类或环境反馈的反思持续完善这些技能。大量实验验证了该框架,展示了其在不同场景和具身形态中的鲁棒性、可扩展性和多功能性,包括长时域任务、桌面重排、动态任务优化和远程监督控制。此外,本工作中展示的所有结果均通过使用开源预训练大型语言模型实现。Mower, Wan等人介绍了ROS-LLM,一个开源系统,允许非专家通过自然语言控制机器人、从演示和反馈中学习新技能,并自动调整动作以在现实任务中实现可靠性能。
Keyword:
Computer science
Information technology
Engineering
general
AI总结

AI总结

对已上传原文的论文进行重点信息的提取,主要内容包括:简要概述、研究摘要、背景介绍、关键亮点、图文解析、展望与总结。

期刊

Nature Machine Intelligence 封面图
Nature Machine Intelligence
IF:
23.9
论文数:
1.3K
被引数:
1.5W

机构

H
huawei
学者数:
43
论文数: 15
被引数: 0
U
university college london
学者数:
8.9K
论文数: 4.8K
被引数: 1
T
technical university of darmstadt
学者数:
483
论文数: 200
被引数: 0
E
ETH Zurich
学者数:
3.0W
论文数: 2.4W
被引数: 8.4W
学者 查看更多机构
引用论文

引用论文

Learning agile and dynamic motor skills for legged robots
err2019-01-30
err795
errOAAI
errHwangbo, Jemin; Lee, Joonho; Dosovitskiy, Alexey; Bellicoso, Dario; Tsounis, Vassilios; Koltun, Vladlen; Hutter, Marco
err分享
err收藏
err分享
err收藏
PROGPROMPT: program generation for situated robot task planning using large language modelsProprompt: 使用大型语言模型生成用于机器人任务规划的程序
err2023-08-28
err14
errOAAI
errSingh, Ishika; Blukis, Valts; Mousavian, Arsalan; Goyal, Ankit; Xu, Danfei; Tremblay, Jonathan; Fox, Dieter; Thomason, Jesse; Garg, Animesh
err分享
err收藏
Economics of robot application
err1997-04-01
err41
PREAI
errDijkhuizen, AA; Huirne, RBM; Harsh, SB; Gardner, RW
err分享
err收藏
The Robot Economy: Here It Comes
err2020-08-01
err4
errOAAI
errArduengo, Miguel; Sentis, Luis
err分享
err收藏
Learning dexterity from human hand motion in internet videos
err2024-01-22
err0
PREAI
errShaw, Kenneth; Bahl, Shikhar; Sivakumar, Aravind; Kannan, Aditya; Pathak, Deepak
err分享
err收藏
Assessing the cost effectiveness of robotics in urological surgery - a systematic review
err2012-03-22
err87
PREAI
errAhmed, Kamran; Ibrahim, Amel; Wang, Tim T.; Khan, Nuzhath; Challacombe, Ben; Khan, Muhammed Shamim; Dasgupta, Prokar
err分享
err收藏
学者 查看更多内容