arrow
返回

Compositional Motion Generation From Demonstration With Object-Centric Neural Fields

delete2026-07-15
delete0
delete
OA
AI
A
Ahmet Tekden
Y
Yasemin Bekiroglu
DOI:10.1109/lra.2026.3713713delete
delete原文链接
delete原文求助
delete分享
delete收藏
摘要

摘要

En 中文
通过将复杂行为组织为简单元素的组合,组合性(compositionality)实现了可扩展且数据高效(data efficient)的机器人学习。基于此原理,我们提出了一种生成式学习-from-demonstration框架,通过连接感知与运动之间的共享对象级表示,实现了机器人行为的组合性建模。我们利用以对象为中心的神经表示渲染场景,这些表示整合了标准神经场(canonical neural fields)和基于隐变量的变形(latent-conditioned deformations),以平滑、一致且可解释的方式捕捉位置和几何变化。对于运动生成,时序专家混合(temporal mixture-of-experts, MoE)采用门控机制(gating mechanism)在时间上组合对象条件下的运动基元(movement primitives),从而生成完整轨迹。这种时空组合性(spatial–temporal compositionality)在保持运动基元数据效率的同时,将运动锚定于视觉结构,实现了跨多样化场景配置的系统泛化。在模拟中,所提出的模型成功完成了长时域(long-horizon)操作任务,其训练数据需求显著少于其他基于图像的基线方法。真实世界实验进一步验证了该方法对噪声的鲁棒性、通过语言分割模型(language-based segmentation models)实现类别级泛化的能力,以及直接在3D场景表示上运行的能力。
Keyword:
Learning from demonstration
deep learning in grasping and manipulation

期刊

I
IEEE Robotics and Automation Letters
IF:
5.3
论文数:
1.9K
被引数:
3.9W

机构

C
chalmers university of technology
学者数:
1.5W
论文数: 1.6W
被引数: 10
引用论文

引用论文

Learning Fine-Grained Bimanual Manipulation with Low-Cost Hardware
err2023-07-10
err0
errOAAI
errTony Zhao; Vikash Kumar; Sergey Levine; Chelsea Finn
err分享
err收藏
err分享
err收藏
nvblox: GPU-Accelerated Incremental Signed Distance Field Mappingnvblox: GPU加速的增量有符号距离场映射
err2024-05-13
err0
errOAAI
errAlexander Millane; Helen Oleynikova; Emilie Wirbel; Remo Steiner; Vikram Ramasamy; David Tingdahl; Roland Siegwart
err分享
err收藏
Neural Descriptor Fields: SE(3)-Equivariant Object Representations for Manipulation
err2022-05-23
err0
errOAAI
errAnthony Simeonov; Yilun Du; Andrea Tagliasacchi; Joshua B. Tenenbaum; Alberto Rodriguez; Pulkit Agrawal; Vincent Sitzmann
err分享
err收藏
Conditional Neural Movement Primitives
err2019-06-22
err0
errOAAI
errMuhammet Yunus Seker; Mert Imre; Justus Piater; Emre Ugur
err分享
err收藏
学者 查看更多内容