Open X-Embodiment Robotic Learning Datasets and RT-X Models

文章目录

简介

为什么机器人技术远远落后于 NLP、视觉和其他 AI 领域?除其他困难外,数据短缺是罪魁祸首。谷歌 DeepMind 联合其他机构推出了 Open X-Embodiment 数据集 ,并训练出了能力更强的 RT-X 模型

DeepMind 在过去一段时间汇集了来自 22 种不同机器人类型的数据,以创建 Open X-Embodiment 数据集,然后在之前的模型(RT-1 和 RT-2)的基础上,训练出了能力更强的 RT-X(分别为 RT-1-X 和 RT-2-X)。

他们在五个不同的研究实验室测试了 RT-1-X 模型,结果显示,与针对每个机器人独立开发的方法相比,新方法在五种不同的常用机器人中平均成功率提高了 50%。他们还表明,在上述数据集上训练的 RT-2-X 在现实世界机器人技能上的表现提高了 2 倍,而且,通过学习新数据,RT-2-X 掌握了很多新技能。这项工作表明,在来自多个机器人类型数据上训练的单个模型比在来自单个机器人类型数据上训练的模型在多个机器人上的性能要好得多。

目前,Open X-Embodiment 数据集和 RT-1-X 模型检查点已经对广泛的研究社区开放。

论文链接

https://robotics-transformer-x.github.io/paper.pdf

项目链接

https://robotics-transformer-x.github.io/

Reference

https://www.deepmind.com/blog/scaling-up-learning-across-many-different-robot-types

相关推荐
PiKaMouse.6 小时前
navigation2-humble从零带读笔记第一篇:nav2_core
c++·算法·机器人
CoovallyAIHub9 小时前
多 Agent 手术推理框架:Agent 辩论+RAG 补上手术知识,零样本超越监督基线 14.6 个百分点
算法·架构·机器人
鲁邦通物联网12 小时前
架构实战:机房轮式巡检机器人梯控的非侵入式边缘解耦设计
机器人·巡检机器人·机器人梯控·机器人乘梯·机器人自主乘梯·agv机器人梯控·巡检机器人梯控
瑞璐塑业peek注塑13 小时前
关节执行器:一体化成型PEEK轴承注塑方案,实现机器人轻量化运行
机器人
CyanMind14 小时前
IsaacLab 训练范式探索(一):让机器人拥有“记忆”的 RNN 策略
人工智能·rnn·机器人
workflower15 小时前
智能体安全呈现三大核心趋势
人工智能·安全·机器人·智能家居·ai编程
灵途科技16 小时前
让机器人真正“看见”空间 | 灵途科技两款传感器亮相AWE2026
人工智能·科技·机器人
广州赛远16 小时前
埃夫特ER6B涂装机器人防护服应用行业深度解析-选错等于“慢性报废”
机器人
WWZZ202516 小时前
具身智能入门Isaac Sim——机器人设置-中级搭建机械臂
机器人·大模型·具身智能·isaac sim
kyle~17 小时前
机器人法兰中心坐标 与 TCP坐标
c++·机器人·机械臂·运动控制