Open X-Embodiment Robotic Learning Datasets and RT-X Models

文章目录

简介

为什么机器人技术远远落后于 NLP、视觉和其他 AI 领域?除其他困难外,数据短缺是罪魁祸首。谷歌 DeepMind 联合其他机构推出了 Open X-Embodiment 数据集 ,并训练出了能力更强的 RT-X 模型

DeepMind 在过去一段时间汇集了来自 22 种不同机器人类型的数据,以创建 Open X-Embodiment 数据集,然后在之前的模型(RT-1 和 RT-2)的基础上,训练出了能力更强的 RT-X(分别为 RT-1-X 和 RT-2-X)。

他们在五个不同的研究实验室测试了 RT-1-X 模型,结果显示,与针对每个机器人独立开发的方法相比,新方法在五种不同的常用机器人中平均成功率提高了 50%。他们还表明,在上述数据集上训练的 RT-2-X 在现实世界机器人技能上的表现提高了 2 倍,而且,通过学习新数据,RT-2-X 掌握了很多新技能。这项工作表明,在来自多个机器人类型数据上训练的单个模型比在来自单个机器人类型数据上训练的模型在多个机器人上的性能要好得多。

目前,Open X-Embodiment 数据集和 RT-1-X 模型检查点已经对广泛的研究社区开放。

论文链接

https://robotics-transformer-x.github.io/paper.pdf

项目链接

https://robotics-transformer-x.github.io/

Reference

https://www.deepmind.com/blog/scaling-up-learning-across-many-different-robot-types

相关推荐
CyberSoma3 小时前
机器人模仿学习运动基元数学编码方法还有用吗?
人工智能·算法·计算机视觉·机器人
MarkHD3 小时前
Dify从入门到精通 第33天 基于GPT-4V构建图片描述生成器与视觉问答机器人
人工智能·机器人
泽众云测试5 小时前
PRA(流程机器人自动化)与智能体(AI Agent)主要区别与分析
机器人·自动化·rpa
weixin_4526006913 小时前
音频限幅器D2761使用手册
机器人·电脑·音视频·音箱·光伏逆变器·扩音器
qq_25005686821 小时前
springboot接入企业微信群机器人消息推送
spring boot·机器人·企业微信
向阳逐梦21 小时前
机器人描述文件xacro(urdf扩展)
机器人
赤壁淘沙1 天前
开源底盘+机械臂机器人:Lekiwi驱动链路分析
机器人
No0d1es1 天前
青少年机器人技术(六级)等级考试试卷-实操题(2025年9月)
青少年编程·机器人·电子学会·六级·实际操作
学slam的小范2 天前
ROS跑ORB-SLAM3遇见的问题总结
人工智能·机器人·自动驾驶
WWZZ20252 天前
快速上手大模型:深度学习2(实践:深度学习基础、线性回归)
人工智能·深度学习·算法·计算机视觉·机器人·大模型·slam