Open X-Embodiment Robotic Learning Datasets and RT-X Models

文章目录

简介

为什么机器人技术远远落后于 NLP、视觉和其他 AI 领域?除其他困难外,数据短缺是罪魁祸首。谷歌 DeepMind 联合其他机构推出了 Open X-Embodiment 数据集 ,并训练出了能力更强的 RT-X 模型

DeepMind 在过去一段时间汇集了来自 22 种不同机器人类型的数据,以创建 Open X-Embodiment 数据集,然后在之前的模型(RT-1 和 RT-2)的基础上,训练出了能力更强的 RT-X(分别为 RT-1-X 和 RT-2-X)。

他们在五个不同的研究实验室测试了 RT-1-X 模型,结果显示,与针对每个机器人独立开发的方法相比,新方法在五种不同的常用机器人中平均成功率提高了 50%。他们还表明,在上述数据集上训练的 RT-2-X 在现实世界机器人技能上的表现提高了 2 倍,而且,通过学习新数据,RT-2-X 掌握了很多新技能。这项工作表明,在来自多个机器人类型数据上训练的单个模型比在来自单个机器人类型数据上训练的模型在多个机器人上的性能要好得多。

目前,Open X-Embodiment 数据集和 RT-1-X 模型检查点已经对广泛的研究社区开放。

论文链接

https://robotics-transformer-x.github.io/paper.pdf

项目链接

https://robotics-transformer-x.github.io/

Reference

https://www.deepmind.com/blog/scaling-up-learning-across-many-different-robot-types

相关推荐
Jwest202113 小时前
工业显示器在医疗配送消毒机器人中的应用
机器人·计算机外设
RPA机器人就用八爪鱼14 小时前
从入门到精通:RPA财务机器人部署全流程详解
机器人·rpa
Abona17 小时前
自动驾驶、无人机和机器人算法需要哪些基础?
机器人·自动驾驶·无人机
ModestCoder_17 小时前
Tokenization的演进:从NLP基石到多模态AI的“通用翻译器”
开发语言·人工智能·自然语言处理·机器人·具身智能
心无旁骛~1 天前
Masquerade 总结笔记:解锁野外人类视频的机器人政策学习潜力
笔记·机器人
shuidaoyuxing1 天前
甲烷遥测工作原理及在机器人身上怎应用的详细讲解
机器人
Mountain and sea2 天前
发那科机器人指令详解:从入门到精通
前端·机器人
倔强的石头1062 天前
AiOnly大模型深度测评:调用GPT-5 API+RAG知识库,快速构建智能客服机器人
人工智能·gpt·机器人·aionly
Abona2 天前
自动驾驶、无人机、机器人核心技术双范式
算法·机器人·自动驾驶·无人机
澳鹏Appen2 天前
数据集月度精选 | 高质量具身智能数据集:打开机器人“感知-决策-动作”闭环的钥匙
人工智能·机器人·具身智能