CMU/MIT/清华/Umass提出生成式机器人智能体RoboGen

文章目录

  • 导读
  • [1. Introduction](#1. Introduction)
  • [2. 论文地址](#2. 论文地址)
  • [3. 项目主页](#3. 项目主页)
  • [4. 开源地址](#4. 开源地址)
  • [5. RoboGen Pipeline](#5. RoboGen Pipeline)
  • [6. Experimental Results](#6. Experimental Results)
  • 作者介绍
  • Reference

导读

CMU/MIT/清华/Umass提出的全球首个生成式机器人智能体RoboGen,可以无限生成数据,让机器人7*24小时永不停歇地训练。AIGC for Robotics。

1. Introduction

全球首个生成式机器人Agent发布了!

长久以来,相比于语言或者视觉模型可以在大规模的互联网数据上训练,训练机器人的策略模型需要带有动态物理交互信息的数据,而这些数据的匮乏一直是具身智能发展的最大瓶颈。

最近,来自CMU、清华、MIT,UMass等机构的研究人员提出了一种全新的RoboGen智能体。

利用涵盖在大语言模型和生成式模型中蕴含的大规模知识,配以逼真模拟世界提供的物理信息,可以「无限」生成各种任务、场景以及教学数据,实现机器人7x24小时全自动训练。

2. 论文地址

https://arxiv.org/abs/2311.01455

3. 项目主页

https://robogen-ai.github.io/

4. 开源地址

https://github.com/Genesis-Embodied-AI

5. RoboGen Pipeline

RoboGen is a fully automated pipeline for endless and diverse skill acquisition (获取). RoboGen pipeline consists of 4 stages: A) task proposal, B) scene generation, C) training supervision generation, and D) skill learning with generated information.

RoboGen是一种全自动流程,可以7x24h地让机器人学习各种技能,其中包括4个阶段:

  1. 任务建议;
  2. 场景生成;
  3. 训练监督生成;
  4. 利用生成的信息进行技能学习。



Amazing!

6. Experimental Results


作者介绍

Reference

https://mp.weixin.qq.com/s/2bQTuwE-k6ukp--XHXIzMg

相关推荐
星云低代码开发平台1 分钟前
AI 工作台点了取消,ERP 订单还会创建吗?从三层状态设计验收
人工智能
Axis tech4 分钟前
通过MANUS手套推进由触觉驱动的机器人学习进程
人工智能·深度学习
数聚天成DeepSData5 分钟前
教育年限数据库跨版本对齐:年龄组、性别与五年间隔怎么处理
人工智能·深度学习·机器学习·数据集·deepsdata
欣欣之王来了6 分钟前
2024主流国产大模型深度对比:文心一言/通义千问/智谱AI/Qwen等选型指南
人工智能·ai·大模型
具身AGI16 分钟前
谁当具身主干,物理AI 世界模型 与 VLA 之争
人工智能
threerocks18 分钟前
速来!认领你的「口播Bot」,妈妈再也不用担心我做口播视频了!
人工智能·aigc·ai编程
YOLO数据集集合24 分钟前
Deepseek融合yolo的行人车辆多目标检测系统 |行人检测 车辆检测 多目标检测 YOLO DeepSeek9165期
人工智能·yolo·目标检测·计算机视觉·车辆检测·行人检测
进击的横打31 分钟前
【人工智能】缓存命中率:从原理到业务场景的全面解读
人工智能·缓存
lisw0532 分钟前
基于人工智能的安全分析技术: 用于实时识别威胁
人工智能·安全
武子康35 分钟前
LingBot-VA 2.0 深度解析:为什么要同时预测未来世界与机器人动作
人工智能·后端·agent