CMU/MIT/清华/Umass提出生成式机器人智能体RoboGen

文章目录

  • 导读
  • [1. Introduction](#1. Introduction)
  • [2. 论文地址](#2. 论文地址)
  • [3. 项目主页](#3. 项目主页)
  • [4. 开源地址](#4. 开源地址)
  • [5. RoboGen Pipeline](#5. RoboGen Pipeline)
  • [6. Experimental Results](#6. Experimental Results)
  • 作者介绍
  • Reference

导读

CMU/MIT/清华/Umass提出的全球首个生成式机器人智能体RoboGen,可以无限生成数据,让机器人7*24小时永不停歇地训练。AIGC for Robotics。

1. Introduction

全球首个生成式机器人Agent发布了!

长久以来,相比于语言或者视觉模型可以在大规模的互联网数据上训练,训练机器人的策略模型需要带有动态物理交互信息的数据,而这些数据的匮乏一直是具身智能发展的最大瓶颈。

最近,来自CMU、清华、MIT,UMass等机构的研究人员提出了一种全新的RoboGen智能体。

利用涵盖在大语言模型和生成式模型中蕴含的大规模知识,配以逼真模拟世界提供的物理信息,可以「无限」生成各种任务、场景以及教学数据,实现机器人7x24小时全自动训练。

2. 论文地址

https://arxiv.org/abs/2311.01455

3. 项目主页

https://robogen-ai.github.io/

4. 开源地址

https://github.com/Genesis-Embodied-AI

5. RoboGen Pipeline

RoboGen is a fully automated pipeline for endless and diverse skill acquisition (获取). RoboGen pipeline consists of 4 stages: A) task proposal, B) scene generation, C) training supervision generation, and D) skill learning with generated information.

RoboGen是一种全自动流程,可以7x24h地让机器人学习各种技能,其中包括4个阶段:

  1. 任务建议;
  2. 场景生成;
  3. 训练监督生成;
  4. 利用生成的信息进行技能学习。



Amazing!

6. Experimental Results


作者介绍

Reference

https://mp.weixin.qq.com/s/2bQTuwE-k6ukp--XHXIzMg

相关推荐
甲维斯几秒前
活久见 !Claude又发两好消息,感谢Codex
人工智能·ai编程
康谋自动驾驶1 分钟前
缩短40%迁移周期:如何构建具身智能高可靠验证底座?
人工智能·机器人·仿真
Black蜡笔小新1 分钟前
企业私有化AI训练推理一体工作站DLTM:零代码私有化重构企业AI安全监控新模式
人工智能·重构
ZPC82102 分钟前
YOLO-3D + 双目相机 (RGB + 深度 + 点云) → 3D 位置 + 抓取姿态
人工智能·算法·计算机视觉·机器人
Coovally AI模型快速验证3 分钟前
国网团队提出CWSP-YOLO:多模态融合绝缘子缺陷检测,mAP 84.77%超越YOLOv13,Jetson边缘实时9FPS
人工智能·yolo·计算机视觉·视觉检测·电网巡检·绝缘子缺陷检测
旦莫3 分钟前
将AI引入到自动化测试以后我遇到了哪些问题
人工智能·测试开发·自动化·测试用例
金井PRATHAMA3 分钟前
内容与形式(二)内容:基于系统科学与信息科学双重视角的层级化定义
大数据·人工智能·自然语言处理·知识图谱
测试修炼手册4 分钟前
[测试技术] AI自动化测试落地实战(二):从测试用例到Playwright脚本
人工智能·测试用例
ZPC82104 分钟前
YOLOv8-3D(3D 目标检测 + 6D 抓取姿态)
算法·机器人
qq_411262424 分钟前
四博AI台灯方案升级:基于 ESP32-S3 的摄像头拍照答题、语音陪伴与双目交互智能音箱方案
人工智能·智能音箱