前特斯拉Optimus科学家跳槽HF,直接开源了一个机器人代码库

Hugging Face 开源 LeRobot,让 AI 机器人研发迎来重大利好。

今年 3 月,以构建大型开源社区而闻名的 AI 初创公司 Hugging Face,挖角前特斯拉科学家 Remi Cadene 来领导一个新的开源机器人项目 ------LeRobot,引起了轰动。

Remi Cadene 在今年三月宣布结束其三年的 Tesla 机器人研究生涯,并加入 Hugging Face。

在此之前,Remi Cadene 是特斯拉 Autopilot 和 Optimus 机器人研究项目的团队成员。

现在,Hugging Face 宣布正式推出并开源机器人工具包 LeRobot,基于有史以来最大规模的众包机器人数据集。

LeRobot Github 链接:

github.com/huggingface...

LeRobot 代码库堪称机器人领域的「Transformers」。

图源:twitter.com/RemiCadene/...

Cadene 在 X 上表示:「人工智能发展的下一步是将其应用于我们的物理世界。因此,我们正在推动社区共同努力构建 AI 机器人,这对所有人开放!」

LeRobot 工具包不仅仅是一个软件包,而且是一个全面的平台,包括用于共享、可视化数据和训练 SOTA 模型的多功能库。用户可以通过 LeRobot 访问大量预训练模型,以快速启动他们的项目。

此外,LeRobot 与物理模拟器无缝集成,这允许没有物理机器人硬件的爱好者和开发者在虚拟环境中模拟和测试他们的 AI 模型。

在硬件方面,LeRobot 旨在处理各种机器人硬件:「从教育和研究中使用的简单机械臂到先进 AI 研究设施中更复杂的类人机器人。」

总的来说,LeRobot 项目的目标是提供一个能够适应和控制任何形态机器人的 AI 系统,使机器人在多功能性和可扩展性方面得到增强。

Cadene 还展示了借助 LeRobot,机器人可以获取的一些能力,包括训练机器人抓取物体、在未绘制空间内导航等等。

在 Mobile Aloha 数据上,完全端到端地学习导航和操作:

在两个机械臂之间传递物体:

得益于大型语言模型(LLM)及生成式 AI 的突破性进展,机器人领域的发展也获得了极大的推动。

例如,最近特斯拉 Optimus 团队宣布了一项新进展:二代 Optimus 人形机器人已经「进厂打工」了:

二代 Optimus 人形机器人

波士顿动力纯电驱动的新版人形机器人 Atlas 问世:

新一代 Atlas

初创公司 Meetee Robotics 发布了首款双足人形机器人 MenteeBot,它能理解自然语言命令:

MenteeBot

面向机器人技术升级、形态多样化的现状,Cadene 表示 LeRobot 项目的发展愿景是「从多样化社区中构建软件和硬件,以在现实世界中开发下一代智能机器人」。

通过降低入门门槛、促进知识和资源共享,Hugging Face 将构建一个可能重新定义 AI 机器人领域的社区。

参考链接:

venturebeat.com/automation/...

机器之心「AI+智能车论坛」将于5 月 11 日在上海浦东新区举办,全日程已发布,扫码报名,锁定限量席位。

论坛特邀同济大学、上海金桥智能网联汽车发展有限公司、极越汽车、亿咖通科技、中国移动上海产业研究院、百度智能云、爱芯元智、Nullmax等重量级嘉宾,共同探讨大模型为汽车产业数字化和产品智能化升级带来的新机遇和新挑战,畅想大模型时代智能网联车产业发展的全新图景。

相关推荐
清辞8533 分钟前
Coze从入门到实战---第一、二章
大数据·人工智能·学习·语言模型
质造者11 分钟前
LangChain + Ollama + Tavily 实现旅游问答系统
linux·人工智能·python·langchain·rag
追梦人电立电子17 分钟前
X、Y电容的分类与选择
人工智能·分类·数据挖掘·追梦人电力电子
美狐美颜SDK开放平台18 分钟前
直播APP开发实战:第三方美颜sdk接入步骤与注意事项
人工智能·音视频·美颜sdk·第三方美颜sdk·短视频美颜sdk
yychen_java22 分钟前
当算法成为武器:AI泛滥时代的多维危机透视与治理路径
网络·人工智能·ai
TomatoStudy26 分钟前
IT职业教育AI落地与实训体系建设复盘——以职坐标模式为例
大数据·人工智能
大模型最新论文速读27 分钟前
小红书提出 RedKnot:分头处理 kv 缓存,延时降低 60%效果还提升
论文阅读·人工智能·深度学习·机器学习·缓存·自然语言处理
阿瑞IT28 分钟前
AI Agent 工具调用可靠性的工程实践
人工智能
编码者卢布35 分钟前
【Azure AI Search】 searchMode=any 和 searchMode=all 有什么区别?
人工智能·python·flask
Samooyou42 分钟前
大模型微调(Fine Tuning)
人工智能·python·ai·语言模型