前特斯拉Optimus科学家跳槽HF,直接开源了一个机器人代码库

Hugging Face 开源 LeRobot,让 AI 机器人研发迎来重大利好。

今年 3 月,以构建大型开源社区而闻名的 AI 初创公司 Hugging Face,挖角前特斯拉科学家 Remi Cadene 来领导一个新的开源机器人项目 ------LeRobot,引起了轰动。

Remi Cadene 在今年三月宣布结束其三年的 Tesla 机器人研究生涯,并加入 Hugging Face。

在此之前,Remi Cadene 是特斯拉 Autopilot 和 Optimus 机器人研究项目的团队成员。

现在,Hugging Face 宣布正式推出并开源机器人工具包 LeRobot,基于有史以来最大规模的众包机器人数据集。

LeRobot Github 链接:

github.com/huggingface...

LeRobot 代码库堪称机器人领域的「Transformers」。

图源:twitter.com/RemiCadene/...

Cadene 在 X 上表示:「人工智能发展的下一步是将其应用于我们的物理世界。因此,我们正在推动社区共同努力构建 AI 机器人,这对所有人开放!」

LeRobot 工具包不仅仅是一个软件包,而且是一个全面的平台,包括用于共享、可视化数据和训练 SOTA 模型的多功能库。用户可以通过 LeRobot 访问大量预训练模型,以快速启动他们的项目。

此外,LeRobot 与物理模拟器无缝集成,这允许没有物理机器人硬件的爱好者和开发者在虚拟环境中模拟和测试他们的 AI 模型。

在硬件方面,LeRobot 旨在处理各种机器人硬件:「从教育和研究中使用的简单机械臂到先进 AI 研究设施中更复杂的类人机器人。」

总的来说,LeRobot 项目的目标是提供一个能够适应和控制任何形态机器人的 AI 系统,使机器人在多功能性和可扩展性方面得到增强。

Cadene 还展示了借助 LeRobot,机器人可以获取的一些能力,包括训练机器人抓取物体、在未绘制空间内导航等等。

在 Mobile Aloha 数据上,完全端到端地学习导航和操作:

在两个机械臂之间传递物体:

得益于大型语言模型(LLM)及生成式 AI 的突破性进展,机器人领域的发展也获得了极大的推动。

例如,最近特斯拉 Optimus 团队宣布了一项新进展:二代 Optimus 人形机器人已经「进厂打工」了:

二代 Optimus 人形机器人

波士顿动力纯电驱动的新版人形机器人 Atlas 问世:

新一代 Atlas

初创公司 Meetee Robotics 发布了首款双足人形机器人 MenteeBot,它能理解自然语言命令:

MenteeBot

面向机器人技术升级、形态多样化的现状,Cadene 表示 LeRobot 项目的发展愿景是「从多样化社区中构建软件和硬件,以在现实世界中开发下一代智能机器人」。

通过降低入门门槛、促进知识和资源共享,Hugging Face 将构建一个可能重新定义 AI 机器人领域的社区。

参考链接:

venturebeat.com/automation/...

机器之心「AI+智能车论坛」将于5 月 11 日在上海浦东新区举办,全日程已发布,扫码报名,锁定限量席位。

论坛特邀同济大学、上海金桥智能网联汽车发展有限公司、极越汽车、亿咖通科技、中国移动上海产业研究院、百度智能云、爱芯元智、Nullmax等重量级嘉宾,共同探讨大模型为汽车产业数字化和产品智能化升级带来的新机遇和新挑战,畅想大模型时代智能网联车产业发展的全新图景。

相关推荐
通信.萌新27 分钟前
OpenCV边沿检测(Python版)
人工智能·python·opencv
ARM+FPGA+AI工业主板定制专家29 分钟前
基于RK3576/RK3588+FPGA+AI深度学习的轨道异物检测技术研究
人工智能·深度学习
赛丽曼32 分钟前
机器学习-分类算法评估标准
人工智能·机器学习·分类
伟贤AI之路34 分钟前
从音频到 PDF:AI 全流程打造完美英文绘本教案
人工智能
weixin_3077791335 分钟前
分析一个深度学习项目并设计算法和用PyTorch实现的方法和步骤
人工智能·pytorch·python
helianying5541 分钟前
云原生架构下的AI智能编排:ScriptEcho赋能前端开发
前端·人工智能·云原生·架构
池央1 小时前
StyleGAN - 基于样式的生成对抗网络
人工智能·神经网络·生成对抗网络
PaLu-LI2 小时前
ORB-SLAM2源码学习:Initializer.cc⑧: Initializer::CheckRT检验三角化结果
c++·人工智能·opencv·学习·ubuntu·计算机视觉
小猪咪piggy2 小时前
【深度学习入门】深度学习知识点总结
人工智能·深度学习
汤姆和佩琦2 小时前
2025-1-20-sklearn学习(42) 使用scikit-learn计算 钿车罗帕,相逢处,自有暗尘随马。
人工智能·python·学习·机器学习·scikit-learn·sklearn