Helix 02 :移动+操作融合,解锁人形机器人全身控制的VLA模型

移动操作一直是人形机器人领域的关键挑战。真正的难点不在于实现其中任何一种单一能力,而在于将二者无缝融合为单一、连贯的行为。

移动与操作相互影响、动态耦合:托举物体会改变身体平衡,移动步伐会影响肢体的可操作范围,机器人的四肢动作始终处于相互制约的动态状态。尽管当今的人形机器人已能完成跳跃、舞蹈等高动态动作,却仍普遍面临一个根本局限:++++缺乏真正的自主可控性。++++

多数系统仅能复现经离线规划的动作,且仅能接收有限的反馈信息。一旦环境出现预期之外的偏移或接触变化,整个任务便容易失效。为此,传统方案往往采取折中策略:**++将移动与操作拆分为独立模块,再用状态机进行拼接。++**机器人只能按固定流程分步执行------例如先行走、再停止、调整平衡、伸手抓取、然后继续行走。这种方式切换迟缓、鲁棒性低,动作也显得僵化而不自然。

实现真正的自主,需要一套全新的技术路径:一个能对机器人全身进行一体化实时推理的统一学习系统。它必须能够在移动中操作、在操作中调整平衡,并能从失误中即时恢复,完成感知-决策-执行的持续闭环。

基于此,Figure 公司于2026年1月发布了 Helix 的升级版 ------Helix 02,将控制能力从机器人上半身拓展至全身,实现了行走、操作与平衡三大功能的一体化协同控制。

一、Helix 02模型架构

在模型架构层面,Helix 02 在初代 Helix 的"System1、System2" 双系统架构基础上,新增了基础层 System 0,各系统均按自身固有时间尺度独立运行,各司其职、协同配合:

  • System2( 以下简称 "S2" :针对任务目标进行低速推理,专注于场景解析、语言理解与行为序列规划;

  • System1( 以下简称 "S1" **):**具备高速决策能力,以 200 Hz 的频率将感知信息转化为全身关节运动目标;

  • System0( 以下简称 "S0" :执行频率高达 1 KHz,负责全身平衡维持、接触感知与动作协同。

三者紧密配合,共同构成一套从视觉像素到关节力矩输出的高度集成化层级架构。其中,S2 支撑起复杂长时程任务所需的语义推理能力,S1 实现全传感器与全执行器之间的高速联通,S0 则提供经由学习训练的全身控制能力。

依托于三层架构的高效协同,Helix 02 构建出能够支持人形机器人在室内环境中无缝融合行走与操作的连续自主控制能力。

1)System 2:场景理解与语言交互

初代Helix 中,系统S2是一个 70亿(7B)参数的预训练VLM模型,用于处理机器人单目视觉图像和机器人状态信息(包括手腕姿态和手指位置),并将它们投影到视觉语言嵌入空间中。S2 将所有语义任务相关信息提炼为一个连续的潜在向量,以7-9 Hz的频率传递给 S1 ,为机器人的行为决策提供高层次的指导。

在Helix 02 系统中,S2 依旧作为语义推理层,承担场景解析、语言理解的任务,并为S1生成隐式任务目标。但是,Helix 02大幅拓展了S2 可指定的动作行为范围:此前其仅能下达简单指令,如 "拿起番茄酱",如今可下达复杂的连续动作指令,例如:"走到洗碗机旁并打开柜门"、"将碗具端至操作台"、"返回上层碗架取拿杯子"。

S2无需规划底层的步序动作,也无需明确规定四肢的协同方式,只需生成一系列语义隐状态,由S1将其解析为运动控制指令,最终交由 S0 执行即可。

2)System 1:"全传感器输入、全关节输出" 的视觉运动策略网络

初代Helix 中,S1 仅实现对机器人上半身的控制,输入数据为关节状态与视觉图像信息,然后以 200Hz 频率输出包括手腕姿态、手指弯曲和外展控制,以及躯干和头部方向在内的上半身控制指令。

而在Helix 02中,S1仍是一个 8000万(80M)参数的Transformer模型,但接入了机器人的头部相机、掌心相机、指尖触觉传感器、全身本体感知所有传感器,实现机器人全身的全关节级控制,涵盖腿部、躯干、头部、手臂、腕部及单根手指。

S1依旧是基于S2隐状态的Transformer模型,如今可输出全身关节运动目标,由 S0以1KHz的频率实时跟踪执行。

3)System 0 :基于人类数据的类人化全身控制

S0是类人化全身控制的基础模型,通过学习人类维持平衡与稳定的运动模式,形成运动习得先验,为Helix 02的物理具身提供核心支撑 ------ 在上层网络进行任务规划与推理时,S0可保障所有动作流畅、安全、稳定执行。

无需为行走、转身、下蹲、伸展等动作单独设计奖励函数,S0可直接从海量多样化运动数据集中学习并复刻人类运动模式,同步掌握力的协同调控与身体姿态动态调整能力,在通用移动操作全流程中持续维持身体平衡。

  • 训练数据:超过1000小时的关节级重定向人类运动数据;

  • 模型架构:一个含1000万(10M)参数的神经网络,以全身关节状态与基座运动信息为输入,以1000Hz的频率输出关节级执行器控制指令;

  • ****仿真训练:****全程在仿真环境中进行,覆盖20 万个并行仿真实例,并采用大规模域随机化技术,确保模型能直接迁移至实体机器人,并在不同机器人平台上具备优秀的泛化能力。

相关推荐
zzzzzz3109 天前
假如我是掘金管理员,我先给评论区装个'代码审查'系统
python·程序员·机器人
通信小呆呆10 天前
当算法有了“五感”:多模态数据融合如何向人体感官协同学习?
人工智能·学习·算法·机器学习·机器人
HelloWorld__来都来了10 天前
【每日学术速报】2026-06-15
人工智能·具身智能
生成论实验室10 天前
机器人:一个自主运动的系统
人工智能·算法·语言模型·机器人·自动驾驶·agi·安全架构
Dick50710 天前
ROS2 常用命令表
人工智能·学习·算法·机器人
沫儿笙10 天前
川崎机器人二保焊节气设备
人工智能·机器人
C++ 老炮儿的技术栈10 天前
Qt工控实战:自研机器人TCP长连接客户端(粘包处理+心跳保活+自动重连完整源码解析)
qt·tcp/ip·机器人
Deepoch10 天前
VLA多模态架构加持 采摘机器人实现精细化智能采收
人工智能·机器人·开发板·具身模型·deepoc·采摘
选与握10 天前
$\pi_{0.7}$: 一个具备涌现能力的可引导的通用机器人基础模型
机器人·vla·pi07