通过MANUS手套推进由触觉驱动的机器人学习进程

亚德诺半导体(Analog Devices)的 Touch2Trace 研究,旨在解决灵巧机器人领域的一项核心难题:让机器人在不依赖视觉的情况下操控柔性线缆。机器人需要在线缆发生位移时保持握持状态,将人类手指动作转化为机器人动作,并通过示教进行学习。Touch2Trace 方案融合了基于 MANUS 的遥操作、触觉传感与模仿学习技术,使机器人能够在全新的布线工况下完成线缆循迹操作。

借助 MANUS 采集人类示教动作

该研究利用触觉传感与关节状态反馈,训练机械手在无视觉输入的条件下,用手指送进线缆。为采集示教数据,研究人员采用 MANUS Metagloves Pro 数据手套实现机械手遥操作。

手套将操作者的手指关节角度实时传输至定制动作重定向管线,把人体动作映射到机械手拇指、食指、中指共 8 个关节。借此,操作人员可以演示线缆循迹所需的捏取与卷曲动作。

将示教动作转化为训练数据

遥操作过程中,系统同步记录机器人关节指令、实测关节状态,以及机械手指尖传感器采集的触觉数据。记录得到的动作指令作为模仿学习的动作目标,把示教动作与机器人感知观测数据进行配对。

Touch2Trace 将面向特定任务的示教训练数据,与独立预训练的触觉编码器相结合,实现了自主线缆循迹,并具备零样本迁移能力,可应对未见过的线缆类型与布线场景。

Touch2Trace 这项研究展示了基于 MANUS 的遥操作技术如何赋能灵巧机器人学习:采集人类手指运动信息,将其转换为机器人动作,并同步采集示教动作与机器人自身感知反馈数据。

关于MANUS Metagloves Pro

Manus Metagloves Pro模块化、可扩展的设计和更大的无线使用范围确保了其在任何环境下都可以轻松操作的超高灵活性。

Manus Metagloves Pro支持快速设置,校准时间短。有多种尺寸可供选择,适用于多种手部动捕场景。可更换电池让手套能够连续使用,且无需重新校准。

相关推荐
数聚天成DeepSData1 小时前
教育年限数据库跨版本对齐:年龄组、性别与五年间隔怎么处理
人工智能·深度学习·机器学习·数据集·deepsdata
欣欣之王来了1 小时前
2024主流国产大模型深度对比:文心一言/通义千问/智谱AI/Qwen等选型指南
人工智能·ai·大模型
具身AGI1 小时前
谁当具身主干,物理AI 世界模型 与 VLA 之争
人工智能
threerocks1 小时前
速来!认领你的「口播Bot」,妈妈再也不用担心我做口播视频了!
人工智能·aigc·ai编程
YOLO数据集集合1 小时前
Deepseek融合yolo的行人车辆多目标检测系统 |行人检测 车辆检测 多目标检测 YOLO DeepSeek9165期
人工智能·yolo·目标检测·计算机视觉·车辆检测·行人检测
进击的横打2 小时前
【人工智能】缓存命中率:从原理到业务场景的全面解读
人工智能·缓存
lisw052 小时前
基于人工智能的安全分析技术: 用于实时识别威胁
人工智能·安全
武子康2 小时前
LingBot-VA 2.0 深度解析:为什么要同时预测未来世界与机器人动作
人工智能·后端·agent
JavaEdge.2 小时前
[特殊字符]Moltbot 安装与上手:用一条命令在本地跑起个人 AI 助手(含 DashboardChat)
人工智能