TRO 2025 | 伦敦国王学院罗山教授团队发布触觉操作机器人RoTipBot:机器人也能翻书!

伦敦国王学院罗山教授团队联合北京理工大学与莫纳什大学,发布了RoTipBot --- 首个基于可旋转触觉传感器实现多层薄柔物体计数与抓取的机器人平台,为主动触觉感知在复杂物体操控中的应用打开了新方向,注入全新活力。

论文由罗山教授担任通讯作者,江佳齐与张旭阳为共同第一作者。论文链接:10.1109/TRO.2025.3576951项目主页:https://sites.google.com/view/rotipbot

研究动机:

研究动机:薄柔物体因其厚度小、易弯曲的特性,给机器人抓取带来两大挑战:(1)薄层常常叠在一起,导致相机难以感知下层状态,形成信息不全的视觉输入;(

2)柔性物体变形性强,对夹持器的灵巧性与柔顺性提出更高要求。现有方法通常依赖已知物体位置,或借助昂贵的力/力矩传感器以弥补视觉感知的不确定性,显著提高了系统成本。同时,配套的抓取装置(如吸盘、软体夹持器)也普遍存在效率限制---每次抓取闭合通常仅能分离一层,难以满足高效处理需求。

为此,本文提出了RoTipBot---首个通过可旋转触觉传感器实现多层薄柔物体计数与一次性抓取的机器人系统。具体而言,我们设计了名为 RoTip 的新型视触觉传感器,具备可旋转结构,并能够感知其指尖周围的全向接触信息。RoTipBot 配备两个 RoTip 传感器,通过同步滚动操作,将多层薄柔物体卷入手指之间的中心区域,从而实现高效稳定的抓取。同时,我们提出了一种基于触觉感知的抓取策略,利用 RoTip 的实时接触信息确保双指与物体建立安全接触,并精确估算被卷入的薄柔物体数量,实现薄柔物体的操控。RoTip传感器:如下图所示,所提出的RoTip传感器包括三个主要模块:固定模块、传输模块和手指主体。手指主体通过底部的视觉相机可以实现全向感应(Omnidirectional Sensing),传输模块通过舵机驱动实现旋转控制。RoTip传感器的设计延续了团队前期的全向感知手指GelTip和可旋转触觉传感器TouchRoller,首次将全向感知和主动旋转运动进行结合。RoTipBot抓取框架:本节介绍 RoTipBot利用RoTip 实现多层薄柔物体(如纸张)计数与同步抓取。RoTipBot 基于双指夹持器设计:一侧为固定物体的被动指,另一侧为主动指,通过旋转操作将多层物体卷入两指之间,实现一次性稳定夹持。该方法避免了传统从同侧夹取方式所带来的潜在损伤风险,同时提升了抓取的稳固性与效率。尽管本文以双指夹持器为例,该策略具备良好的通用性,可拓展至多指机械手。

具体流程如下:

首先,系统利用 RGB-D 相机获取粗略的抓取初始位姿;随后,基于 RoTip 的全向触觉感知能力,设计了一种触觉引导的位姿微调策略,以确保末端执行器精确对位并实现稳定接触;最后,针对多层物体抓取过程中堆叠厚度动态变化的问题,提出一套基于触觉反馈的纸张计数算法与连续调节机制,实现柔顺高效的多层抓取。

实验与分析:本文进行了全面的实验,以评估我们提出的RoTipBot方法处理薄的柔性物体,在总体成功率方面其优于SOTA方法,同时抓取速度提高了3倍。部分实验结果及视频如下所示。

通过针对抓取位置的FEM仿真和实际测量实验,我们发现薄的柔性物体的边角是最容易被搓动的位置。

针对不同薄的柔性物体的计数实验:

今年早些时候,在伦敦国王学院举行的第五届英国机器人操作研讨会上,我们现场演示了RoTipBot。该机器人在300多名参观者面前连续翻转纸张、织物和塑料板,全程无故障,充分证明了其在现实应用场景下的可靠性。

作者介绍:罗山教授(Reader)是机器人触觉感知领域的国际领军人物,深耕视触觉融合与灵巧操作研究十余年,曾任2024年T-RO触觉机器人专刊(Tactile Robotics)首席客座编辑,现任T-RO副主编(Associate Editor)。他所领导的伦敦国王学院机器人感知实验室(Robot Perception Lab),在机器人全向视触觉传感、触觉仿真、多模态操作等方向取得多项开创性成果,持续推动机器人"看得见、摸得准、动得巧"。

招生广告:本文第一作者江佳齐,国家级青年人才项目入选者,现为北京理工大学空天科学与技术学院助理教授,副研究员。其博士在2024年毕业于伦敦国王学院工程系,师从罗山教授,硕士和本科分别于2019年和2016年毕业于北京理工大学宇航学院,师从王佳楠研究员。目前主要研究方向为Tactile Robotics和无人机自主控制,在机器人顶级会议期刊如T-RO, T-Mech, RA-L, IROS上发表多篇一作论文。现招收2026级博士生1-2名、硕士生2-3名、及博士后,学术指导细致、经费充足,欢迎有相关背景的同学与我联系。联系邮箱:jiaqi.jiang@bit.edu.cn

相关推荐
wuyk55533 分钟前
3.ROS2 Humble 命令行操作详解【VMware Ubuntu22.04 实操】
物联网·机器学习·机器人
星云API技术支持14 小时前
企业微信二次开发:外部群机器人如何结合会话列表、群详情与消息事件做统一管理
机器人·企业微信
SCTF_XingTong15 小时前
机器人晶振选型避坑:三大场景清单
机器人·机器人晶振选型·机器人时钟方案
YFJ_mily15 小时前
9.24早鸟通道即将关闭|IMRA2026智能制造机器人自动化IEEE会议|往届EI稳定检索,设有学生专属投稿权益
人工智能·机器学习·机器人·自动化·智能制造·rdlink研发家·马鞍山会议
八荒启·交互动画17 小时前
机器人仿真实践(第0卷)——003机器人定义与发展史:从零实现
机器人·八荒启-交互动画·机器人仿真与模拟
鲁邦通物联网19 小时前
机器人梯控如何区分电梯门全开与半开状态
人工智能·机器人·机器人梯控·agv梯控·机器人乘梯·机器人自主乘梯·agv机器人梯控
DogDaoDao1 天前
HYPERmotion 深度解析:当人形机器人学会“自己想招“——LLM 规划 + RL 技能库 + 全身优化的混合行为规划框架
人工智能·机器人·人形机器人·运动轨迹·自由度·运动估计·hypermotion
拓维运动科技1 天前
机器人重复工况测试平台:零部件耐久验证与样机迭代的标准化路径
机器人·六自由度运动模拟平台·非标定制机器人动态测试平台·机器人性能测试平台·模拟机器人性能工况
八荒启·交互动画1 天前
机器人仿真实践(第0卷)——002机器人定义与发展史:数学/物理原理
机器人·八荒启-交互动画
xwz小王子1 天前
【通用世界模型】把机器人动作变成像素流!NVIDIA 提出 Hydra-0:跨人类、单臂与双臂统一预测和控制
数码相机·机器人