眼在手外-机器人坐标系与相机坐标系标定方法

1 眼在手外坐标系概述

实现机械臂和相机的手眼标定,就是要通过双目相机坐标系、机械臂坐标系和机械臂 末端执行器三者的坐标系转换,求出手眼转换矩阵。设双目相机坐标系为 Oc,标定板坐标 系为 Ow,末端执行器坐标系为 Oe,机械臂底座的坐标系为 Ob。其中,设标定板坐标系到 双目相机坐标系的转换关系为𝑻𝒘 𝒄 ,双目相机坐标系到机械臂底座的坐标系的转换关系为 X, 机械臂底座坐标系到机械臂末端执行器坐标系的转换关系为𝑻𝒃 𝒆,其中,本文中要求解的就 是双目相机相对机械臂底座坐标系的转换关系,也即眼在手外情况下的手眼转换矩阵。

2 硬件设备

本文中眼在手外标定时所需要的设备有机械臂及其控制系统,笔记本电脑,规格为 9 格×12 格的黑白相间的棋盘格标定板,其中每个方格大小为 30mm×30mm、相机,相机支 架等。

3 标定流程

一、 将标定板固定在机械臂末端,双目立体相机固定在机械臂底座上与机械臂底 座相对静止,移动机械臂,使标定板在双目相机视场内某一位姿下,设标定板上的点在标 定板坐标系下的坐标值为𝑃1,末端执行器坐标系下的坐标值为𝑃3,则将𝑃1点转换为𝑃3点的 转换关系为:

二、接着移动机械臂将机械臂末端执行器上的标定板移动到下一位姿且保持标定板在双 目相机视场内,在该位姿下得到另一相同形式的方程,即:

其中,公式中的可以通过机器人控制系统的位姿输出来获得,可以通 过双目立体相机的外部参数获得.

将上式联立可得

化简可得

,上式可化简为AX=BX

而 A 和 B 都可以通过机械臂控制系统和双目相机输出获得,因此为已知量。

三、本文中通 过移动机械臂末端执行器,记录了 10 组标定板的位姿进行求解,得到 5 组 A𝑋=𝑋B 形式的 方程组进行求解手眼转换矩阵𝑋。

相关推荐
PHOSKEY几秒前
3D 工业相机解析:轴向、平面、重复、线性精度到底哪个更重要?
数码相机
Blossom.1181 分钟前
基于深度学习的图像分割:使用DeepLabv3实现高效分割
人工智能·python·深度学习·机器学习·分类·机器人·transformer
音视频牛哥4 小时前
H.266 vs H.265/AV1/H.264:从工程落地看下一代视频系统的技术演进
机器人·音视频开发·视频编码
音视频牛哥5 小时前
8K、AI、低空智联,H.266能否撑起下一代视频通路?
机器人·音视频开发·视频编码
宇钶宇夕10 小时前
图像处理第二篇:初级篇 —— 选择镜头的基础知识及对图像处理的影响
运维·数码相机·程序人生·自动化
诸葛务农14 小时前
人形机器人_双足行走动力学:基于OpenSim平台的股骨模型与建模
机器人
格林威15 小时前
Baumer工业相机堡盟工业相机如何通过YoloV8深度学习模型实现裂缝的检测识别(C#代码UI界面版)
人工智能·深度学习·数码相机·yolo·计算机视觉
Sherlock Ma16 小时前
字节跳动GR-3:可泛化、支持长序列复杂操作任务的机器人操作大模型(技术报告解读)
人工智能·计算机视觉·语言模型·机器人·大模型·aigc·具身智能
宇钶宇夕18 小时前
图像处理中级篇 [1]—— 彩色照相机的效果与预处理
人工智能·数码相机·计算机视觉
一起搞IT吧18 小时前
Camera相机人脸识别系列专题分析之十九:MTK ISP6S平台FDNode传递三方FFD到APP流程解析
android·图像处理·人工智能·数码相机·计算机视觉