4.0 相机引导XY轴控制螺丝枪打螺丝

假如一个产品的同一水平上要打6个螺钉,是通过伺服XY轴移动带动相机以及螺丝枪,由相机拍照,根据拍照后螺丝孔位置来引导伺服进行移动以对准螺丝孔位置的。步骤如下:

一、9点标定,即把相机与伺服的实际位置关联起来。步骤如下:

选定螺丝孔1(其他螺丝孔也可以),移动XY轴使得螺丝孔1出现在相机视野的中心。做如下工作:

1).把此处作为(X1_标准拍照位,Y1_标准拍照位), 作为9点标定的第5个点。

2). 然后伺服分别走到如下9个位置(1-9),分别拍照,找到螺丝孔像素位置(1'-9'),然后使用9点标定工具计算求出像素坐标到伺服XY轴的转换矩阵。

注意本转换矩阵计算的相对值需要乘以-1. 即下图显示伺服向左移动(X-),拍照照片却是向右平移的(假设像素和实际的XY轴重合情况下)。因为本标定方法是工件不动,相机移动。

下图所示。

二、注册标准图像、并找到打螺丝与拍照的固定偏移量

伺服走到(X1_标准拍照位,Y1_标准拍照位),拍照并注册当前图片作为标准图片。

同时手动拧紧一个螺丝到螺丝孔1,手动移动伺服到找到最合适的打螺丝位置记忆为:(X2_标准打螺丝位,Y2_标准打螺丝位).则:

X_打螺丝固定Offset = X2_标准打螺丝位 - X1_标准拍照位

Y_打螺丝固定Offset = Y2_标准打螺丝位 - Y1_标准拍照位

三、实际拍照

  1. 定义所有其他螺丝的拍照位(X_螺丝2拍照位,Y_螺丝2拍照位)....
  2. 走到任意一个螺丝的拍照位,拍照图片得到孔的像素位置,并得到(根据9点标定的矩阵)实际伺服位置.下图所示:

X_实际附加Offset = x1_实际 -- x1

Y_实际附加Offset =y1_实际-y1

3.实际打螺丝所需的伺服位置:

X = X实际拍照位置 + X_打螺丝固定Offset - X_实际附加Offset

Y = Y实际拍照位置 + Y_打螺丝固定Offset - Y_实际附加Offset

上式子有一个负号的原因是我们的9点标定方法导致的。因为本标定方法是工件不动,相机移动。举例来讲:伺服向左移动(X-),拍照照片却是向右平移的(X+)。

相关推荐
zhihuishuxia__4 小时前
Multiplex通讯(多路复用通讯)
网络·图像处理·数码相机·计算机视觉·自动化
懷淰メ5 小时前
【AI加持】基于PyQt+YOLO+DeepSeek的钢材焊接缺陷检测系统(详细介绍)
yolo·目标检测·计算机视觉·pyqt·缺陷检测·deepseek·钢材缺陷
一碗白开水一5 小时前
【论文解读】VMamba: Visual State Space Model
人工智能·计算机视觉
迪菲赫尔曼6 小时前
从 0 到 1 打造工业级推理控制台:UltraConsole(Ultralytics + FastAPI + React)开源啦!
前端·yolo·react.js·计算机视觉·开源·fastapi
隔壁大炮6 小时前
Day07-RNN层(循环网络层)
人工智能·pytorch·python·rnn·深度学习·神经网络·计算机视觉
深度学习lover11 小时前
<数据集>yolo 常见对象检测<目标检测>
人工智能·python·yolo·目标检测·计算机视觉·常见对象检测
硅谷秋水11 小时前
《自动驾驶系统开发》英文版《Autonomous Driving Hanbook》推荐
人工智能·深度学习·机器学习·计算机视觉·语言模型·自动驾驶
医学AI望远镜11 小时前
医学检测结合自监督学习:两篇新论文解析3D头部CT与目标检测进展!
人工智能·计算机视觉·医学图像
sali-tec12 小时前
C# 基于OpenCv的视觉工作流-章56-OCR
图像处理·人工智能·opencv·算法·计算机视觉·ocr
StfinnWu12 小时前
论文阅读:Frequency Domain-Based Diffusion Model for Unpaired Image Dehazing
人工智能·计算机视觉