从零理解鱼眼相机的标定与矫正(含 OpenCV 代码与原理讲解)

本文适合初学者系统掌握鱼眼镜头的标定与矫正原理,图文结合,带你从 0 到 1 理解 K, D, u,v 等参数的真实含义。


📌 一句话总结

鱼眼相机由于镜头视角宽、畸变大,拍出来的画面会"鼓起来"或者变形。通过标定得到的参数,可以让计算机"理解"这种变形是怎么发生的,并据此把图像"拉回正形"。


📐 一、什么是内参矩阵 K

🔹 定义

在 OpenCV 中,内参矩阵(Camera Intrinsic Matrix)通常是一个 3x3 的矩阵:

cpp 复制代码
cfg.K = cv::Matx33d(
    fx, 0, cx,
    0, fy, cy,
    0, 0, 1
);

你可能会看到这样的数值:

cpp 复制代码
cfg.K = cv::Matx33d(
    436.38, 0,     966.97,
    0,     436.01, 556.57,
    0,     0,      1
);
矩阵元素 含义
fx X 方向焦距(单位:像素)
fy Y 方向焦距(单位:像素)
cx 主点横坐标(图像中心 X)
cy 主点纵坐标(图像中心 Y)

✅ 这个矩阵定义了相机如何将三维空间的点 (X, Y, Z) 投影到图像上的像素点 (u, v)


🌀 二、什么是畸变系数 D

鱼眼镜头会让图像产生严重的边缘弯曲,OpenCV 提供了畸变系数来描述这种变形。

cpp 复制代码
cfg.D = cv::Vec4d(k1, k2, k3, k4);

示例:

cpp 复制代码
cfg.D = cv::Vec4d(
    0.0130, 0.0029, -0.0016, 0.000017
);
  • k1, k2, k3, k4 是四个畸变参数
  • 适用于 OpenCV 的 fisheye 模块(与普通畸变模型不同)

🔍 三、如何进行图像矫正?

OpenCV 使用以下 API:

cpp 复制代码
cv::Mat map1, map2;
cv::fisheye::initUndistortRectifyMap(
    cfg.K, cfg.D, cv::Mat::eye(3, 3, CV_64F),  // 内参、畸变、旋转矩阵
    cfg.K, image.size(),                      // 新的投影矩阵、图像尺寸
    CV_16SC2, map1, map2
);

cv::Mat undistorted;
cv::remap(inputImage, undistorted, map1, map2, cv::INTER_LINEAR);

步骤解释:

  1. initUndistortRectifyMap() 生成像素映射规则(map)
  2. remap() 按照 map 把每个像素"搬"回它该在的位置

🧠 四、图像坐标系 (u, v) 是啥?

坐标 含义
u 水平方向像素坐标(从左到右)
v 垂直方向像素坐标(从上到下)

图像坐标从左上角 (0,0) 开始,右下角是 (width-1, height-1)


🧮 五、像素点是如何计算出来的?

相机模型里有这样一组公式:

cpp 复制代码
u = fx * (X/Z) + cx
v = fy * (Y/Z) + cy

📌 表示一个 3D 世界点 (X,Y,Z) 被投影成 2D 图像坐标 (u,v)

变量 含义
(X,Y,Z) 世界坐标系中的 3D 点
(u,v) 相应的图像坐标(像素)
fx, fy 焦距乘以像素密度,缩放比例
cx, cy 图像中心(主点),像素偏移量

🎥 六、实际标定流程

拍摄棋盘格图像后,OpenCV 提供了函数可直接求出 K, D

cpp 复制代码
cv::fisheye::calibrate(
    objectPoints, imagePoints, imageSize,
    K, D, rvecs, tvecs,
    cv::fisheye::CALIB_RECOMPUTE_EXTRINSIC,
    cv::TermCriteria(3, 20, 1e-6)
);
  • objectPoints: 棋盘格上每个点在 3D 空间的坐标
  • imagePoints: 图像中检测到的角点像素坐标
  • K, D: 得到的内参和畸变参数

🧾 七、总结表格

项目 含义
K 相机内参,描述镜头成像方式
D 鱼眼畸变系数,描述弯曲程度
u, v 图像上的像素坐标
fx, fy 像素缩放系数(与镜头焦距有关)
cx, cy 主点位置,决定图像中心偏移
矫正流程 利用 initUndistortRectifyMap + remap 实现

如果这篇文章帮你理清了思路,欢迎 👍点赞 / ⭐收藏 / 💬留言交流!


相关推荐
h64648564h13 分钟前
CANN 性能剖析与调优全指南:从 Profiling 到 Kernel 级优化
人工智能·深度学习
数据与后端架构提升之路15 分钟前
论系统安全架构设计及其应用(基于AI大模型项目)
人工智能·安全·系统安全
忆~遂愿18 分钟前
ops-cv 算子库深度解析:面向视觉任务的硬件优化与数据布局(NCHW/NHWC)策略
java·大数据·linux·人工智能
Liue6123123122 分钟前
YOLO11-C3k2-MBRConv3改进提升金属表面缺陷检测与分类性能_焊接裂纹气孔飞溅物焊接线识别
人工智能·分类·数据挖掘
一切尽在,你来30 分钟前
第二章 预告内容
人工智能·langchain·ai编程
23遇见34 分钟前
基于 CANN 框架的 AI 加速:ops-nn 仓库的关键技术解读
人工智能
Codebee43 分钟前
OoderAgent 企业版 2.0 发布的意义:一次生态战略的全面升级
人工智能
光泽雨1 小时前
检测阈值 匹配阈值分析 金字塔
图像处理·人工智能·计算机视觉·机器视觉·smart3
Σίσυφος19001 小时前
PCL 法向量估计-PCA邻域点(经典 kNN 协方差)的协方差矩阵
人工智能·线性代数·矩阵
小鸡吃米…2 小时前
机器学习的商业化变现
人工智能·机器学习