OpenCV——图像融合

OpenCV------图像融合

一、引言

在许多计算机视觉应用中(例如机器人运动和医学成像),需要将来自多幅图像的相关信息集成到一幅图像中。这种图像融合将提供更高的可靠性、准确性和数据质量。

多视图融合可以提高图像的分辨率,同时恢复场景的 3D 表示。多模态融合结合了来自不同传感器的图像,称为多传感器融合。其主要应用包括医学图像、监控和安全,

1.1 图像融合分类

工程师根据融合完成的阶段,在三个级别执行图像融合(image日 fusion)。

像素级图像融合。这种图像融合方法处于较低级别,且易于执行。它包含两个输入图像的特征并生成平均的单个结果图像。

特征级图像融合。它从多个来源对图像特征(大小、颜色)进行校正,从而在特征提取后生成增强图像。

基于块(区域)的图像融合。这是一项高级技术。它采用多阶段表示并根据区域计算测量值。

图像融合的层级划分图:

二、C++代码实现

cpp 复制代码
#include <vector>
#include <opencv2/core.hpp>
#include <opencv2/highgui.hpp>
#include <opencv2/imgproc.hpp>

#include <iostream>

using namespace std;
using namespace cv;
int main()
{
	cv::Mat image1;
	cv::Mat image2;
	cv::Mat image3;
	cv::Mat image4;
	image1 = cv::imread("D:\\***\\1.bmp");
	image2 = cv::imread("D:\\***\\2.bmp");
	image3 = cv::imread("D:\\***\\3.bmp");
	image4 = cv::imread("D:\\***\\4.bmp");

	if (!image1.data)
		return 0;
	if (!image2.data)
		return 0;

	// 合并图像
	cv::Mat image5;
	cv::Mat image6;
	cv::Mat image7;
	//cv::addWeighted 用于将两张图像(image1 和 image2)按指定的权重(0.7 和 0.9)进行加权融合,结果存储在 image3 中。
	cv::addWeighted(image1, 1, image2, 1, 0., image5);   //亮度调整:gamma 设为 0.,表示不调整整体亮度。
	//cv::namedWindow("Image3", 0);
	//cv::imshow("Image3", image3);
	cv::addWeighted(image3, 1, image4, 1, 0., image6);
	cv::addWeighted(image5, 0.7, image6, 0.9, 0., image7);

	//cv::namedWindow("Image7", 0);
	//cv::imshow("Image7", image7);

	/* 新增二值化操作开始 */
	cv::Mat binaryImage;

	 方法1:全局阈值法(适合光照均匀的图像)
	double thresholdValue = 68;  // 初始阈值设为128(可根据实际情况调整)
	double maxValue = 255;        // 二值化后的最大值
	cv::threshold(image7,          // 输入图像
		binaryImage,      // 输出二值图像
		thresholdValue,   // 阈值
		maxValue,         // 超过阈值时设置的值
		cv::THRESH_BINARY // 二值化类型
	);
	// 定义结构元素(核)
	int erosion_size = 3;   // 腐蚀核大小(奇数)
	cv::Mat kernel = cv::getStructuringElement(
		cv::MORPH_RECT,     // 矩形结构元素
		cv::Size(2 * erosion_size + 1, 2 * erosion_size + 1),
		cv::Point(erosion_size, erosion_size)
	);
	// 腐蚀操作
	cv::Mat erodedImage;
	cv::erode(binaryImage, erodedImage, kernel,
		cv::Point(-1, -1),  // 锚点位置(默认中心)
		1);               // 迭代次数
// 膨胀操作(使用相同的核)
	cv::Mat dilatedImage;
	cv::dilate(erodedImage, dilatedImage, kernel,
		cv::Point(-1, -1),
		1);

	// 显示结果(可选)
	//cv::namedWindow("Original", cv::WINDOW_NORMAL);
	//cv::namedWindow("Eroded", cv::WINDOW_NORMAL);
	cv::namedWindow("Dilated", cv::WINDOW_NORMAL);
	//cv::imshow("Original", binaryImage);
	//cv::imshow("Eroded", erodedImage);
	cv::imshow("Dilated", dilatedImage);
	cv::waitKey(0);

	// 方法2:自适应阈值法(适合光照不均匀的图像)
	 //cv::adaptiveThreshold(image7, binaryImage, 255,
	 //                     cv::ADAPTIVE_THRESH_GAUSSIAN_C,
	 //                     cv::THRESH_BINARY, 11, 2);

	// 方法3:大津法(自动计算最佳阈值)
	// cv::threshold(image7, binaryImage, 0, 255, cv::THRESH_BINARY | cv::THRESH_OTSU);

	// 显示二值化结果
	//cv::namedWindow("Binary Image", cv::WINDOW_NORMAL);
	//cv::imshow("Binary Image", binaryImage);
	/* 新增二值化操作结束 */

	cv::waitKey(0);
	cv::destroyAllWindows();

	return 0;
}

三、效果展示

3.1 标准球

四张图像如下:

融合效果如下所示:

3.2 铝制底座

四张待融合图像如下:

融合效果如下所示:


小结:从实验一与实验二的数据融合结果来看,针对原始采集数据中存在的阴影干扰、缺陷特征不突出等问题,融合后的数据显著提升了可视化效果,使得数据中的缺陷特征呈现得更为清晰、直观,便于观察与分析。

相关推荐
白总Server11 分钟前
GaussDB 分布式数据库调优(架构到全链路优化)
java·网络·c++·架构·go·scala·数据库架构
whoarethenext1 小时前
C++/OpenCV地砖识别系统结合 Libevent 实现网络化 AI 接入
c++·人工智能·opencv
Antonio9151 小时前
【Linux】Linux基础I/O
linux·c++
虾球xz1 小时前
CppCon 2015 学习:C++ devirtualization in clang
开发语言·c++·学习
呆呆的小鳄鱼1 小时前
IO之详解cin(c++IO关键理解)
linux·c语言·c++
看到我,请让我去学习1 小时前
C++核心编程(动态类型转换,STL,Lanmda)
c语言·开发语言·c++·stl
羚羊角uou2 小时前
【C++】模拟实现map和set
java·前端·c++
泽02022 小时前
C++之模板进阶
开发语言·c++·算法
byte轻骑兵4 小时前
【C++特殊工具与技术】优化内存分配(五):显式析构函数的调用
开发语言·c++
要努力啊啊啊5 小时前
YOLOv3 训练与推理流程详解-结合真实的数据样例进行模拟
人工智能·yolo·机器学习·计算机视觉·目标跟踪