CoFSM基于共现尺度空间的多模态遥感图像匹配方法--论文阅读记录

目录

[论文 Multi-Modal Remote Sensing Image Matching Considering Co-Occurrence Filter](#论文 Multi-Modal Remote Sensing Image Matching Considering Co-Occurrence Filter)

参考论文:SIFT系列论文,

[SIFT Distinctive Image Features from Scale-Invariant Keypoints,作者:David G. Lowe](#SIFT Distinctive Image Features from Scale-Invariant Keypoints,作者:David G. Lowe)

[快速样本共识算法FSC:A Novel Point-Matching Algorithm Based on Fast Sample Consensus for Image Registration ,Digital Object Identifier 10.1109/LGRS.2014.2325970](#快速样本共识算法FSC:A Novel Point-Matching Algorithm Based on Fast Sample Consensus for Image Registration ,Digital Object Identifier 10.1109/LGRS.2014.2325970)

低通巴特沃斯滤波器

Shi-Tomasi特征检测:

不同分辨率图像配准

SAR-SIFT:

基于共现矩阵的共现滤波

PSO-SIFT

总结CoFSM流程图

描述符构建过程:

特征向量匹配阶段:


论文 Multi-Modal Remote Sensing Image Matching Considering Co-Occurrence Filter

Digital Object Identifier 10.1109/TIP.2022.3157450

论文主要提出基于共现尺度空间进行图像配准。

参考论文:SIFT系列论文,

SIFT Distinctive Image Features from Scale-Invariant Keypoints,作者:David G. Lowe

除了SIFT论文中提出的经典的尺度空间构造等细节,下图关于base_image的创建也是值得注意的,根据3.3 Frequency of sampling in the spatial domain第二段,有时候可以对输入图片进行长宽扩大一倍达到增大等效第一层的尺度sigma的效果(因为sigma越大卷积耗时越久)

另外,特征匹配阶段的最近邻次近邻比也值得注意,

特征向量构建:1.网格划分2.统计每个格子,每个格子用一个向量表示,每个特征点的方向维数

NMS非最大值抑制 3*3*3邻域

相关代码可以查看opensift,或者见sift 解释-CSDN博客

快速样本共识算法FSC:A Novel Point-Matching Algorithm Based on Fast Sample Consensus for Image Registration ,Digital Object Identifier 10.1109/LGRS.2014.2325970

低通巴特沃斯滤波器

低通巴特沃斯滤波器是一种常用的信号处理滤波器,用于滤除输入信号中高频成分,只保留低频成分。它基于巴特沃斯滤波器的设计原理,其中包括了一些参数,比如截止频率和阶数。

截止频率(cutoff frequency):低通巴特沃斯滤波器的截止频率指的是滤波器开始减弱信号幅度的频率。截止频率越低,滤波器就会滤除更高频率的信号。

阶数(order):低通巴特沃斯滤波器的阶数决定了其滤波器的陡峭程度。阶数越高,滤波器在截止频率附近的衰减越快,但也会导致相位延迟增加。

这是低通巴特沃斯滤波器的传递函数公式,其中 是滤波器的传递函数,是复频率变量, 是截止频率, 是滤波器的阶数。

CoFSM中低通巴特沃斯滤波器的介绍如下

Shi-Tomasi特征检测:

Good Features to Track 在Harris基础上,自相关矩阵最小特征值作为响应值,和自定义阈值进行比较即可判断出角点与否。角点检测:Harris 与 Shi-Tomasi - 知乎

matlab函数:detectMinEigenFeatures

不同分辨率图像配准

Matching Images with Different Resolutions

不同分辨率下Harris自相关矩阵形式

SAR-SIFT:

A SIFT-Like Algorithm for SAR Images

基于共现矩阵的共现滤波

Bilateral Filtering: Theory and Applications

Co-Occurrence Filter

PSO-SIFT

Remote Sensing Image Registration With Modified SIFT and Enhanced Feature Matching

主要创新点:定义新的梯度图像;结合位置-尺度-方向的特征匹配方法

使用二阶导数梯度作为图像梯度

结合位置-尺度-方向的特征匹配方法

An Efficient SIFT-Based Mode-Seeking Algorithm for Sub-Pixel Registration of Remotely Sensed Images logic filter

总结CoFSM流程图

描述符构建过程:

对于输入图片image,首先进行共现矩阵的计算随后获得共现滤波的每层尺度,并计算共现尺度空间,随后进行特征检测部分,结合低通滤波和Sobel的二阶导数梯度计算,基于Shi-Tomasi进行特征点检测并去除重复特征点。描述符构建就是基于检测到的特征点在对数极坐标下进行描述符构建,其中对数极坐标网格划分为每个圆环划分为9个区域,梯度方向直方图统计按照8bin统计。

特征向量匹配阶段

参考PSO-SIFT,仅取其中的position的部分,首先进行基于欧式距离的匹配,随后进行基于位置欧式距离匹配,最后再进行快速样本共识FSC匹配去除误匹配点对(粗差剔除)。

Fig Multi-modal image matching process of CoFSM method

相关推荐
春末的南方城市29 分钟前
FLUX的ID保持项目也来了! 字节开源PuLID-FLUX-v0.9.0,开启一致性风格写真新纪元!
人工智能·计算机视觉·stable diffusion·aigc·图像生成
zmjia11130 分钟前
AI大语言模型进阶应用及模型优化、本地化部署、从0-1搭建、智能体构建技术
人工智能·语言模型·自然语言处理
jndingxin44 分钟前
OpenCV视频I/O(14)创建和写入视频文件的类:VideoWriter介绍
人工智能·opencv·音视频
AI完全体1 小时前
【AI知识点】偏差-方差权衡(Bias-Variance Tradeoff)
人工智能·深度学习·神经网络·机器学习·过拟合·模型复杂度·偏差-方差
GZ_TOGOGO1 小时前
【2024最新】华为HCIE认证考试流程
大数据·人工智能·网络协议·网络安全·华为
sp_fyf_20241 小时前
计算机前沿技术-人工智能算法-大语言模型-最新研究进展-2024-10-02
人工智能·神经网络·算法·计算机视觉·语言模型·自然语言处理·数据挖掘
新缸中之脑1 小时前
Ollama 运行视觉语言模型LLaVA
人工智能·语言模型·自然语言处理
胡耀超2 小时前
知识图谱入门——3:工具分类与对比(知识建模工具:Protégé、 知识抽取工具:DeepDive、知识存储工具:Neo4j)
人工智能·知识图谱
陈苏同学2 小时前
4. 将pycharm本地项目同步到(Linux)服务器上——深度学习·科研实践·从0到1
linux·服务器·ide·人工智能·python·深度学习·pycharm
吾名招财2 小时前
yolov5-7.0模型DNN加载函数及参数详解(重要)
c++·人工智能·yolo·dnn