WACV 2025 | MCOR:基于跨模态信息互补与余弦相似度通道重采样模块增强的多光谱目标检测

01 论文信息

  • 论文题目: Multispectral Object Detection Enhanced by Cross-modal Information Complementary and Cosine Similarity Channel Resampling Modules
  • 论文作者: Junbo Jang、Chanyeong Park、Heegwang Kim、Jiyoon Lee、Joonki Paik
  • 发表单位: 韩国 中央大学
  • 发表会议\期刊: WACV 2025
  • 代码链接: 暂无

02 论文主要贡献

  1. 提出 MCOR(多光谱互补目标加权重采样)模块,结合 CIC 跨模态信息互补模块与 CSCR 余弦相似度通道重采样模块,攻克多光谱融合存在的各类难点。
  2. 在多套多光谱目标检测基准数据集上开展定性与定量实验对比,证明本文方法优于现有方法。

03 方法

每一个阶段输出的特征图送入 MCOR 模块,该模块包含 CIC 跨模态信息互补模块 与 CSCR 余弦相似度通道重采样模块 。

CIC 模块分为两个子模块:模态感知差异学习MADL模块 ;模态感知交叉自注意力MACSA模块 。

CSCR 包含两个子模块:基于余弦相似度的通道排序CS²模块 ;目标加权通道重采样OCR模块。

基于余弦相似度的排序机制:

OCR 目标加权通道重采样模块结构图:

04 实验

4.1 SOTA

4.2 消融


05 个人声明

本文为作者对原论文的学习笔记与心得分享,受个人学识与理解所限,文中对论文内容的解读或有不够周全之处,一切以原论文正式表述为准。本文仅用于学术交流与传播,内容均由作者独立整理完成,不代表本公众号立场。如文中所涉文字、图片等内容存在版权争议,请及时与作者联系,作者将在第一时间核实并妥善处理。

相关推荐
微尘hjx7 小时前
【Deep-OC-SORT 06】多轨迹算法Deep-OC-SORT-CMC相机运动补偿
yolo·目标检测·目标跟踪·ultralytics·轨迹算法·deep-oc-sort·车流统计
电科_银尘2 天前
【深度学习项目实战·17】行人目标检测:用Faster R-CNN找出图片中的行人
深度学习·目标检测·r语言
AI日报派送佬5 天前
高效目标检测利器:X-AnyLabeling 加载自定义 YOLO 模型自动标注实操指南
人工智能·yolo·目标检测
qq_25294131686 天前
日本道路病害检测数据集 | 道路病害 裂缝检测 坑洼识别 市政巡检9287期
人工智能·深度学习·yolo·目标检测·计算机视觉·道路检测
qq_25294131686 天前
伊蚊检测数据集 | 伊蚊检测 病媒生物 公共卫生 目标检测9304期
人工智能·yolo·目标检测·计算机视觉·蚊子·尹蚊
计算机毕业编程指导师6 天前
基于深度学习的光伏组件红外图像缺陷识别系统设计与实现
人工智能·python·深度学习·目标检测·毕业设计·课程设计·光伏
A7bert7776 天前
【MobileSAM部署至RK3588】环境适配→转换RKNN→开发板部署
c++·人工智能·深度学习·目标检测·ubuntu
qq_25294131686 天前
无人机视角公路两侧滑坡检测数据集 | 公路巡检 滑坡检测 地质灾害 无人机航拍9302期
yolo·目标检测·目标跟踪·无人机·地质灾害·无人机视角·滑坡检测
向哆哆7 天前
羊行为目标检测数据集:4类别、2,000张图像 | 目标检测
人工智能·yolo·目标检测·目标跟踪
小豆庄7 天前
本地视频打码:多模型检测、帧间追踪与18种模糊的选型
opencv·目标检测·ai·自然语言处理·音视频·视频