周报9.27

小组周报

小组成员: 陈思潼

汇报周期: 2026年9月23日---2026年9月27日

一、本周计划

  1. 文献调研

    • 阅读一篇红外与可见光融合相关论文
  2. 算法实现与实验验证

    • 把本周读的这篇论文做差异与相似的细节迁移进现有模型看效果
    • 用纯云图做云监督
  3. 结果整理与问题分析

    • 汇总整理实验结果

二、本周进展

2.1 文献阅读进展

本周共阅读相关论文 1 篇,重点关注以下方向:

序号 论文名称 会议/期刊 主要内容 可借鉴点
1 M-SpecGene: Generalized Foundation Model for RGBT Multispectral Vision ICCV 2025 首次构建多光谱基础模型 M‑SpecGene,探索全新 RGBT 融合范式,摆脱对手工定制模块的依赖。针对 RGBT 数据集固有特性,提出 GMM‑CMSS 渐进掩码策略,缓解信息不均衡带来的负面影响。

2.2 实验与代码进展

本周主要完成了以下实验或代码工作:

  • 把差异与相似的细节迁移进现有模型
  • 用纯云图做云监督

当前实验结果如下:

序号 方法/模型 期刊 mAP50 mAP50-95
1 CDCFusion 0.908±0.005 0.700±0.002
2 seg 0.906±0.007 0.699±0.017
3 tf 0.917±0.005 0.708±0.007
4 KDFuse IF 2025 0.923±0.002 0.706±0.006
5 MambaVision CVPR 2025 0.923±0.006 0.704±0.005
6 Mask-DiFuser TPAMI 2026 0.911±0.004 0.708±0.003
7 PSTLFusion PR 2022 0.915±0.007 0.699±0.003
8 U2Fusion TPAMI 2020 0.918±0.007 0.710±0.003
9 CMADet TIV 2024 0.906±0.004 0.685±0.002
10 RPFNet ACM MM 2025 0.865±0.008 0.659±0.008
11 WaveMamba ICCV 2025 0.913±0.010 0.706±0.004
12 0.927 0.708

最优框架图如下:

第一版改动:

对乘完权重的opt和sar做相似差异模块,然后再乘可信度权重,后拼接卷积输出,并参照骨架更改

0.898±0.003

可能因为骨架网络有参考论文进行改动,权重作用两次且未保留原softmax

第二版改动:

恢复原始骨架,先对原始特征做完相似差异模块再乘可信度权重,再做softmaxfusion

0.915

比之前做空域频域余弦还有差后各种拼接卷积的相似差异模块提升了0.002

第三版改动:

对可信度权重的生成加入云监督,权重初步设为0.1,先只在第三层级做。

在原有检测Loss基础上加了云监督loss,云图先转成连续云层强度,转成 Optical reliability 的监督目标,对 OASDFusion 的 reliability 做 BCE

初版报错未考虑none无云的匹配,第二版正在跑,暂无完整结果,目前第47轮为0.915


三、下周计划

下周计划围绕以下几个方面继续推进:

  1. 根据云监督效果进行该方向改动
  2. 继续改动融合模块,重点关注融合策略
  3. 尝试另外几种做频域的方法(小波变换)
  4. 把softmax改掉成别的权重生成
  5. 找云监督最新论文
  6. 另一个数据集
相关推荐
BYSJMG7 天前
计算机毕业设计选题推荐:【基于深度学习的车辆损坏严重程度评估方法研究】ResNet50 图像分类
人工智能·深度学习·目标检测·机器学习·计算机视觉·分类·课程设计
BYSJMG8 天前
计算机毕业设计选题推荐|【基于深度学习的电梯电动车违规进入检测研究】YOLO26m+可视化大屏
人工智能·深度学习·神经网络·目标检测·机器学习·计算机视觉·课程设计
数据集_深度学习9 天前
果园红绿苹果目标检测数据集介绍和论文参考
人工智能·目标检测
微尘hjx11 天前
【Deep-OC-SORT 06】多轨迹算法Deep-OC-SORT-CMC相机运动补偿
yolo·目标检测·目标跟踪·ultralytics·轨迹算法·deep-oc-sort·车流统计
电科_银尘13 天前
【深度学习项目实战·17】行人目标检测:用Faster R-CNN找出图片中的行人
深度学习·目标检测·r语言
AI日报派送佬15 天前
高效目标检测利器:X-AnyLabeling 加载自定义 YOLO 模型自动标注实操指南
人工智能·yolo·目标检测
qq_252941316816 天前
日本道路病害检测数据集 | 道路病害 裂缝检测 坑洼识别 市政巡检9287期
人工智能·深度学习·yolo·目标检测·计算机视觉·道路检测
qq_252941316816 天前
伊蚊检测数据集 | 伊蚊检测 病媒生物 公共卫生 目标检测9304期
人工智能·yolo·目标检测·计算机视觉·蚊子·尹蚊
计算机毕业编程指导师16 天前
基于深度学习的光伏组件红外图像缺陷识别系统设计与实现
人工智能·python·深度学习·目标检测·毕业设计·课程设计·光伏
A7bert77717 天前
【MobileSAM部署至RK3588】环境适配→转换RKNN→开发板部署
c++·人工智能·深度学习·目标检测·ubuntu