论文阅读《Generalizing Face Forgery Detection with High-frequency Features》

高频噪声分析会过滤掉图像的颜色内容信息。

本文设计了三个模块来充分利用高频特征,

1.多尺度高频特征提取模块

2.双跨模态注意模块

3.残差引导空间注意模块(也在一定程度上体现了两个模态的交互)

SRM是用于过滤图像的高频噪声

输入的图像X,共两个分支,一部分是用于输入到SRM获得高频特征Xh,一部分是RGB流,RGB的分支同样也会输入到SRM进行提取高频特征,其结果与已经输入SRM中的结果进行相加得到最后的输出结果,和,该过程经过不断地重复得到最后的特征F,和

第二个模块是DCMA,是跨模态的特征融合的部分,对于特征F来说,会先进行映射为Key 和value ,key用于计算两个模态的相似性,相似性结果再乘以权重矩阵得到系数C,再与Vh相乘得到特征T,对于T'的计算也是同样的道理,完成特征融合。

第三部分,将两个特征再通道维度上进行拼接,输入到全连接神经网络中,得到最后的分类结果。

相关推荐
c0d1ng1 小时前
一月第四周周报(论文阅读)
论文阅读
m0_650108243 小时前
FeatureSLAM:实时特征增强的 3D 高斯溅射 SLAM 技术
论文阅读·智能机器人·语义理解·featureslam·高斯实时建图·多尺度特征嵌入
何如千泷1 天前
【论文阅读】Invasive carcinoma segmentation in whole slide images usingMS-ResMTUNet
论文阅读·wsi·病理图像分割
狐571 天前
2026-01-20-论文阅读-Can-1B-LLM-Surpass-405B-LLM?
论文阅读·笔记
静听松涛1331 天前
信息系统规划到上线全流程指南
论文阅读·面试·职场和发展·流程图
EEPI1 天前
【论文阅读】AbsoluteZero: ReinforcedSelf-play Reasoningwith Zero Data
论文阅读
狐571 天前
2026-01-19-论文阅读-Agentic-Reasoning-for-Large-Language-Models
论文阅读·笔记
EEPI1 天前
论文阅读汇总
论文阅读
敲代码的猴先生1 天前
论文分享 | 基于红绿列表的大语言模型水印技术
论文阅读·人工智能·深度学习·语言模型
狐572 天前
2026-01-13-论文阅读-AdvancesUavAvionics
论文阅读·无人机·综述论文