DETR类论文笔记

Transformer--NeurIPS2017:首次提出

ViT:首次将Transformer引入到视觉任务中

DETR--ECCV2020:首次用来检测

Efficient DETR--ArXiv2021:使用RPN初始化object query

Conditional DETR--ICCV2022

Anchor-DETR-AAAI2022

DAB-DETR--ICLR2022

DN-DETR--CVPR2022

DINO--ICLR2023

Group-DETR--ICCV2023

H-DETR--CVPR2023,与Group DETR有点类似

《DAC-DETR: Divide the Attention Layers and Conquer》--NIPS2023

文中指出Decoder阶段的self-attention让各个query远离,而cross-attention将query的各个部分聚集,因此提出将self和cross分而治之。

《Detection Transformer with Stable Matching Shilong》--ICCV2023

论文指出DETR类模型的匹配不稳定来源于匈牙利匹配是基于得分和位置的,有的得分相近但位置距离远,有的位置距离近但得分远。基于此,本文提出在在匹配的得分中使用

原来的匹配损失

论文提出的匹配损失

或者

《Cascade-DETR: Delving into High-Quality Universal Object Detection》--Cascade-DETR:ICCV2023

基于Conditional DETR的基础上,在backbone输出的不同层之间使用注意力机制,同时使用预测的边界框作为mask。同时,本文也指出Detr类方法缺少了归纳偏置,而使用数据驱动的方法来学习。但是,由于缺少数据,从而使得学习效果并不好。

RT-DETR--CVPR2024

AlignDETR--BMCV2024

《Relation DETR: Exploring Explicit Position Relation Prior for Object Detection》--ECCV2024

MR-DETR--CVPR2025

相关推荐
传说故事15 小时前
【论文阅读】HY-Embodied-0.5: Embodied Foundation Models for Real-World Agents
论文阅读·人工智能·机器人·具身智能
传说故事15 小时前
【论文阅读】RISE: Self-Improving Robot Policy with Compositional World Model
论文阅读·人工智能·机器人·具身智能·世界模型
传说故事1 天前
【论文阅读】Diffusion Forcing: Next-token Prediction Meets Full-Sequence Diffusion
论文阅读·人工智能·diffusion
大模型任我行2 天前
谷歌:大模型规划最优性超越传统算法
人工智能·语言模型·自然语言处理·论文笔记
数智工坊3 天前
【SIoU Loss论文阅读】:引入角度感知的框回归损失,让检测收敛更快更准
论文阅读·人工智能·深度学习·机器学习·数据挖掘·回归·cnn
传说故事3 天前
【论文阅读】AWR:Simple and scalable off-policy RL
论文阅读·强化学习
传说故事3 天前
【论文阅读】通过homeostasis RL学习合成综合机器人行为
论文阅读·人工智能·机器人·具身智能
数智工坊3 天前
【VarifocalNet(VFNet)论文阅读】:IoU-aware稠密目标检测,把定位质量塞进分类得分
论文阅读·人工智能·深度学习·目标检测·计算机视觉·分类·cnn
STLearner4 天前
AI论文速读 | QuitoBench:支付宝高质量开源时间序列预测基准测试集
大数据·论文阅读·人工智能·深度学习·学习·机器学习·开源
数智工坊4 天前
【Anchor DETR论文阅读】:基于锚点查询设计的Transformer检测器,50epoch收敛且速度精度双升
论文阅读·深度学习·transformer