Copy-Past 解决小目标检测问题

《CVRP2019_Augmentation for small object detection》论文里面,使用copy-paste解决小目标

小目标的检测性能

一、定义小目标

上图是MS COCO中定义小目标、中目标、大目标的标准;
二、分析小目标检测性能低的原因

  • 网络下采样导致小目标在特征层中很小:例如输入为640x640,backbone下采样为32,那么特征层的特征为20x20, 若小目标在输入层的大小为32x32,那么,在特征层位1x1的大小,一个像素,比32x32小的目标,在特征层中几乎消失;
  • 小目标出现在少数图片中,例如MS COCO 中,训练集中的目标中41.43%是小目标,34.4%是中目标,24.2%是大目标,但是只有50%的图片中包含小目标,70%和80%图片中包含中目标和大目标;
  • 小目标标注面积占比小,例如1.23%的标注像素属于小目标,10.18%是中目标,82.28%输入大目标;
  • 和小目标匹配的正样本anchors数比较少:在基于anchor的目标检测中,anchor和目标IOU大于0.7时,认为该anchor为正样本,约29.96%的anchor与小目标匹配,约44.49%的anchor与大目标匹配;

三、提高小目标检测性能的措施

  • 使用浅层特征:对应原因中的第一点,深层特征感受野宽,特征丰富,但是分辨率小,小目标在深层特征中几乎消失,因q此可以退而求其次,使用浅层目标;

  • Oversampling:包含小目标的图片进行过采样,采样率是可以调整的参数,论文中说,这是最简单直白的方式提升小目标检测性能的方式;

    上图中的表格,可以说明,oversampling可以在一定程度上,提高小目标的性能。

  • Copy-paset: 将小目标从原始位置上复制出来,然后拷贝到图片的其他地方。这样可以增加图片中的小目标。这个工具需要考虑以下两点:1、粘贴的目标是否遮挡其他目标;2、是否模糊粘贴目标的边界;

    copy-pase可以提升小目标的性能,但是多少有点损害大目标的性能。

相关推荐
星越华夏5 小时前
计算机视觉:YOLOv12安装环境
人工智能·yolo·计算机视觉
Yolanda947 小时前
【人工智能】《从零搭建AI问答助手项目(九):Prompt优化》
人工智能·prompt
wj3055853787 小时前
课程 9:模型测试记录与 Prompt 策略
linux·人工智能·python·comfyui
小和尚同志7 小时前
深入使用 skill-creator:结合真实生产级实践
人工智能·aigc
DevSecOps选型指南7 小时前
安全419专访悬镜安全 | 穿越周期在 AI 浪潮中定义数字供应链安全新范式
人工智能
沪漂阿龙7 小时前
面试题详解:GraphRAG 全面解析——知识图谱增强 RAG、Local Search、Global Search、社区摘要、工程落地与评估指标一次讲透
人工智能·知识图谱
WangN27 小时前
Unitree RL Lab 学习笔记【通识】
人工智能·机器学习
haina20197 小时前
海纳AI亮相《科创中国》,解码招聘“智”变之路
人工智能·ai面试·ai招聘
阿星AI工作室7 小时前
刘润年中大课笔记:一句话说清AI落地之战的本质
大数据·人工智能·创业创新·商业
qingfeng154157 小时前
企业微信机器人开发:如何实现自动化与智能运营?
人工智能·python·机器人·自动化·企业微信