【第五章:计算机视觉-项目实战之图像分割实战】1.图像分割理论-(2)图像分割衍生:语义分割、实例分割、弱监督语义分割

第五章:计算机视觉(Computer Vision)- 项目实战之目标检测实战

第一部分:图像分割理论

第二节:图像分割衍生:语义分割、实例分割、弱监督语义分割

在计算机视觉中,图像分割(Image Segmentation) 不仅仅停留在"像素级划分"的基础层面,而是逐渐发展出不同的分支方向,以适应不同的任务需求。常见的衍生形式包括 语义分割、实例分割、弱监督语义分割 等。


1. 语义分割(Semantic Segmentation)

  • 定义:将图像中每个像素点分类到一个语义类别,例如"人、车、树、道路"。

  • 特点

    • 关注的是类别而非具体实例。

    • 同类物体的像素会共享同一个标签。

  • 应用场景:自动驾驶中的道路场景解析、医学影像分割(如肿瘤区域识别)。

  • 代表方法

    • FCN (Fully Convolutional Network):首次将卷积网络用于像素级预测。

    • U-Net:在医学图像中应用广泛,采用"编码器-解码器"对称结构。

    • DeepLab 系列:引入空洞卷积(Atrous Convolution)提升感受野。


2. 实例分割(Instance Segmentation)

  • 定义:不仅要识别像素属于哪个类别,还要区分同一类别的不同实例。

  • 特点

    • 每一个目标实例拥有独立的像素掩码。

    • 属于"检测+分割"的综合任务。

  • 应用场景:自动驾驶中区分每一辆车,安防监控中检测人群中的个体。

  • 代表方法

    • Mask R-CNN:在 Faster R-CNN 基础上增加了一个分支,用于预测实例掩码。

    • YOLACT:轻量化的实时实例分割模型。


3. 弱监督语义分割(Weakly Supervised Semantic Segmentation, WSSS)

  • 定义:利用不完整或弱标注数据(如图像级标签、点标注、边界框标注)来训练分割模型。

  • 动机:像素级标注非常昂贵,弱监督分割大幅降低标注成本。

  • 标注形式

    • 图像级类别标签(仅知道图像中有哪些类别,不知道具体位置)。

    • 边界框标注(仅框出大致位置,不标注每个像素)。

    • 点标注(仅在目标区域打点)。

  • 应用场景:大规模医学影像分割、遥感影像分割。

  • 代表方法

    • CAM (Class Activation Map):利用分类网络的激活区域作为伪标签。

    • AffinityNet、SEAM:通过像素间关系传播标签信息。


4. 三者对比总结

分割类型 标注粒度 是否区分实例 标注成本 应用难度 代表模型
语义分割 像素级 FCN, U-Net, DeepLab
实例分割 像素级 + 实例 Mask R-CNN, YOLACT
弱监督语义分割 图像级/点/框 较高 CAM, SEAM

总结

  • 语义分割 → 关注类别。

  • 实例分割 → 关注类别 + 个体。

  • 弱监督分割 → 降低标注成本,用弱标签训练出语义分割能力。

相关推荐
hhzz1 分钟前
(深度学习/计算机视觉)手把手教你从零部署YOLOv8目标检测算法-----环境安装(1/4)
深度学习·yolo·计算机视觉
E等于MC平方3 分钟前
AI 辅助物理课堂实验
人工智能·ai·大模型·模拟·物理·实验
名不经传的养虾人7 分钟前
从0到1:企业级AI项目迭代日记 Vol.17|让 AI 做代码重构,要盯着它的策略,不只是看结果
人工智能·agent·ai编程·ai创业·企业ai
缝艺智研社7 分钟前
誉财 YC - 10 + 双头全自动烫标机:服装商标烫印的高效智能之选
人工智能·自动化·新人首发·缝纫机·智能缝纫机
johnny2338 分钟前
AI Agent社区:Moltbook、虾聊、InStreet、OpenAgents、WorldX
人工智能
knight_9___8 分钟前
LLM工具调用面试篇6
人工智能·python·面试·职场和发展·llm·agent
YBAdvanceFu19 分钟前
开源版Suno来了!用扩散模型生成带歌词的完整歌曲,DiffRhythm2实战详解
人工智能·深度学习·机器学习·多智能体·智能体·suno·diffrhythm2
龙孚信息21 分钟前
Xometry百万流量案例分析:企业内容分发基础设施构建策略
人工智能
AI砖家21 分钟前
Claude Code Superpowers 安装使用指南:让 AI 编程从“业余”走向“工程化”
前端·人工智能·python·ai编程·代码规范
YBAdvanceFu23 分钟前
拆解 MusicGen:Meta 开源音乐大模型,到底是怎么跑起来的?
人工智能·深度学习·机器学习·数据挖掘·transformer·agent·智能体