第五章：计算机视觉在工业制造领域中的应用
第一部分：工业缺陷分割
第一节：工业品缺陷风格基础知识：割任务定义、数据集介绍
一、任务定义：工业缺陷分割的核心目标
工业缺陷分割（Industrial Defect Segmentation）是计算机视觉在制造业中最常见、最关键的应用之一。其核心目标是在产品表面图像中自动检测并精准分割出缺陷区域，为质量检验、自动分级和异常检测提供依据。
1.1 定义
工业缺陷分割任务旨在：
给定一张工业品图像 ( I )，输出一个与之同尺寸的掩码图像 ( M )，其中每个像素值表示该像素是否属于缺陷区域。
-
输入：工业品图像（如金属表面、纺织品、芯片、PCB、电池等）
-
输出：缺陷掩码（Mask，0为正常区域，1为缺陷区域）
1.2 应用场景
-
金属表面检测：识别划痕、凹坑、氧化点。
-
PCB电路检测：检测断线、短路、焊点异常。
-
纺织品检测：检测色差、破洞、线头。
-
锂电池检测：识别鼓包、裂纹、涂层不均。
-
晶圆/芯片检测：检测污染、缺口、刻蚀异常。
1.3 特点与挑战
| 特点 | 描述 |
|---|---|
| 缺陷稀少 | 缺陷占比通常极低（<1%像素），导致样本不平衡。 |
| 缺陷多样 | 不同产品、材质导致缺陷形态复杂。 |
| 缺陷微小 | 很多缺陷尺度极小，容易被背景噪声淹没。 |
| 数据标注昂贵 | 精确像素级标注需要人工逐点描绘，成本高昂。 |
| 光照/角度敏感 | 工业相机拍摄条件变化会显著影响检测效果。 |
二、工业缺陷分割与语义分割的区别
| 项目 | 工业缺陷分割 | 通用语义分割 |
|---|---|---|
| 类别数量 | 通常仅2类（缺陷/正常） | 多类（如人、车、道路等） |
| 数据规模 | 数据量小、标注贵 | 数据量大、公开数据多 |
| 精度要求 | 极高（误检/漏检代价大） | 相对可容忍 |
| 目标尺寸 | 缺陷多为小目标 | 对象通常较大 |
| 模型优化重点 | 类不平衡、异常检测 | 多类分割精度 |
三、工业缺陷分割的典型数据集介绍
以下是工业领域常用的公开数据集，适用于模型训练、迁移学习与算法验证：
| 数据集名称 | 简介 | 缺陷类型 | 图像数量 | 标注类型 |
|---|---|---|---|---|
| MVTec AD | 最常用的工业异常检测/分割数据集 | 15类工业品（瓶子、金属片、纺织品、PCB等） | 5000+ | 像素级缺陷掩码 |
| NEU Surface Defect Database | 钢板表面缺陷数据集 | 6类缺陷（划痕、压痕、氧化点等） | 1800 | 图像级标签（部分分割） |
| DAGM Dataset | 德国自动化制造协会提供 | 10类工业缺陷 | 1500+ | 分割掩码 |
| Severstal Steel Defect | Kaggle竞赛数据 | 钢卷表面4类缺陷 | 12,000+ | 多边形分割标注 |
| TILDA Dataset | 电子元件缺陷 | 焊点、裂纹等 | 5,000+ | 掩码标注 |
| DeepPCB | PCB电路异常检测 | 断线、短路、污点等 | 1,500+ | 框级标注 |
四、缺陷数据的特点与预处理
4.1 数据分布特征
-
正常样本占比极高，负样本远多于正样本。
-
缺陷尺寸差异极大，从几个像素到上百像素不等。
-
同一类缺陷在不同批次中形态可能差异显著。
4.2 数据预处理策略
| 步骤 | 目的 | 方法 |
|---|---|---|
| 尺寸归一化 | 统一输入大小 | Resize、CenterCrop |
| 光照均衡 | 减少光照干扰 | CLAHE、Gamma校正 |
| 数据增强 | 提高鲁棒性 | 随机旋转、翻转、模糊 |
| 类平衡采样 | 减少过拟合 | 对缺陷样本过采样 |
| Mask对齐 | 确保标签一致 | 图像与掩码同步变换 |
五、评估指标
工业缺陷分割常用的模型评估指标包括：
| 指标 | 含义 | 说明 |
|---|---|---|
| IoU（Intersection over Union） | 分割重叠比例 | 评价预测区域与真实缺陷区域的重叠度 |
| Dice系数（F1 Score） | 分割平衡度 | 强调小目标检测的精度 |
| Precision / Recall | 准确率 / 召回率 | 衡量误检和漏检的比例 |
| mIoU / mDice | 多类别平均值 | 对多种缺陷类型进行综合评估 |
六、典型模型架构预览
工业缺陷分割常用模型以语义分割结构为主，但针对小目标和类不平衡问题进行了改进。
| 模型类型 | 特点 | 示例 |
|---|---|---|
| U-Net系列 | 编码-解码结构，适合小样本 | U-Net, U-Net++, Attention U-Net |
| Transformer-based | 大场景特征建模 | SegFormer, Swin-Unet |
| 轻量级模型 | 适合部署到边缘设备 | Fast-SCNN, Mobile-UNet |
| 异常检测模型 | 无需缺陷样本 | PaDiM, SPADE, DRAEM |
七、小结
工业缺陷分割是计算机视觉在制造业落地的关键环节，它不仅需要算法的精度，更考验模型对数据不平衡、缺陷稀疏、场景复杂性的应对能力。
本节主要内容包括：
-
工业缺陷分割任务定义与挑战；
-
常见数据集及其特点；
-
预处理与评估指标；
-
模型结构的基本分类。
在下一节中，我们将进入**"工业缺陷分割算法详解"**，从传统方法到深度学习算法（如U-Net、SegFormer、DRAEM）逐步剖析其工作原理与实现细节。