数据增强——tensorflow

声明:


本节我们在猫狗训练的基础上去做一些数据增强的操作

1.什么是数据增强

数据增强(Data Augmentation)是指在不改变数据标签的前提下,对原始数据进行各种变换,生成更多样化的训练样本的技术。

简单说:把一张图片"变着花样"复制出多张------旋转一下、翻转一下、调亮一点......这些都叫数据增强。

2.为什么要做数据增强

目的 说明
扩充数据集 当数据量不足时,用增强生成更多样本
防止过拟合 模型没见过的情况越多,泛化能力越强
提升鲁棒性 让模型对旋转、光照变化等不敏感
模拟真实场景 训练数据永远无法覆盖所有真实情况,增强可以弥补

3.常用的调用数据增强的方法

方法一:使用 tf.keras.layers

复制代码
model = tf.keras.Sequential([
  data_augmentation,
  网络结构
])

data_augmentation = tf.keras.Sequential([
    选择你要的方式
])

通过定义data_augment层选择你想要的增强模式,然后嵌入到网络结构的第一层中,训练时自动应用,测试时自动关闭

方法二:使用 tf.data.Dataset.map()

复制代码
# 定义增强函数
def augment(image, label):
    image = tf.image.random_flip_left_right(image)  # 随机翻转
    image = tf.image.random_brightness(image, 0.2)  # 随机亮度
    return image, label

# 应用到数据集
train_ds = train_ds.map(augment, num_parallel_calls=tf.data.AUTOTUNE)

采用函数的方式定义一个图像处理函数,然后用map操作去image和label对应完成,要是有别的图像处理就方便一点,例如顺道调用vgg16官方数据处理方式(reshape之类的)

两种方法的对比

特性 Layers 方式 map 方式
与模型集成 ✅ 自动,训练/测试自动切换 需手动控制
GPU 加速 ✅ 在 GPU 上执行 ⚠️ 需配置
灵活性 中等 ✅ 极高
代码简洁 ✅ 简洁 中等

4.常用的数据增强方法(以下皆用的layers方式)

原图

4.1 tf.keras.layers.RandomFlip(随机反转)

分为上下和左右反转

复制代码
data_augmentation = tf.keras.Sequential([
  tf.keras.layers.experimental.preprocessing.RandomFlip("horizontal_and_vertical"),
    #horizontal水平;vertical垂直
])

4.2 tf.keras.layers.RandomBrightness(随机亮度)

复制代码
tf.keras.layers.RandomBrightness(
    #-1到1,0-255
    factor, value_range=(0, 255), seed=None, **kwargs
)

注意!如果图像经历过大小变化,也要将默认的value_range=(0, 255)改为value_range=(0, 1)

4.3 tf.keras.layers.RandomContrast(随机对比度)

复制代码
tf.keras.layers.RandomContrast(
    factor, seed=None, **kwargs
)

4.4 tf.keras.layers.RandomCrop(随机裁剪)

复制代码
tf.keras.layers.RandomCrop(
    height, width, seed=None, data_format=None, name=None, **kwargs
)

4.5 tf.keras.layers.RandomHeight(高度(非裁切))

复制代码
tf.keras.layers.RandomHeight(
    factor, interpolation='bilinear', seed=None, **kwargs
)

4.6 tf.keras.layers.RandomWidth(随机宽度)

复制代码
tf.keras.layers.RandomWidth(
    factor, interpolation='bilinear', seed=None, **kwargs
)

4.7 tf.keras.layers.RandomRotation(随机角度旋转)

复制代码
tf.keras.layers.RandomRotation(
    factor,#旋转圈数
    fill_mode='reflect',#边缘填充模式
    interpolation='bilinear',#旋转时像素重采样的插值方式
    seed=None,
    fill_value=0.0,#选了别的填充模式后的填充值
    value_range=(0, 255),#像素范围
    data_format=None,#输入张量的通道维度位置
    **kwargs
)
模式 说明 效果
'reflect'(默认) 镜像反射边缘像素 最平滑,无突变
'constant' 用固定值填充 会看到纯色边框
'wrap' 环绕填充(像素从对面补过来) 周期性效果
'nearest' 用最近边缘像素填充 拉伸边缘

4.8 tf.keras.layers.RandomTranslation(随机平移)

复制代码
tf.keras.layers.RandomTranslation(
    height_factor,
    width_factor,
    fill_mode='reflect',
    interpolation='bilinear',
    seed=None,
    fill_value=0.0,
    data_format=None,
    **kwargs
)
参数 默认值 说明
fill_mode 'reflect' 空白填充方式
interpolation 'bilinear' 插值方式
seed None 随机种子
fill_value 0.0 fill_mode='constant' 时的填充值
value_range (0, 255) 输入像素范围
data_format 'channels_last' 数据格式

4.9 tf.keras.layers.RandomZoom(随机焦段)

和裁切不同的就是他会注意主题(焦点中心)

复制代码
tf.keras.layers.RandomZoom(
    height_factor,
    width_factor=None,
    fill_mode='reflect',
    interpolation='bilinear',
    seed=None,
    fill_value=0.0,
    data_format=None,
    **kwargs
)

训练结果

相关推荐
2401_865261635 分钟前
亦唐科技(YIKTANG):创新引领国产贴片机发展,稳居行业领军地位
大数据·人工智能·物联网
阿部多瑞 ABU6 分钟前
私域道德的“立法”与公共秩序的失序——法律-道德异化悖论研究
大数据·人工智能
研华科技Advantech8 分钟前
【案例分享】从单点突破到全场景复制:研华赋能药机装备迈向高效合规新范式
大数据·人工智能·边缘计算·工业设备升级
土星云SaturnCloud10 分钟前
大坝结构安全智能诊断:土星云边缘计算全周期管控实践
服务器·人工智能·安全·ai·边缘计算
众人皆醒我独醉10 分钟前
Embedding:把词变成向量——AI 理解语义的唯一方式
人工智能·面试·llm
王六米。15 分钟前
武汉自动意志科技有限公司:人工智能应用软件开发:需求总在变化,企业交付方案应该如何取舍
大数据·人工智能·科技·视频矩阵获客·企业ai应用·ai内容自动化·武汉自动意志科技
beiju16 分钟前
从模型到可执行 Agent:MCP、Skills 与 Computer Use 架构拆解
人工智能
码字的特恩18 分钟前
微软确认暂不为 Windows 11 加入透明效果自定义功能,建议用户使用第三方工具
人工智能·windows·算法·microsoft·计算机·大模型·编程
我要两颗404西柚23 分钟前
2【python】:常用关键字,函数,方法
python
qingyunliushuiyu23 分钟前
制造行业智能问数工具怎么选?2026年选型核心要点梳理
大数据·人工智能·经验分享·制造