霹雳吧啦Wz_深度学习-图像分类篇章_1.1 卷积神经网络基础_笔记

深度学习-图像分类篇章

参考笔记

卷积神经网络

  1. 英文:Convolutional Neural Network,CNN
  2. 雏形:1998年LeCun的LeNet5,第一个卷积神经网络
  3. 包含:
    • 卷积层:Convolutions
    • 下采样层:Subsampling
    • 全连阶层:Full connection

全连阶层

  1. 神经元
  2. BP神经网络:神经元按列排列,列与列全脸机
    • 误差值:从左到右网络输出一个值,与期望输出对比得到
    • 每个节点的偏导数->每个节点的误差梯度
    • 损失值应用误差梯度->误差的反向传播

卷积层

  1. 卷积网络特有的网络结构
  2. 卷积:
  • 目的:提取特征
  • 过程:一个滑动窗口在特征图上滑动
  • 特性:
    • 局部感知
    • 权值共享:渐少参数量
  1. 特点:
  • 卷积核的channel = 输入特征图的channel
  • 输出特征channel = 卷积核个数
  1. 偏置:
  • 卷积得到的向量+偏置值
  1. 激活函数
  • 加入非线性变换
  • 分类:
    • sigmoid:求导麻烦
    • ReLu:使用较多,但要求学习率不能太大,否则神经元失活多

池化层

  1. 稀疏处理,渐少运算量
  2. 分类:
    • maxpooling下采样
    • averagepooling下采样
  3. 特点:
    • 没有训练参数
    • 改变w、h,不改变channel
    • 池化核大小 = 步长 -> 等比例缩小
相关推荐
FL162386312910 分钟前
红花识别分割数据集labelme格式144张1类别
人工智能·深度学习
The moon forgets26 分钟前
ALOcc: Adaptive Lifting-based 3D Semantic Occupancy and
深度学习·3d
martian6651 小时前
深度学习核心:神经网络-激活函数 - 原理、实现及在医学影像领域的应用
人工智能·深度学习·神经网络·机器学习·医学影像·影像大模型
SugarPPig2 小时前
(二)LoRA微调BERT:为何在单分类任务中表现优异,而在多分类任务中效果不佳?
人工智能·分类·bert
Fine姐3 小时前
数据挖掘2.1&2.2 分类和线性判别器&确定线性可分性
人工智能·分类·数据挖掘
无风听海4 小时前
理解梯度在神经网络中的应用
人工智能·深度学习·神经网络·梯度
仪器科学与传感技术博士4 小时前
python:前馈人工神经网络算法之实战篇,以示例带学,弄明白神经网络算法应用的思路、方法与注意事项等
人工智能·python·深度学习·神经网络·算法·机器学习
不会学习的小白O^O14 小时前
神经网络----卷积层(Conv2D)
人工智能·深度学习·神经网络
Se_ren_di_pity15 小时前
CS231n2017-Lecture9经典CNN架构笔记
人工智能·笔记·cnn
cosX+sinY15 小时前
10 卷积神经网络
python·深度学习·cnn