Deep Learning（wu--46）

文章目录

• Contents
• Begin
• Basic
• • 逻辑回归
  • SGD
  • 导数
  • 计算图（反向传播）
  • 向量化
  • 广播
  • numpy
• [Neural Network](#Neural Network)
• • 向量化
  • 激活函数
  • 梯度下降
  • 深层表示
  • 反向传播

Contents

Begin

Basic

逻辑回归

SGD

导数

计算图（反向传播）

向量化

广播

numpy

Neural Network

1上标表示第几层

(i)上标表示第几个样本

向量化

激活函数

隐层使用的激活函数必须是非线性的（除机器学习中的回归问题），否则毫无意义，因为多层线性操作等价于一层线性操作

梯度下降

深层表示

反向传播