技术栈
leaky-relu
flying_1314
5 小时前
激活函数
·
relu
·
prelu
·
dice
·
leaky-relu
面试常问系列(一)-激活函数-relu/leaky_relu/prelu/dice
目录一、为什么会出现这些激活函数一、梯度消失问题的根源1. Sigmoid/Tanh 的梯度消失Sigmoid:
我是有底线的