神经网络基础

1.反向传播(这边推荐买鱼书)补充:反向传播就是求偏导

(1)加法门单元:均等分配

z=x+y

z对x求偏导:得到1

z对y求偏导:得到1

也就是均等分配

(2)MAX门单元:给最大的

(3)乘法门单元:互换

z=xy
z对x求偏导:得到y
z对y求偏导:得到x

绿色是前向传播:
输入x=3 , y=-4 ,通过乘法门单元,得到x
y=-12。

输入x=2 , y=0 ,通过max门单元,得到结果2。

-12+2=-10 ,-10*2=-20.

红色是反向传播:

输入1,12=2 ,如何加法门单元求偏导,所以上下都是2
然后2
3=6 ,乘法门单元进行互换。

然后2*(-4)=-8门单元。

2通过max门单元,给原本绿色值比较大的z, 所以z=2;所以w=0.

2.


相关推荐
掘金安东尼3 分钟前
Cursor:长执行模式,验证大模型“7*24h自动编程”的可能性
人工智能
_Li.3 分钟前
Simulink-螺旋桨动力模块
人工智能·算法·机器学习
GAOJ_K6 分钟前
同步带模组稳定运行的关键
人工智能·科技·自动化·制造
够快云库9 分钟前
制造业非结构化数据治理:架构解析与实战复盘
大数据·人工智能·架构·企业文件安全
AI周红伟9 分钟前
周红伟:OpenAI 首席运营官,尚未真正看到人工智能渗透到企业业务流程中
人工智能·算法·性能优化
LaughingZhu9 分钟前
Product Hunt 每日热榜 | 2026-02-25
数据库·人工智能·经验分享·神经网络·chatgpt
Cherry的跨界思维10 分钟前
【AI测试全栈:质量】47、Vue+Prometheus+Grafana实战:打造全方位AI监控面板开发指南
vue.js·人工智能·ci/cd·grafana·prometheus·ai测试·ai全栈
咚咚王者10 分钟前
人工智能之视觉领域 计算机视觉 第十六章 图像拼接
人工智能·计算机视觉
雨大王51212 分钟前
整车制造计划排程排产系统的创新与实践
人工智能·汽车·制造
是烨笙啊21 分钟前
AI 编程:核心概念与术语解析
人工智能·学习·ai编程