先回顾一下正向传播的公式:
化简一下:
反向传播从下到上逐步求偏导:
对zt求偏导(预测值和标签值相减):
zt对未知数wt,ht,bt分别求偏导:
ht对ot,Ct求偏导:
ot对Net0求偏导:
Net0对w0,b0求偏导:
....
总体的思路就是那个公式从下到上逐步对未知数求偏导:
下面是总体的流程
对应的代码为:
相关推荐
用户6915811416533 分钟前
Ascend Extension for PyTorch的源码解析成富1 小时前
文本转SQL（Text-to-SQL），场景介绍与 Spring AI 实现CSDN云计算2 小时前
如何以开源加速AI企业落地，红帽带来新解法艾派森2 小时前
大数据分析案例-基于随机森林算法的智能手机价格预测模型hairenjing11232 小时前
在 Android 手机上从SD 卡恢复数据的 6 个有效应用程序小蜗子2 小时前
Multi‐modal knowledge graph inference via media convergenceand logic ruleSpikeKing2 小时前
LLM - 使用 LLaMA-Factory 微调大模型 环境配置与训练推理 教程 (1)黄焖鸡能干四碗3 小时前
信息化运维方案，实施方案，开发方案，信息中心安全运维资料（软件资料word）待3 小时前
开源竞争-数据驱动成长-11/05-大专生的思考ctrey_3 小时前
2024-11-4 学习人工智能的Day21 openCV（3）