深度学习-预测与向前传播

以手写输入作为例子,为简单,只区分0和1,所以这是一个二分类问题,我们输入一张图片,输出数字0还是1,是一个8*8的一个像素图片,64个像素组成的网格矩阵,其中255表示白色,0表示黑色像素不同的数字表示不同的灰度,给予这两个特征我们使用具有两个隐藏层的神经网络,其中一个具有25个神经元,或者25个单元,第二个隐藏有有15个神经单元,最后输出层输出这是0还是1的概率,

让我们计算是从x到a1,因为有25个神经元,所以参数是用w1到w25,这样我们就得到了a1,

下一步就是计算a2其中a1就是第二层的输入,我们用w2乘以a1然后加上第二层的偏置,用sigmoid函数,第二层有15个神经元,所以对应的参数也有15个,对此我们计算的到了a2

然后我们用相似的计算得到了a3,这是到了输出层, 只有一个神经元,所以a3是一个标量,然后可以对a3进行阈值化,得到二分类标签,

如上图所示,我们从右到左进行计算,依次得到a1,a2,a3所以叫做前向传播,

与另一种方法反向反驳形成对比,后者用于学习,

这种神经架构网络,在初始阶段有很多的隐藏单元,如然后随着越接近输出层,隐藏单元越少,这也是选择神经网络架构的典型选择,

相关推荐
数据智能老司机8 小时前
PyTorch 深度学习——使用神经网络来拟合数据
pytorch·深度学习
数据智能老司机8 小时前
PyTorch 深度学习——用于图像的扩散模型
pytorch·深度学习
数据智能老司机8 小时前
PyTorch 深度学习——Transformer 是如何工作的
pytorch·深度学习
闲云一鹤9 小时前
本地部署 B 站 IndexTTS2 模型 - AI 文本生语音神器
前端·人工智能
前端双越老师10 小时前
Skills 是什么?如何用于 Agent 开发?
人工智能·node.js·agent
yiyu071620 小时前
3分钟搞懂深度学习AI:环境安装与工具使用
人工智能·深度学习
冬奇Lab21 小时前
一天一个开源项目(第44篇):GitNexus - 零服务器的代码智能引擎,为 AI Agent 构建代码库知识图谱
人工智能·开源·资讯
冬奇Lab21 小时前
OpenClaw 深度解析(七):安全模型与沙盒
人工智能·开源
IT_陈寒1 天前
别再死记硬背Python语法了!这5个思维模式让你代码量减半
前端·人工智能·后端
Ray Liang1 天前
彻底治愈AI“失忆”和胡说八道的真正办法
人工智能·rag·智能体·ai助手·mindx