感知机:单层,多层(二分类,多分类)

单层感知机:输入层→输出层"(输出层 1 个神经元)

1.P为间隔,r代表数据的大小,r数据多则收敛变慢。

2.对 "理想分类参数w,b进行**归一化,**限制参数的 "规模"

无论怎么切都不能分割这两类别

多层感知机:输入层→隐藏层→输出层

回到xor问题,如何解决?

x,y代表样本的两个维度,中间层记录样本分类结果,输出层也为样本分类结果;类似于两个函数相加得到的结果

输入维度,隐层一个节点代表一个函数,输出为类别;

单分类:输出层用 1 个神经元 +激活

参数解释如下:

当西格玛为线性时

常用激活函数

一个指数运算

两个指数运算

不用指数运算(快,省)

多分类:输出层用N个神经元 +激活

所有输入拉到0-1范围,使得y相加得到1(概率)

参数解释如下:

理解:多维数据输入,数据结果为类别则相较输入的维度数量较少,一般来说需要慢慢压缩维度,既使用多隐藏层;类似于右边网络变(大,小,小,不变)。

多层感知机从零实现

李沐深度学习35号视频Q&A

相关推荐
新加坡内哥谈技术18 小时前
Perplexity AI 的 RAG 架构全解析:幕后技术详解
人工智能
武子康18 小时前
AI研究-119 DeepSeek-OCR PyTorch FlashAttn 2.7.3 推理与部署 模型规模与资源详细分析
人工智能·深度学习·机器学习·ai·ocr·deepseek·deepseek-ocr
智驱力人工智能18 小时前
基于视觉分析的人脸联动使用手机检测系统 智能安全管理新突破 人脸与手机行为联动检测 多模态融合人脸与手机行为分析模型
算法·安全·目标检测·计算机视觉·智能手机·视觉检测·边缘计算
Sirius Wu19 小时前
深入浅出:Tongyi DeepResearch技术解读
人工智能·语言模型·langchain·aigc
2301_7644413319 小时前
水星热演化核幔耦合数值模拟
python·算法·数学建模
循环过三天19 小时前
3.4、Python-集合
开发语言·笔记·python·学习·算法
忙碌54419 小时前
AI大模型时代下的全栈技术架构:从深度学习到云原生部署实战
人工智能·深度学习·架构
LZ_Keep_Running19 小时前
智能变电巡检:AI检测新突破
人工智能
InfiSight智睿视界20 小时前
AI 技术助力汽车美容行业实现精细化运营管理
大数据·人工智能
没有钱的钱仔21 小时前
机器学习笔记
人工智能·笔记·机器学习