李宏毅2022机器学习/深度学习 个人笔记(2)

本系列用于推导、记录该系列视频中本人不熟悉、或认为有价值的知识点

本篇记录第一讲(选修):神奇宝贝分类(续) 讲解如何用高斯概率分布假设来推导类似于逻辑斯蒂分布的表达式

如图,boundary变为直线,结果也有上升

我们不一定采用高斯几率模型,也开始采用其他模型,这不是死板的。举例:

假设它们之间独立,则协方差矩阵为对角矩阵,使用了Naive Bayes Classifier。

接下来,我们令z为图中所示,可推出该概率为sigmoid函数:

接下来,算一下z到底是什么

继续推导:

继续推导:

可以发现,最终所求量为sigmoid(wx+b)的形式,且wx+b的形式正好说明了边界为直线

相关推荐
WHS-_-202225 分钟前
Neural Representation for Wireless Radiation Field Reconstruction (II)
深度学习·transformer
Dr.F.Arthur42 分钟前
我的算法笔记——哈希表篇
数据结构·笔记·散列表
ZhiqianXia1 小时前
Pytorch 学习笔记(4) : torch.backends
pytorch·笔记·学习
锅挤1 小时前
来一篇儿:《Boosting Adversarial Attacks with Momentum》
论文阅读·机器学习
哥布林学者1 小时前
深度学习进阶(三)Transformer Block
机器学习·ai
m0_564876841 小时前
提示词工程手册学习
人工智能·python·深度学习·学习
FakeOccupational2 小时前
【电路笔记 通信】8B_10B编码 高速数据传输的串行数据编码技术 论文流程对应实现(简化版本,仅编码数值)
笔记
忙什么果2 小时前
Mamba学习笔记2:Mamba模型
android·笔记·学习
悠哉悠哉愿意2 小时前
【物联网学习笔记】ADC
笔记·单片机·嵌入式硬件·物联网·学习
CheerWWW3 小时前
C++学习笔记——this关键字、对象生命周期(栈作用域)、智能指针、复制与拷贝构造函数
c++·笔记·学习