李宏毅2022机器学习/深度学习 个人笔记(2)

本系列用于推导、记录该系列视频中本人不熟悉、或认为有价值的知识点

本篇记录第一讲(选修):神奇宝贝分类(续) 讲解如何用高斯概率分布假设来推导类似于逻辑斯蒂分布的表达式

如图,boundary变为直线,结果也有上升

我们不一定采用高斯几率模型,也开始采用其他模型,这不是死板的。举例:

假设它们之间独立,则协方差矩阵为对角矩阵,使用了Naive Bayes Classifier。

接下来,我们令z为图中所示,可推出该概率为sigmoid函数:

接下来,算一下z到底是什么

继续推导:

继续推导:

可以发现,最终所求量为sigmoid(wx+b)的形式,且wx+b的形式正好说明了边界为直线

相关推荐
逸模37 分钟前
告别熬夜手工整理台账,逸模智能归集实现项目数据自动化存档
大数据·运维·人工智能·笔记·其他·信息可视化·自动化
Frostnova丶1 小时前
【算法笔记】数学知识
笔记·算法
xqqxqxxq1 小时前
哈希表(HashMap)技术学习笔记
笔记·学习·散列表
AOwhisky1 小时前
MySQL 学习笔记(第四期):SQL 语言之多表查询
linux·运维·网络·数据库·笔记·学习·mysql
weifengma-wish2 小时前
Transformer 注意力为什么用内积? 而不用余弦相识度和cor等
人工智能·深度学习·transformer
xian_wwq2 小时前
【学习笔记】「大模型安全:攻击面演化史」第 07 篇-安全左移
人工智能·笔记·学习
AndrewHZ3 小时前
【LLM技术全景】预训练与微调:大模型如何“学习“
人工智能·深度学习·大模型·llm·微调·预训练·rlhf
nnsix4 小时前
Unity 贴图压缩格式 笔记
笔记·unity·贴图