李宏毅2022机器学习/深度学习 个人笔记(2)

本系列用于推导、记录该系列视频中本人不熟悉、或认为有价值的知识点

本篇记录第一讲(选修):神奇宝贝分类(续) 讲解如何用高斯概率分布假设来推导类似于逻辑斯蒂分布的表达式

如图,boundary变为直线,结果也有上升

我们不一定采用高斯几率模型,也开始采用其他模型,这不是死板的。举例:

假设它们之间独立,则协方差矩阵为对角矩阵,使用了Naive Bayes Classifier。

接下来,我们令z为图中所示,可推出该概率为sigmoid函数:

接下来,算一下z到底是什么

继续推导:

继续推导:

可以发现,最终所求量为sigmoid(wx+b)的形式,且wx+b的形式正好说明了边界为直线

相关推荐
点心的游戏开发世界3 分钟前
GDScript 入门笔记(十三):字符串操作
开发语言·笔记·游戏引擎·godot
中科院提名者11 分钟前
深度学习语音增强架构演进的具体原因,从DNN开始
深度学习·架构·dnn
点心的游戏开发世界19 分钟前
GDScript 入门笔记(十二):类型系统进阶
笔记·游戏引擎·godot
LuminousCPP1 小时前
数据结构-排序(一):基础排序算法横向对比|冒泡、插入、希尔、堆与双向选择,详解二分 / Knuth 增量
c语言·数据结构·笔记·算法·排序算法
程序员于老七2 小时前
漫话大模型:训练效率翻倍的秘密——Muon 优化器凭什么干翻 AdamW
深度学习·大模型·ai编程·优化器·muon
柳鲲鹏2 小时前
股票打新,中签为什么难?
笔记
亮工硬件2 小时前
1-8 简易串口通讯协议(UART + 自定义帧协议)
笔记·stm32·单片机·嵌入式硬件·学习
咖啡星人k2 小时前
2026 多智能体协作实战:把角色契约写进SPEC,MonkeyCode 云端跑通
人工智能·机器学习
格林威2 小时前
C# 图像异步落盘存储:基于Channel 配合 ArrayPool 实现异步落盘
开发语言·人工智能·数码相机·机器学习·计算机视觉·c#·视觉检测