DataWhale机器学习——第六章支持向量机学习笔记

第六章 支持向量机

6.1 间隔与支持向量 支持向量机(SVM)是一种二分类模型,通过最大化分类间隔找到最优分类超平面。支持向量是离决策边界最近的样本点。

6.2 对偶问题 对偶问题通过拉格朗日乘子法,将原始优化问题转换为对偶问题,使得求解高维空间中的最优超平面变得更为简单。

6.3 核函数 核函数用于将低维数据映射到高维空间,使得非线性可分问题在高维空间中变得线性可分。常见核函数有线性核、多项式核和高斯核。

6.4 软间隔与正则化 软间隔SVM通过引入松弛变量,允许一定的分类错误,提高模型的泛化能力。正则化参数用于平衡分类间隔和分类错误。

6.5 支持向量回归 支持向量回归(SVR)用于解决回归问题,通过引入ε不敏感损失函数,控制预测误差范围。

6.6 核方法 核方法广泛应用于各种机器学习算法中,如核PCA、核LDA等,通过核函数将线性方法扩展到非线性情况。

相关推荐
暗夜猎手-大魔王5 分钟前
hermes源码学习3-Agent Loop 内部机制
人工智能·学习
say_fall7 分钟前
可编程中断控制器8259A工作方式超详细解析
android·开发语言·学习·硬件架构·硬件工程
吃好睡好便好22 分钟前
说说食物依赖性运动诱发过敏
学习·生活
Amazing_Cacao2 小时前
深度专栏 | 粉碎感官玄学:精品可可的冷酷重构与物理变量
学习
Sirius Wu2 小时前
Agent Skill能力建设
人工智能·深度学习·机器学习·ai·语言模型·aigc
xian_wwq2 小时前
【学习笔记】「大模型安全:攻击面演化史」第 05 篇-Agent安全
笔记·学习·ai安全
哥布林学者4 小时前
深度学习进阶(二十八)现代 LLM 的核心架构设计其三:Decoder-Only 下的 KV Cache
机器学习·ai
ECT-OS-JiuHuaShan4 小时前
什么是对和错?——“有针对性定义域的逻辑值的真伪”:认识论终极追问的公理化裁决
数据库·人工智能·算法·机器学习·数学建模
坤坤藤椒牛肉面4 小时前
实习日记--基础内容学习
学习
xianrenli385 小时前
【探讨“LLM作为评判者”的伦理】
学习·llm·ai编程