风中摇曳的小萝卜(机器学习)笔记 支持向量机

支持向量机就是找到一条直线,让两边的点与它的距离是最大的

只想两边的点为y=1和y=-1

然后就可以列出到直线的距离了

看分子的正负就可以区分点在直线的哪一边了

上面的表示为函数间隔 下面表示为函数范数

然后我们找到间隔最小的那些点,让最终直线距离他们最大

距离直线最近的点范数分之一就是我们需要优化的目标

优化计算过程中只和最近的点相关,这些样本也被称为支持向量

上面的推导过程看一下就好了,本博猪是一点都不理解,希望能早日和up一样牛

根据拉格拉日乘子法可以得到优化的对偶问题

通过升维的方法可以讲点区分为两个不同的区间,这个叫做非线性支持向量机

函数k就是变换之后两个样本点积的结果,称为核函数

小结:

相关推荐
纪伊路上盛名在17 分钟前
(鱼书)深度学习入门3:手搓神经网络
人工智能·深度学习·神经网络·机器学习
KaneLogger39 分钟前
赛博保姆出列!Gemini CLI & Claude Code + Kimi 手把手教程
人工智能·程序员
杨浦老苏1 小时前
开源一体化协作平台Colanode
笔记·docker·即时通讯·群晖·协助
且行好事莫问前程1 小时前
AFFiNE开源知识管理和协作平台的部署,替代Notion不是梦~
笔记·开源·notion·affine
一碗白开水一1 小时前
自动驾驶激光3D点云处理系统性阐述及Open3D库函数应用
人工智能·3d·自动驾驶
机器之心2 小时前
两周反转:Anthropic「闪电」夺回被Cursor挖走的核心编程大将
人工智能
阿里云大数据AI技术2 小时前
Post-Training on PAI (4):模型微调SFT、DPO、GRPO
人工智能·算法·云计算
_一条咸鱼_2 小时前
LangChain解析器性能优化方法深入分析(22)
人工智能·面试·langchain
_一条咸鱼_2 小时前
LangChain处理解析错误的容错策略源码级分析(21)
人工智能·面试·langchain
PineappleCoder2 小时前
LLMs:AI时代的“大脑”如何重塑未来?
人工智能