机器学习-线性判别函数

简单来说这节就是线性分类器,从基于概率密度估计的分类器设计到直接基于样本的直接分类器设计;

首先选定判别函数类和一定的目标,利用样本集确定出函数类中的某些未知参数,使所选的准则最好。

一、直接确定判别函数

设定判别函数形式,用样本集确定参数,使用准则函数,表达分类器应该满足的要求,这些准则的最优并不一定于错误率最小相一致:次优分类器。

广义线性判别函数是形式最简单的判别函数,但是不能用于复杂情况:

二、Fisher Linear Discriminant analysis

理论上可以证明,PCA在数据单个高斯分布是最佳的,有利于与表示数据,在分类问题中,不同类别的分布不能相同

PCA的核心思想是方差最大+相互正交,两个均值之间的距离,和两个标准差。

FDA的出发点是把所有样本投影到一维,使在投影线上最易于分类

三、感知机 Perceptron

最小平方误差MSE准则函数

相关推荐
用户6369790981432 分钟前
RFM客群细分AI:从数据到策略的自动化
人工智能
workflower3 分钟前
人形机器人全身运动控制能力大幅提升
人工智能·深度学习·机器学习·设计模式·机器人·自动化
何时梦醒3 分钟前
一文搞懂 RAG(检索增强生成):从 LLM 幻觉到智能检索,手把手带你理解核心原理与代码实现
人工智能
l134062082354 分钟前
鸿蒙实战:从 rawfile 加载 AI 模型资源
人工智能·华为·harmonyos
0xkg5 分钟前
一句 `grep . .env`,你的密钥就喂给 AI 了——readignore 堵上这个缺口
人工智能
Token炼金师6 分钟前
梯度的呼吸:激活、归一化、反传与残流 —— 深度网络的四道命门
人工智能·深度学习·llm
Svan L7 分钟前
文献综述工具比较:沁言学术与 ChatGPT Plus 的可用性分析
人工智能·chatgpt
今心上9 分钟前
关于安装李沐深度学习d2l包【2026.7可用版】
人工智能·深度学习
forestsea13 分钟前
GLM-4-9B-Chat-1M 模型在 openEuler 系统上的完整部署文档
人工智能·ai·语言模型
voidmort14 分钟前
3. 理解 RoPE
人工智能·深度学习·机器学习·transformer