1.机器学习与深度学习

一、引言

二、机器学习经典算法

1.KNN:K最近邻居(K-Nearest Neighbors,简称KNN)

监督学习算法,用于分类和回归问题。

基本思想:通过测量不同数据点之间的距离来进行预测

步骤:1.距离度量: KNN使用距离度量(通常是欧氏距离)来衡量数据点之间的相似性。 2.确定邻居数量K 3.投票机制

2.决策树

三种算法(ID3,C4.5,cart)

简单示例

决策树不擅长处理未见过的特征

3.朴素贝叶斯(执果索因)

三、深度学习

设计一个很深的网络架构让机器自己学(深度学习相当于函数f)

神经网络的输入形式:

(1).向量 eg:(身高,体重,财富)T

(2).矩阵/张量 eg:图片的RGB三通道矩阵

(3).序列:"你今天吃什么",视频(一帧帧图片构成的序列),一行行代码,chatgpt

输出:

(1).回归任务:填空题,如预测明天的温度

(2).分类任务:选择题:如预测这图片是狼是狗,预测一句话积极还是消极

(3).生成任务(结构化输出):简答题:chatgpt

分类和回归是结构化的基础。分类时, 是用数字来表示类别。有的时候需要多个模态的数据, 比如 图片, 文字, 声音。

步骤:

(1).定义函数 (模型)

模型:ŷ = w x + b (weight权重,bias偏置,此为Linear model(线性模型))

(2).定义合适的损失函数loss

L(w, b) = |ŷ - y| = | w x+b- y|

L=1/N∑l

作用:判断我们选择的这组参数怎么样

(3).根据损失, 对模型进行优化(Optimization)

使L最小时w与b是多少

相关推荐
陈天伟教授2 小时前
人工智能应用- 语言处理:04.统计机器翻译
人工智能·自然语言处理·机器翻译
大江东去浪淘尽千古风流人物2 小时前
【VLN】VLN仿真与训练三要素 Dataset,Simulators,Benchmarks(2)
深度学习·算法·机器人·概率论·slam
Dfreedom.2 小时前
图像处理中的对比度增强与锐化
图像处理·人工智能·opencv·锐化·对比度增强
wenzhangli72 小时前
OoderAgent 企业版 2.0 发布的意义:一次生态战略的全面升级
人工智能·开源
AI_56783 小时前
SQL性能优化全景指南:从量子执行计划到自适应索引的终极实践
数据库·人工智能·学习·adb
cyyt3 小时前
深度学习周报(2.2~2.8)
人工智能·深度学习
阿杰学AI3 小时前
AI核心知识92——大语言模型之 Self-Attention Mechanism(简洁且通俗易懂版)
人工智能·ai·语言模型·自然语言处理·aigc·transformer·自注意力机制
陈天伟教授3 小时前
人工智能应用- 语言处理:03.机器翻译:规则方法
人工智能·自然语言处理·机器翻译
Σίσυφος19003 小时前
PCL 姿态估计 RANSAC + SVD(基于特征匹配)
人工智能·机器学习
Warren2Lynch3 小时前
C4 vs UML:从入门到结合使用的完整指南(含 Visual Paradigm AI 实操)
人工智能·机器学习·uml