第1章,机器学习与深度学习

1、深度学习是什么

深度学习和机器学习的区别(仅个人理解):

(1)深度学习是机器学习的一个子集

(2)深度学习利用多层神经网络从大量数据中进行学习

狭义的机器学习:除去深度学习的机器学习

一般是基于数学,或者统计学的方法,具有很强的可解释性(就是说得通,有道理,令人信服)。

经典的传统机器学习算法:KNN, 决策树,朴素贝叶斯......

KNN: K最近邻居(K-Nearest Neighbors,简称KNN)

一种监督(有标签,比如把人分成北大和清华的)学习算法,用于分类和回归问题。它的基
本思想是通过测量不同数据点之间的距离来进行预测。

KNN的工作原理可以概括为以下几个步骤:

(1)距离度量:KNN使用距离度量(通常是欧氏距离(三维空间))来衡量数据点之间的相似性。

(2)确定邻居数量K
(3)投票机制

决策树

假如没有垃圾关键词的邮件中有垃圾邮件该怎么办?:添加特征

决策树不善于处理未见过的特征

朴素贝叶斯

  • y = c_k:表示"交通方式是飞机(或火车、自行车)"

  • x:表示"到达了 B 地"

机器学习,具有数学上的可解释性,但准确率不是百分百,且不灵活

深度学习

神经网络的任务


常见的神经网络的输入, 一般有三种数据形式。

我们想要的输出(任务类别)一般也有下面几种。

深度学习任务


大家都说深度学习需要数据,为什么?:因为要从数据中找到函数

如何从数据中找到想要的函数?

(1)定义一个函数

(2)计算LOSS

(3)根据LOSS对模型进行优化

Loss的大小就衡量了我们选择的这个函数的好坏。

当w_0处的导数大于0时:往左走

当w_0处的导数小于0时:往右走

至于这一步走多长:

导数越大可能离得越远,那就多走一些。

导数越小可能离得越近,那就少走一些。

超参数:人为规定的参数

学习率不能太大也不能太小:

(1)太大:容易走过头

(2)太小:走太慢

相关推荐
IvanCodes4 小时前
RAG 实战教程(一):RAG 工作原理与完整流程——分片、索引、召回、重排和生成
人工智能·后端·agent
今天AI了吗5 小时前
合规场景下的 AI 推理可解释性:Attention 可视化与推理路径追踪的工程实践
人工智能
周末程序猿5 小时前
浅析大模型推理十二篇之KV Cache
人工智能
鱼樱前端6 小时前
用 AI 做内容变收入
前端·人工智能·ai编程
eric-sjq6 小时前
10 分钟实战:用 0.6B 本地模型生成中文网页(WanlyFrontend + 编译器全流程)
javascript·机器学习·自然语言处理·html
Dawson Zhu6 小时前
基于Palantir Foundry构建半导体制造AI友好型数据中台:从良率分析场景谈起
人工智能·语言模型·架构·制造·agi
fthux7 小时前
装闭 RenoPit 源码解析(04):装修图纸和合同文件上传处理流程
人工智能·ai·开源·github·open source·renopit
weixin_446260858 小时前
从被动镜像到主动智能体:面向网络物理人工智能的整体论数字孪生(HDT-Net)
网络·人工智能
秋枫要学习8 小时前
你的鼠标,正在被 AI 抢走
人工智能·计算机外设