吴恩达机器学习笔记 二十六 决策树学习过程 独热编码one-hot

决策树的学习过程

  1. 所有样本都在根结点

2.计算所有可能的特征的信息增益,选择信息增益最大的那个

3.根据选择的特征分离数据集,创造左右两支子树

4.继续进行分裂直到达到停止标准。停止标准有:一个节点只有一类样本;分裂一个节点会导致树的深度超过最大值;从新的分裂得到的信息增益低于一个阈值;一个节点中的样本数低于一个阈值。

决策树可以看做一个**递归(recursive)**的过程

独热编码one-hot

例如猫狗分类,原本耳朵形状这个特征有三个可能的取值,采用独热编码的方式创建三个新的特征,每个特征只有两种情况(0或1) ,每个特征恰好有一个是1,所以叫独热。也可以推广到其他特征,用0或1来表示特征,可以将数字作为神经网络的输入。

相关推荐
dalong105 分钟前
A11:plus 控件窗口绘图基础
笔记·aardio
历程里程碑20 分钟前
Linxu14 进程一
linux·c语言·开发语言·数据结构·c++·笔记·算法
矢志航天的阿洪31 分钟前
IGRF-13 数学细节与公式说明
线性代数·机器学习·矩阵
三水不滴1 小时前
Redis 持久化机制
数据库·经验分享·redis·笔记·缓存·性能优化
不断进步的咕咕怪1 小时前
meme分析
笔记
小鸡吃米…1 小时前
机器学习 —— 数据缩放
人工智能·python·机器学习
中屹指纹浏览器2 小时前
进程级沙箱隔离与WebGL指纹抗识别:指纹浏览器核心技术难点与工程落地
经验分享·笔记
sayang_shao2 小时前
Rust多线程编程学习笔记
笔记·学习·rust
JHC0000002 小时前
智能体造论子--简单封装大模型输出审核器
开发语言·python·机器学习
进阶的猪2 小时前
Qt学习笔记
笔记·学习