吴恩达机器学习笔记 二十六 决策树学习过程 独热编码one-hot

决策树的学习过程

  1. 所有样本都在根结点

2.计算所有可能的特征的信息增益,选择信息增益最大的那个

3.根据选择的特征分离数据集,创造左右两支子树

4.继续进行分裂直到达到停止标准。停止标准有:一个节点只有一类样本;分裂一个节点会导致树的深度超过最大值;从新的分裂得到的信息增益低于一个阈值;一个节点中的样本数低于一个阈值。

决策树可以看做一个**递归(recursive)**的过程

独热编码one-hot

例如猫狗分类,原本耳朵形状这个特征有三个可能的取值,采用独热编码的方式创建三个新的特征,每个特征只有两种情况(0或1) ,每个特征恰好有一个是1,所以叫独热。也可以推广到其他特征,用0或1来表示特征,可以将数字作为神经网络的输入。

相关推荐
AI视觉网奇13 分钟前
ue5 默认相机设置
笔记·学习·ue5
星河天欲瞩15 分钟前
【深度学习Day1】环境配置(CUDA、PyTorch)
人工智能·pytorch·python·深度学习·学习·机器学习·conda
IT199520 分钟前
C++ 实战笔记:OpenSSL3.5.2 实现 SM2 数据加密(附完整源码 + 注释)
开发语言·c++·笔记
DBBH27 分钟前
DBBH的AI学习笔记
人工智能·笔记·学习
June bug33 分钟前
【实习笔记】正交实验法设计测试用例
笔记·学习·测试用例
高洁011 小时前
知识图谱如何结合 RAG实现更精确的知识问答
人工智能·算法·机器学习·数据挖掘·知识图谱
爱喝可乐的老王1 小时前
机器学习监督学习模型----KNN
人工智能·算法·机器学习
丝斯20111 小时前
AI学习笔记整理(54)——大模型之Agent 智能体开发前沿技术
人工智能·笔记·学习
hetao17338371 小时前
2026-01-16~19 hetao1733837 的刷题笔记
c++·笔记·算法
(; ̄ェ ̄)。1 小时前
机器学习入门(八)过拟合、欠拟合、L1、L2正则化
人工智能·机器学习