819 机器学习-决策树2

一、决策树的算法

信息增益:某个属性带来的熵增

1、决策树三大经典算法

• ID3 → 信息增益

信息增益:某个属性带来的熵增

• C4.5 → 信息增益率

信息增益率:信息增益÷自身熵

• CART → 基尼指数(分类);平方误差最小化(回归)

基尼指数Gini(D): ·p越大,Gini(D)越小

• 如何防止过拟合

少分叉 + 多验证 + 后剪枝"

2、sklearn.tree.DecisionTreeClassifier 关键参数

数据集预测:例如心脏病数据集

相关推荐
admiraldeworm17 分钟前
Spring Boot + Spring AI 最小可运行 Demo
java·人工智能·ai
算法_小学生1 小时前
长短期记忆网络(LSTM)
人工智能·rnn·lstm
Virgil1391 小时前
【TrOCR】模型预训练权重各个文件解读
人工智能·pytorch·计算机视觉·自然语言处理·ocr·transformer
MaxCode-11 小时前
【机器学习 / 深度学习】基础教程
人工智能·深度学习·机器学习
wjt1020201 小时前
机器学习--续
算法·机器学习
先做个垃圾出来………1 小时前
神经网络(Neural Network, NN)
人工智能·深度学习·神经网络
我希望的一路生花1 小时前
Nik Collection 6.2全新版Nik降噪锐化调色PS/LR插件
人工智能·计算机视觉·设计模式·stable diffusion·aigc
AI扶我青云志4 小时前
Milvus 安装和启动指南
人工智能·云原生·eureka·大模型
一只齐刘海的猫5 小时前
部署Qwen2.5-VL-7B-Instruct-GPTQ-Int3
人工智能·多模态