机器学习:决策树2--CART决策树(分类树和回归树)

基尼值 等于 1 减去 每个类别概率的平方和

CART决策树分类树前置知识:
基尼值 等于 1 减去 每个类别对应各自标签概率的平方和(特征是分类的)

CART决策树回归树前置知识:
但是特征列不是分类,有线性,下面这个分二分算基尼指数就有意思

cart决策树的分类树

分别做各个特征的尼基系数,选择第一个特征做最有分裂点

cart决策树的回归树

分别求出划分点左右两侧真实值的平均值作为预测值,然后让左右两侧各自真实值和真实值相减的平方相加(最小二乘)

找到最优划分点:就是损失函数最小值

CART决策树 的回归树和分类树区别:

决策树总结

相关推荐
武天旭6 小时前
AI安全--AI大模型的后门攻击检测与防御
人工智能·深度学习·安全·机器学习
汤姆宝库10 小时前
安全深拆:越狱物理、注入攻击与纵深防御
人工智能·安全·机器学习·ai
成都旺小宝科技13 小时前
AI工牌案例:华润静安府话术执行率提到62%
人工智能·机器学习·房地产
labuladong14 小时前
机器学习&神经网络 系列教程上线
神经网络·算法·机器学习
howard200515 小时前
机器学习课程架构思维导图
机器学习·课程架构
知识分享小能手17 小时前
机器学习教程,从入门到精通,机器学习概述 + Python 语言基础 · 知识点详解(1)
人工智能·python·机器学习
博谷17 小时前
什么是GEO监测?核心指标、工作原理与AI搜索诊断监测全解析
人工智能·机器学习·自然语言处理
iiiiii1118 小时前
大模型批量生成中的左填充 (left padding)与右填充 (right padding):从生成正确性到 GRPO 的混合策略
人工智能·机器学习·语言模型·大模型·llm·attention·注意力