【机器学习300问】102、什么是混淆矩阵?

一、混淆矩阵的定义

**混淆矩阵是一种用于评估分类模型性能的评估指标。**当模型对数据进行预测并将数据分配到预定义的类别时,混淆矩阵提供了一种直观的方式来总结这些预测与数据实际类别之间的对应关系。具体来说,它是一个表格。

二、分类模型性能评估一级指标

分类模型的性能评估指标有三个等级,一级评估指标如下:

  1. 真正例(True Positives, TP):模型预测为正类,实际上也是正类的样本数。
  2. 假正例(False Positives, FP):模型预测为正类,但实际上为负类的样本数。
  3. 真负例(True Negatives, TN):模型预测为负类,实际上也是负类的样本数。
  4. 假负例(False Negatives, FN):模型预测为负类,但实际上为正类的样本数。

混淆矩阵就是根据一级分类指标得到的一张表。

我自己的理解是三句话:

**第一句:**分类你可以理解成猜迷,猜的对不对用"T真,F假"来表示。

**第二句:**你猜的这个东西的时候,你猜测它类别是"P正"还是"N负"。

**第三句:**你猜的这个东西,它本身的分类用"标签label"表示。

所以按照上面的三句话理解,举几个例子:

情况一:这个东西,本来的"标签"是"正"的,我猜它是"正",意味着我猜对了,故TP。

情况二:这个东西,本来的"标签"是"负"的,我猜它是"负",意味着我猜对了,故TN。

情况三:这个东西,本来的"标签"是"正"的,我猜它是"负",意味着我猜错了,故FN。

情况四:这个东西,本来的"标签"是"负"的,我猜它是"正",意味着我猜错了,故FP。

二、分类模型性能评估二级指标

分类模型的二级评估指标在之前的文章中提到过,但没有总结过。因此在本文章简单总结一下:

|--------------------------------|-------------------------------------------------------------------------------------------------------------------------------------|-------------------------------|
| 二级指标 | 公式 | 意义 |
| 准确率(Accuracy) | | 分类模型所有判断正确的结果占总观测值的比重 |
| 精确率(Precision) | | 在模型预测是Positive的所有结果中,模型预测对的比重 |
| 召回率(Recall) (又叫灵敏度Sensitivity) | | 在真实值是Positive的所有结果中,模型预测对的比重 |
| 特异度(Specificity) | | 在真实值是Negative的所有结果中,模型预测对的比重 |
[四个二级指标]

更多更详细的知识点,在往期文章中有提到,下面是跳转链接:

【机器学习300问】25、常见的模型评估指标有哪些?https://blog.csdn.net/qq_39780701/article/details/136407056

三、分类模型新能评估三级指标

分类模型的三级评估指标就是F1分数,在之前的文章中提到过。这里就不赘述了。

【机器学习300问】32、F1分数是什么?https://blog.csdn.net/qq_39780701/article/details/136607068

四、混淆矩阵举例说明

以一个图片多分类问题为例,想要判断一张图片是"猫"、"狗"和"猪"其中的哪一种。

混淆矩阵中的数值是样本数量,如果我们要计算准确率accuracy,那么可以统计所有表中数字的总和做分母。对角线相加做分子(因为对角线上的元素代表模型预测结果是正确的)。可以算出

相关推荐
m4Rk_2 小时前
【论文阅读】Agent 记忆机制(83):Inside Out——用可演化 PersonaTree 构建 Agent 的核心长期记忆
论文阅读·人工智能·学习·开源·github
运行时异常2 小时前
【WMS 仓储系统集成 AI Agent 实战】第 8 讲(终篇):生产部署与并发安全——Semaphore 放进 Flux.defer 的坑,压测抓了一晚上
人工智能·安全
杨杨杨大侠2 小时前
Jev、Kev、Laya:决策模型怎么选,什么时候需要微调?
人工智能·python·agent
代码方舟2 小时前
零信任架构实战:基于天远人企关联构建自动化供应链金融网关
运维·人工智能·架构·自动化
虹科网络安全3 小时前
“顶会”看安全(十八):超越越狱:揭示由能力边界模糊引发的 LLM 应用安全风险
人工智能·安全
LOVE️YOU3 小时前
Python 在定义函数时,究竟定义的是什么?
python
Maiko Star3 小时前
* LangChain 提示词模板详解:ChatPromptTemplate 的使用与高级特性
java·人工智能·langchain
段一凡-华北理工大学3 小时前
大模型应用开发 100 天:Python + LLM 从入门到精通 day26~Prompt 调试与优化——A/B 测试与效果评估
windows·python·大模型·prompt·智能体·提示词工程·高炉智能化
Minecraft红客3 小时前
以撒的结合
python·游戏·电脑·娱乐
鬓戈3 小时前
Rust 语言与 AI 应用生态调研及学习路径
人工智能·学习·rust