机器学习之平均精确率均值(Average Precision)

如大家所了解的,平均精确率均值(Average Precision, AP)是 P-R 曲线下的面积。AP 衡量了模型在不同召回率水平下的平均精确率,越高的 AP 值表示模型性能越好。

ROC曲线

ROC曲线( Receiver Operating Characteristic Curve )是以不同阈值下的假阳性率( False Positive Rate )和真阳性率( True Positive Rate )为横纵轴绘制的曲线。

其中 FPR 和 TPR 的定义如下:

FPR = \\frac{FP}{FP + TN}

TPR = recall = \\frac{TP}{TP + FN}

按照上述的例子,假阳率的计算为:

真阳率的计算为:

在计算了 TPR 和 FPR 之后,我们就能得到一个 ROC 曲线上的一个坐标点,即( 0.044 , 0.8 )。要绘制完整的 ROC 曲线,需要在不同的阈值下计算多个 TPR 和 FPR 值,并将它们连接起来形成一条曲线,即完整的 ROC 曲线。

对于 ROC 曲线来说,x 轴的值越小,则负样本中被误报的比例越小,真阴性越多。y 的值越大,则真阳性的比例更大,假阴性越少,漏报较低。

ROC 曲线更接近左上角,说明模型能够有效地区分正例和负例。通过观察 ROC 曲线的形状和接近左上角的程度,我们可以了解模型在不同阈值下的性能优劣。

绘制 ROC 曲线后,可以通过平衡误报和漏报的情况来选择合适的阈值。

相关推荐
共享家95272 小时前
Skill的概述与使用
人工智能·学习·openclaw
`流年づ2 小时前
人工智能学习笔记-KNN
人工智能·笔记·学习
changjh12 小时前
线性回归的似然函数推导
机器学习·线性回归·概率论
Master_oid2 小时前
机器学习45:线性回归进阶篇③
人工智能·机器学习·线性回归
YOLO数据集集合2 小时前
智慧工地AI视觉落地|施工现场建材目标检测开源数据集|无人机航拍建材识别、工地智能化物料盘点深度学习10266期
人工智能·目标检测·无人机
January丶2 小时前
关于多Agent和单Agent的一些思考
人工智能
Elias不吃糖2 小时前
AI Resume Forge:基于 LangGraph 的 AI 简历优化与模拟面试平台
java·人工智能·面试·agent开发
霍小毛2 小时前
数字孪生+AI重构配电网:从“经验驱动“到“智慧决策“的跃迁
人工智能·重构
yyuuuzz2 小时前
AI模型部署中的常见稳定性问题
运维·服务器·网络·数据库·人工智能·云计算·github