AP AR

混淆矩阵

|--------|--------|--------|
| | 真实值=正例 | 真实值=负例 |
| 预测值=正例 | TP | FP |
| 预测值=负例 | FN | TN |

(根据阈值预测)

P精确度计算:TP/(TP+FP)

R召回率计算:TP/(TP+FN)

AP

综合考虑P R

根据不同的阈值计算出不同的PR组合, 画出PR曲线,计算曲线下面积即为PR

(所有点插值法计算,简单来讲就是近似计算小矩形面积和)

python 复制代码
import numpy as np
import matplotlib.pyplot as plt

def calculate_precision_recall(confusion_matrices):
    
    #计算P R
    recall = []
    precision = []

    for tp, fp, fn in confusion_matrices:
        if tp + fp == 0:
            p = 0.0
        else:
            p = tp / (tp + fp)
        if tp + fn == 0:
            r = 0.0
        else:
            r = tp / (tp + fn)
        precision.append(p)
        recall.append(r)

    return recall, precision

def calculate_ap_all_points(recall, precision):
    #所有点插值法计算面积
    recall = np.concatenate(([0.], recall, [1.]))
    precision = np.concatenate(([0.], precision, [0.]))
    for i in range(precision.size - 1, 0, -1):
        precision[i - 1] = np.maximum(precision[i - 1], precision[i])
    ap = np.sum(np.diff(recall) * precision[1:])
    return ap

# 示例 (每个元素为 [TP, FP, FN])
confusion_matrices = [
    [10, 0, 0],  
    [8, 1, 2],  
    [6, 2, 4], 
    [5, 3, 5],  
    [4, 4, 6],  
    [3, 7, 7],  
]

# 计算精确率和召回率
recall, precision = calculate_precision_recall(confusion_matrices)

# 计算AP
ap = calculate_ap_all_points(recall, precision)
print(f"平均精度 (AP): {ap}")

plt.plot(recall, precision, marker='o')
plt.xlabel('Recall')
plt.ylabel('Precision')
plt.title('Precision-Recall Curve (AP = {:.3f})'.format(ap))
plt.grid(True)
plt.show()

AR

平均召回率

主要是考虑漏检,专注于R

python 复制代码
import numpy as np

def calculate_ar(true_positives, false_negatives, max_detections):

    recall_values = []
    for tp, fn in zip(true_positives, false_negatives):
        if tp + fn == 0:
            recall = 0.0
        else:
            recall = tp / (tp + fn)
        recall_values.append(recall)

    # 假设我们只考虑前 max_detections 个召回率值
    if len(recall_values) > max_detections:
        recall_values = recall_values[:max_detections]

    if not recall_values:
        return 0.0

    ar = np.mean(recall_values)
    return ar

# 示例数据
true_positives = [10, 8, 6, 5, 4, 3]  # TP
false_negatives = [0, 2, 4, 5, 6, 7]  # FP
max_detections = 5  # 最大检测次数

# 计算AR
ar = calculate_ar(true_positives, false_negatives, max_detections)
print(f"平均召回率 (AR): {ar}")

#计算maxDets 为10时候的AR
max_detections_2 = 10
ar_2 = calculate_ar(true_positives, false_negatives, max_detections_2)
print(f"平均召回率 (AR)maxDets为10 : {ar_2}")

平均精度(Average Precision,AP)以及AP50、AP75、APs、APm、APl、Box AP、Mask AP等不同阈值和细分类别的评估指标说明-CSDN博客

相关推荐
Hi202402171 小时前
Vortex CUDA 生态适配:让 CUDA C、CUTLASS 与 Triton 在 RISC-V GPGPU 上运行
人工智能·risc-v·gpgpu
龙腾AI白云4 小时前
AI检索增强生成(RAG):解决大模型幻觉的核心落地技术
数据库·人工智能·机器学习·知识图谱
云票4 小时前
企业对接AI合同审查系统的工程实践
人工智能
admin and root5 小时前
「AI安全篇」实战AntiDebug自动化JS逆向加解密MCP
javascript·人工智能·网络安全·自动化·漏洞挖掘·cnvd·src赏金
智能RPA5 小时前
智能体自动化平台与主数据管理平台(MDM)对比评测
人工智能·自动化·agent·rpa
跨境小彭5 小时前
Temu拉美站点铺货实操复盘:手动复制痛点与批量自动化解决方案
服务器·人工智能·搜索引擎·自动化·temu电商运营
封印师请假去地球钓鱼5 小时前
边解边变的问题:从“决策依赖“一词出发
人工智能·算法
AI搅拌机6 小时前
ComfyUI管理大师:安全稳定升级+切换指定版本!
人工智能
浅安的邂逅6 小时前
20929-OpenAI 一天踩三脚急刹:暂停前沿训练、叫停 Astra、披露越权访问澳政府网站
人工智能·大模型·ai编程·行业动态·ai日报
Qyr996 小时前
2026-2032直接芯片液冷板市场爆发式增长:AI算力浪潮下的热管理核心赛道
大数据·人工智能