AI大模型-评价指标-相关术语

背景

近期在学习AI大模型,对相关术语不甚了解,在此做个笔记。

术语

召回率

举例:核酸筛查时,100个人分别做核酸,其中10人实际有感染,结果找出10个感染者中的8人,又错找了3人。

此时,召回率= 8/10 = 80%

提高召回率的核心策略:宁可错抓,不可错放

准确率

又称精确率,和召回率紧密相关,上述例子中,测出11人阳性,其中3人测试结果有误。

此时,准确率= 8/11 ≈ 72.7%

提高准确率的核心策略:宁可错放,不可错抓

准确率和召回率的对比说明:

1、两者核心策略相反,往往需要根据具体场景权衡,难以兼得

2、需要明确,上述的难以兼得之结论,是以模型本身的智能水平不变为前提。实际场景中,人类当然需要两者兼得,其策略无非两种:

-- 1)将原模型更换为更高智能的模型

-- 2)将原模型组合使用,如A1负责高召回率,A2在A1的输出基础上负责高准确率,这样就能在原智能水平的基础上,同时提高准确率和召回率。这种组合本身,其本质也是创造了更高水平的智能,但潜力有限,并不能通过套娃再次提升智能水平

相关推荐
HAHAXX81 分钟前
2026智能自动化落地:通义灵码与Cursor加持,RPA融合生成式AI的工程化实践
人工智能·自动化·rpa
chuntian_tester3 分钟前
AI自动化第1步【系统探索】
人工智能·测试工具·ai·自动化
月华路4 分钟前
《模型不玄学》第29章 上线监控与再训练
人工智能·深度学习·机器学习
zcg19425 分钟前
基于Qwen的SR——ODTSR
人工智能
小马9267 分钟前
从单模型到多模型编排:GitHub HydraFusion 如何让编程 Agent 降本 36%-67%
人工智能·github
“AI国潮设计-小江”9 分钟前
【Python实战】SDXL精准控制“普宁英歌舞×星空蛋糕”IP落地,附核心Prompt与商用授权思路
开发语言·人工智能·python·prompt·aigc
C++ 老炮儿的技术栈16 分钟前
MFC CPtrArray的用法
开发语言·数据结构·c++·算法·mfc·c
HySpark18 分钟前
从“能识别”到“稳定识别”:离线ASR在真实会议场景中的问题与工程优化实践
人工智能·语音识别
weixin_4462608522 分钟前
CABAL:用于追踪同行评审中合谋投标影响的多智能体仿真框架
人工智能·算法·机器学习
不会就选b22 分钟前
算法日常・每日刷题--<贪心>6
数据结构·算法·leetcode