跟着李沐学AI:简单损失函数

均方损失L2Loss

特点:当真实值y与预测值y'相差较远时,梯度较大,参数更新较多。当预测值与真实值靠近时,梯度越来越小。

最小绝对值损失L1Loss

特点:当预测值与真实值相差较远时,梯度永远为常数,能带来稳定性的好处,但是0点处不可导,具有不平滑性。

Huber's Robust Loss

当预测值与真实值相差较大时,是绝对值误差。当预测值与真实值相差较小时是平方误差。

相关推荐
Sammyyyyy9 分钟前
Symfony AI 正式发布,PHP 原生 AI 时代开启
开发语言·人工智能·后端·php·symfony·servbay
汽车仪器仪表相关领域12 分钟前
光轴精准测量,安全照明保障——NHD-8101/8000型远近光检测仪项目实战分享
数据库·人工智能·安全·压力测试·可用性测试
WJSKad123514 分钟前
基于yolov5-RepNCSPELAN的商品价格标签识别系统实现
人工智能·yolo·目标跟踪
早日退休!!!17 分钟前
现代公司开发AI编译器的多元技术路线(非LLVM方向全解析)
人工智能
Sahadev_20 分钟前
向量搜索:让电脑理解你的搜索意图
人工智能
大模型真好玩30 分钟前
大模型训练全流程实战指南(一)——为什么要学习大模型训练?
人工智能·pytorch·python·大模型·deep learning
张祥64228890430 分钟前
数理统计基础一
人工智能·机器学习·概率论
540_54031 分钟前
ADVANCE Day45
人工智能·python·深度学习
悟乙己31 分钟前
使用TimeGPT进行时间序列预测案例解析
机器学习·大模型·llm·时间序列·预测
Kun Li34 分钟前
claude使用总结
人工智能