跟着李沐学AI:简单损失函数

均方损失L2Loss

特点:当真实值y与预测值y'相差较远时,梯度较大,参数更新较多。当预测值与真实值靠近时,梯度越来越小。

最小绝对值损失L1Loss

特点:当预测值与真实值相差较远时,梯度永远为常数,能带来稳定性的好处,但是0点处不可导,具有不平滑性。

Huber's Robust Loss

当预测值与真实值相差较大时,是绝对值误差。当预测值与真实值相差较小时是平方误差。

相关推荐
龙虾PRO几秒前
金融 AI 分析系统:人工智能驱动的金融行情分析系统落地方案
人工智能·金融
卷无止境2 分钟前
KTransformers:让巨型模型跑在你家电脑上的黑科技
人工智能·后端
在深圳创业的何仙姑4 分钟前
2026 深圳跨境财税服务商筛选参考|行业风险规避实操指南
大数据·人工智能·跨境电商·财税
半个落月5 分钟前
Vue 3 如何接住大模型的流式回答:从 ReadableStream 到可靠的 SSE 解析
前端·javascript·人工智能
rain_sxr8 分钟前
大模型端侧推理的前端落地:WebGPU 与 ONNX Runtime 的浏览器部署
人工智能
大模型任我行15 分钟前
腾讯:预测散度掩码提升LLM强化学习
人工智能·语言模型·自然语言处理·论文笔记
程序员-李俞15 分钟前
向量引擎接入自研 API 中转网关:鉴权、限流、熔断和审计日志复盘
服务器·人工智能·大模型·api·ai编程·ai api
雪碧聊技术17 分钟前
软件定义三维近存AI芯片发布——国产算力走出“不依赖先进制程”的独特路线
人工智能
夜瞬17 分钟前
内生可解释性:从黑盒深度模型到可理解、可干预的智能系统
人工智能·python