跟着李沐学AI:简单损失函数

均方损失L2Loss

特点:当真实值y与预测值y'相差较远时,梯度较大,参数更新较多。当预测值与真实值靠近时,梯度越来越小。

最小绝对值损失L1Loss

特点:当预测值与真实值相差较远时,梯度永远为常数,能带来稳定性的好处,但是0点处不可导,具有不平滑性。

Huber's Robust Loss

当预测值与真实值相差较大时,是绝对值误差。当预测值与真实值相差较小时是平方误差。

相关推荐
是翎6 分钟前
AI开发工程师面试指南
人工智能·面试·职场和发展
水如烟11 分钟前
孤能子视角:AI→SI——一次关系场的剧烈重组
人工智能
Ivanqhz25 分钟前
层归一化、残差、前馈网络与激活函数简述
服务器·数据库·人工智能·深度学习·算法
Ai-_Man31 分钟前
您您这可以把Dola的多个会话比如说。左侧的多个会话一次性导出吗?不是单条会话里面的多次会对话。用AI导出鸭,答案是可以的
开发语言·前端·人工智能·小程序
海宇服务42 分钟前
零信任架构实战:基于海宇运营商近3个月欠费次数构建自动化履约能力评估管线
运维·人工智能·架构·自动化
天涯明月19931 小时前
世界模型:原理、范式与工程实践
大数据·人工智能·大模型·具身智能·世界模型
秦先生在广东1 小时前
构建 Agent 就绪的数据库 OKF 知识包:Python 编译器实战
人工智能
秦先生在广东1 小时前
初创企业低成本增长的数字营销实战指南
人工智能
秦先生在广东1 小时前
开源权重的质变时刻:技术超越、政策博弈与商业模式重构
人工智能
旺仔Sec1 小时前
2026年江西省职业院校技能大赛(中职组)人工智能应用技术样题
人工智能