scikit-learn/sklearn学习|广义线性回归损失函数的基本表达式

【1】引言

前序学习进程中,学习了scikit-learn/sklearn学习|广义线性回归 Logistic regression的三种成本函数,这里先回过头来认识一下广义线性回归的损失函数。

【2】损失函数

广义线性回归的损失函数表达式为: min ⁡ w 1 2 n s a m p l e s ∑ i d ( y i , y i ^ ) + α 2 ∣ ∣ w ∣ ∣ 2 \min_{w}\frac{1}{2n_{samples}}\sum_{i}d(y_{i},\hat{y_{i}})+\frac{\alpha}{2}||w||^2 wmin2nsamples1i∑d(yi,yi^)+2α∣∣w∣∣2

上式中, α \alpha α是大家熟悉的惩罚项强度

稍微陌生的却是前半部分偏差 d ( y i , y i ^ ) d(y_{i},\hat{y_{i}}) d(yi,yi^),它有多种表达形式,将是接下来一段时间的学习要点。

【3】总结

认识了广义线性回归损失函数的基本表达式。

相关推荐
ZhengEnCi35 分钟前
正样本几万、负样本个位数:极端类别不平衡下怎么训模型(全文可跑)
深度学习
kyrie_sakura44 分钟前
大模型学习20 大模型学习 - LangChain3 - Agents
人工智能·学习·langchain
zroooo1 小时前
计算机学习-知识庞大而繁杂
笔记·学习
坤坤子吖1 小时前
算法学习——单调队列
开发语言·c++·笔记·学习·算法
布吉岛的石头1 小时前
Java 程序员第 50 阶段13:对齐税 alignment tax 是什么
人工智能·深度学习·transformer
fpcc2 小时前
AI和大模型—神经网络的学习
人工智能·神经网络
乌暮2 小时前
请求进门先安检:Spring 拦截器与统一功能实战指南
java·开发语言·后端·学习·spring
起个名字费劲死了3 小时前
Halcon学习一:骰子识别
前端·python·学习
米饭是菜qy3 小时前
深度学习Transformer详细介绍
人工智能·深度学习·transformer