scikit-learn/sklearn学习|广义线性回归损失函数的基本表达式

【1】引言

前序学习进程中,学习了scikit-learn/sklearn学习|广义线性回归 Logistic regression的三种成本函数,这里先回过头来认识一下广义线性回归的损失函数。

【2】损失函数

广义线性回归的损失函数表达式为: min ⁡ w 1 2 n s a m p l e s ∑ i d ( y i , y i ^ ) + α 2 ∣ ∣ w ∣ ∣ 2 \min_{w}\frac{1}{2n_{samples}}\sum_{i}d(y_{i},\hat{y_{i}})+\frac{\alpha}{2}||w||^2 wmin2nsamples1i∑d(yi,yi^)+2α∣∣w∣∣2

上式中, α \alpha α是大家熟悉的惩罚项强度

稍微陌生的却是前半部分偏差 d ( y i , y i ^ ) d(y_{i},\hat{y_{i}}) d(yi,yi^),它有多种表达形式,将是接下来一段时间的学习要点。

【3】总结

认识了广义线性回归损失函数的基本表达式。

相关推荐
Lihua奏1 天前
从单核到多核:CPU为什么不能再只靠提频变快
深度学习
拾年2751 天前
大模型的"聪明"从哪来?聊聊 AI 数据集的那些事儿
人工智能·深度学习·机器学习
hboot2 天前
AI工程师第四课 - 深度学习入门
pytorch·python·神经网络
罗西的思考2 天前
机器人 / 强化学习】HIL-SERL:人类在环驱动的具身智能进化框架
人工智能·算法·机器学习
ShallWeL2 天前
【机器学习】(3)—— 线性回归:梯度下降
人工智能·机器学习
ShallWeL2 天前
【机器学习】(2)—— 线性回归:损失函数
人工智能·机器学习
Lihua奏5 天前
# 机器学习:机器是怎么从数据里学出规则的
机器学习