scikit-learn/sklearn学习|广义线性回归损失函数的基本表达式

【1】引言

前序学习进程中,学习了scikit-learn/sklearn学习|广义线性回归 Logistic regression的三种成本函数,这里先回过头来认识一下广义线性回归的损失函数。

【2】损失函数

广义线性回归的损失函数表达式为: min ⁡ w 1 2 n s a m p l e s ∑ i d ( y i , y i ^ ) + α 2 ∣ ∣ w ∣ ∣ 2 \min_{w}\frac{1}{2n_{samples}}\sum_{i}d(y_{i},\hat{y_{i}})+\frac{\alpha}{2}||w||^2 wmin2nsamples1i∑d(yi,yi^)+2α∣∣w∣∣2

上式中, α \alpha α是大家熟悉的惩罚项强度

稍微陌生的却是前半部分偏差 d ( y i , y i ^ ) d(y_{i},\hat{y_{i}}) d(yi,yi^),它有多种表达形式,将是接下来一段时间的学习要点。

【3】总结

认识了广义线性回归损失函数的基本表达式。

相关推荐
User_芊芊君子5 分钟前
【分布式训练】CANN SHMEM跨设备内存通信库:构建高效多机多卡训练的关键组件
分布式·深度学习·神经网络·wpf
聆风吟º14 分钟前
CANN算子开发:ops-nn神经网络算子库的技术解析与实战应用
人工智能·深度学习·神经网络·cann
觉醒大王16 分钟前
强女思维:着急,是贪欲外显的相。
java·论文阅读·笔记·深度学习·学习·自然语言处理·学习方法
笔画人生22 分钟前
# 探索 CANN 生态:深入解析 `ops-transformer` 项目
人工智能·深度学习·transformer
灰灰勇闯IT27 分钟前
领域制胜——CANN 领域加速库(ascend-transformer-boost)的场景化优化
人工智能·深度学习·transformer
小白狮ww31 分钟前
要给 OCR 装个脑子吗?DeepSeek-OCR 2 让文档不再只是扫描
人工智能·深度学习·机器学习·ocr·cpu·gpu·deepseek
做人不要太理性39 分钟前
CANN Runtime 运行时组件深度解析:任务下沉执行、异构内存规划与全栈维测诊断机制
人工智能·神经网络·魔珐星云
island13141 小时前
CANN GE(图引擎)深度解析:计算图优化管线、内存静态规划与异构任务的 Stream 调度机制
开发语言·人工智能·深度学习·神经网络
艾莉丝努力练剑1 小时前
深度学习视觉任务:如何基于ops-cv定制图像预处理流程
人工智能·深度学习
禁默1 小时前
大模型推理的“氮气加速系统”:全景解读 Ascend Transformer Boost (ATB)
人工智能·深度学习·transformer·cann