Logistics 逻辑回归概念

1. sigmoid函数

逻辑回归算法的拟合函数,叫做sigmoid函数:

函数图像如下(百度图片搜到的图):

sigmoid函数是一个s形曲线,就像是阶跃函数的温和版,阶跃函数在0和1之间是突然的起跳,而sigmoid有个平滑的过渡。

从图形上看,sigmoid曲线就像是被掰弯捋平后的线性回归直线,将x轴的取值范围(-无穷,+无穷)映射到函数值y的(0,1)之间,更适宜表示预测的概率,即事件发生的"可能性" 。

2. 逻辑回归 出现 的场景

2.1 研究 线性回归

当我们研究相关性的时候,经常遇到线性关系,y与x为连续性变量,建立多元线性回归模型。

​​​​​​​2.2 遇到离散或者分类算法

有时候我们不是研究线性关系,而是研究是否取到红球,是否会变胖,是否会下单这样的分类或者离散问题。y为0/1离散变量时,不连续,上面的线性方程右侧是连续型,左侧现在变成离散型,无法建立线形回归模型。因此需要对方程进行logistic变化,或者叫做logistic映射。

​​​​​​​2.3 logistic映射

利用sigmoid函数,将上面的公式进行logistic映射:

  1. 理解sigmoid函数:当z取值越大,无穷大,越小,y越接近于1,反之,越接近于0。
  2. 理解带入z后的sigmoid函数:右侧是一个关于x的线性函数,x在(-无穷,+无穷)之间任意取值;左侧y是关于x的函数值,可以映射到[0,1]之间,也就是说我们现在利用逻辑回归将线性函数和分类/离散之间的关系解决了。
  3. 理解变形后的函数:根据上一篇最大似然估计,变形后的函数公式有利于去参数β

3. 逻辑回归的概念

多重线性回归模型要求因变量是连续型的正态分布变量,且自变量与因变量呈线性关系。当因变量是分类变量,且自变量与因变量不呈线性关系时 ,就不能确足多重线性回归模型的适用条件。此时,处理该类问题常用Logistic回归模型 。Logistic回归分析属于非线性回归,它是研究因变量为二项分类或多项分类结果与某些影响因素之间关系的一种多重回归分析方法。

Logistic Regression 虽然被称为回归,但其实际上是分类模型,并常用于二分类。Logistic 回归的本质是:假设数据服从这个分布,然后使用极大似然估计做参数的估计。

本文用易于理解的方式介绍逻辑回归的概念,希望了解更多的推荐阅读 【机器学习】逻辑回归(非常详细) - 知乎

参考文档:

逻辑回归和优势比:大厂数据分析高频面试-逻辑回归和优势比2

最大似然和Logistics: 用人话讲明白逻辑回归Logistic regression - 知乎

logistics:【机器学习】逻辑回归(非常详细) - 知乎

logistics:经典Logistic回归:原理、计算步骤以及应用 - 知乎

相关推荐
syker41 分钟前
NEWBASIC 2.06.7 API 帮助与用户使用手册
开发语言·人工智能·机器学习·自动化
大数据魔法师3 小时前
分类与回归算法(三)- 逻辑回归
分类·回归·逻辑回归
CAE3203 小时前
基于机器学习的智能垃圾短信检测超强系统
人工智能·python·机器学习·自然语言处理·垃圾短信拦截
一晌小贪欢8 小时前
【Html模板】电商运营可视化大屏模板 Excel存储 + 一键导出(已上线-可预览)
前端·数据分析·html·excel·数据看板·电商大屏·大屏看板
毕设源码-朱学姐12 小时前
【开题答辩全过程】以 海水水质监测大数据分析为例,包含答辩的问题和答案
数据挖掘·数据分析
深圳佛手13 小时前
AI 编程工具Claude Code 介绍
人工智能·python·机器学习·langchain
koo36414 小时前
李宏毅机器学习笔记43
人工智能·笔记·机器学习
程序猿追16 小时前
轻量级云原生体验:在OpenEuler 25.09上快速部署单节点K3s
人工智能·科技·机器学习·unity·游戏引擎
程序猿追17 小时前
异腾910B NPU实战:vLLM模型深度测评与部署指南
运维·服务器·人工智能·机器学习·架构
蒙奇D索大17 小时前
【11408学习记录】考研数学核心考点精讲:二维随机变量(离散与连续)全面解析
笔记·学习·考研·概率论·改行学it