机器学习模型:逻辑回归之计算概率

许多问题需要将概率估算值作为输出。 逻辑回归是 一种极其高效的概率计算机制。实际上,您可以通过以下两种方式使用返回的概率:

  • 按原样"应用。例如,如果垃圾邮件预测模型将电子邮件视为 输入并输出值 0.932,这表示概率为 93.2% 电子邮件是垃圾邮件。

  • 转换为二元类别,例如 True 或 False、Spam 或 Not Spam。

本单元重点介绍如何按原样使用逻辑回归模型输出。在"分类" 模块中,您将学习如何将此输出转换为二元类别。

▏S型函数****

您可能想知道逻辑回归模型如何确保其输出表示概率,始终输出介于 0 到 1 之间的值。由于 会发生一系列函数,这些函数称为逻辑函数 其输出具有相同的特征。标准逻辑函数, 也称为 S型函数sigmoid表示"s形"),其 公式:

f(x)=1/1+e−x

图 1 显示了 sigmoid 函数的相应图表。

- 图 1 -

S 型函数的图形。曲线接近 0 因为 x 值减少到负无穷大,而 1 则等于 x 值越接近无穷大。

随着输入 x 的增加,sigmoid 函数的输出会接近 1,但永远不会达到 1。同样,当输入值减小时,S 型函数值 函数的输出接近,但永远不会达到 0。

▏Sigmoid 函数背后的数学原理

使用 S 型函数转换线性输出

以下等式表示逻辑回归模型的线性组件:

z=b+w1x1+w2x2+...+wNxN

其中:

  • z 是线性方程的输出(也称为 对数几率)

  • b 是偏差

  • w 的值是模型学习的权重

  • x 的值是特定样本的特征值

要获得逻辑回归预测结果,请将 z 值传递给 S 型函数,将得到一个介于 0 到 1之间的值(概率):

y′=1/1+e−z

其中:

  • y′ 是逻辑回归模型的输出。

  • z 为线性输出(按上述等式计算得出)。

▏对数几率

图 2 说明了如何将线性输出转换为逻辑回归 输出结果。

- 图 2 -

左图:线性函数 z = 2x + 5,包含三个 突出显示的数据点

右图:三个点相同的 S 型曲线 通过 S 型函数转换后突出显示。

在图 2 中,线性方程会成为 S 型函数的输入,该函数会将直线弯曲成 S 形。请注意,线性方程 可以输出非常大或非常小的 z 值,但 S 型函数的输出 函数 y' 始终介于0 和 1 之间(不含 0 和 1)。例如,左侧图表中的黄色方块的 z 值为 -10,但右侧图表中的 S 型函数会将该 -10 映射为 y' 值0.00004。

相关推荐
耳东哇4 分钟前
spring ai-openai-vl模型应用qwen-vl\gpt-文字识别-java
java·人工智能·spring
破刺不会编程2 小时前
socket编程UDP
linux·运维·服务器·网络·c++·网络协议·udp
ayaya_mana3 小时前
Nginx性能优化与安全配置:打造高性能Web服务器
运维·nginx·安全·性能优化
说私域4 小时前
基于开源AI智能客服、AI智能名片与S2B2C商城小程序的微商服务优化及复购转介绍提升策略研究
人工智能·小程序
之歆6 小时前
Al大模型-本地私有化部署大模型-大模型微调
人工智能·pytorch·ai作画
legendary_bruce8 小时前
【22-决策树】
算法·决策树·机器学习
paid槮8 小时前
机器学习总结
人工智能·深度学习·机器学习
Hello123网站9 小时前
职得AI简历-免费AI简历生成工具
人工智能·ai工具
我不要放纵9 小时前
docker
运维·docker·容器
亚里随笔9 小时前
稳定且高效:GSPO如何革新大型语言模型的强化学习训练?
人工智能·机器学习·语言模型·自然语言处理·llm·rlhf