吴恩达2022机器学习专项课程(一) 3.4 成本函数的直观理解

问题预览

  1. 成本函数的目的是什么?
  2. 不同的w参数如何影响成本函数?
  3. 如何选择合适的成本函数?

解读

  • 成本函数:为了衡量参数w和b与训练数据的吻合程度。成本函数越小,w和b越合适。
  • 简化成本函数:为了方便理解成本函数,只需找到让成本函数最小化的w参数即可。
  • 不同的w参数
    • 图片解释:左侧图:横纵轴对应训练样本xy。红×:训练集的数据。右侧图:横轴对应w的值,纵轴对应成本函数的值。最下方公式:代入当前w,计算成本函数的值。
    • w=1 :粉色线条表示模型,将w的值代入成本函数,计算结果为0。表示当前参数w为1时,模型能够完美预测训练集的数据,没有误差。
    • w=0.5 :紫色线条表示w为0.5时模型的样子,当我们给定训练集里的x,通过模型预测出y,和真实的y(红叉对应的y)有差异,图里用蓝色竖线标记出了差异,此时计算出的成本函数的值为0.58,表示有误差。
    • w=0 :黄色线条表示模型的样子,当我们给定训练集里的x,通过模型预测出y,和真实的y差异更大了,此时计算出成本函数的值为2.3,误差比前两个w参数要大。
      w为其它值:通过设置不同的w,计算出不同的成本函数的值,成本函数与w的走势图如右图。
  • 选择合适的w参数:在上述示例中,最合适的w参数为1,因为它的成本函数值为0,是最小的。但是,这只是简化后的例子,我们还需要考虑参数b,下节课会细讲。

总结

成本函数的作用,用于衡量模型预测值y帽与真实值y之间的差异。

通过简化模型(只考虑参数w)以及设置不同的w参数,我们看到了w和成本函数之间的关系。

我们的目的,是为了最小化成本函数,以便找到最合适的模型参数w。

成本函数最小化,是为了确保模型的预测尽可能接近真实数据,从而提高模型的性能和可靠性。

相关推荐
人工智能训练师4 分钟前
Ubuntu22.04如何安装新版本的Node.js和npm
linux·运维·前端·人工智能·ubuntu·npm·node.js
cxr8281 小时前
SPARC方法论在Claude Code基于规则驱动开发中的应用
人工智能·驱动开发·claude·智能体
研梦非凡2 小时前
ICCV 2025|从粗到细:用于高效3D高斯溅射的可学习离散小波变换
人工智能·深度学习·学习·3d
幂简集成2 小时前
Realtime API 语音代理端到端接入全流程教程(含 Demo,延迟 280ms)
人工智能·个人开发
龙腾-虎跃2 小时前
FreeSWITCH FunASR语音识别模块
人工智能·语音识别·xcode
智慧地球(AI·Earth)2 小时前
给AI配一台手机+电脑?智谱AutoGLM上线!
人工智能·智能手机·电脑
Godspeed Zhao2 小时前
自动驾驶中的传感器技术46——Radar(7)
人工智能·机器学习·自动驾驶
limengshi1383923 小时前
机器学习面试:请介绍几种常用的学习率衰减方式
人工智能·学习·机器学习
AKAMAI3 小时前
Sport Network 凭借 Akamai 实现卓越成就
人工智能·云原生·云计算
周末程序猿3 小时前
机器学习|大模型为什么会出现"幻觉"?
人工智能