模型容量
模型容量的影响
估计模型容量
难以在不同的种类算法之间比较 ，例如树模型和神经网络
给定一个模型种类，将有两个主要因素：
- 参数的个数
- 参数值的选择范围
VC维
线性分类器的VC维
VC维的用处
数据复杂度
多个重要因素：
- 样本个数
- 每个样本的元素个数
- 时间、空间结构
- 多样性
总结
- 模型容量需要匹配数据复杂度，否则可能导致欠拟合和过拟合
- 统计机器学习提供数学工具来衡量模型复杂度
- 实际中一般靠观察训练误差和验证误差
李沐 过拟合和欠拟合【动手学深度学习v2】
o(╯□╰)o亚比囧囧囧2024-09-21 7:04
相关推荐
锋行天下4 小时前
langgraph 后端发自定义数据，前端接收方法概括泯泷6 小时前
单个 AI 再强，为什么也干不过一支 AI 团队？浪遏6 小时前
认识 wm：从多平台发布到可扩展 CLI 的架构设计深蓝AI6 小时前
英伟达换帅当天，我先跑了一遍 GPU 环境体检：版本矩阵比人事更值得盯罗西的思考8 小时前
【轻量化复刻大模型 / KIMI K3】AttnRes 模块交互式演示stormzhangV8 小时前
涨薪 50% 怎么做到的？老金带你玩AI9 小时前
如何在5分钟之内创建Grok Bot的超级团队程序员cxuan9 小时前
离谱，AI 大佬顺手搓了个 YouTube ，而我顺手给他搓了个中文插件zixu_star9 小时前
上下文工程：Prompt、记忆和上下文如何管理？ZONGYUAN-ROOT9 小时前
【3D仿真数据集】从“能生成”到“能用”：面向工业仿真的3D资产自治自愈流水线全链路落地