机器学习常见面试题总结

1、泛华误差的分解

训练模型的目的------最小化损失函数------泛化误差 可以分解为偏差(Biase)方差(Variance)噪声(Noise)。

bias:拟合值和真实值之间有较大的偏差。所有可能的训练数据集 训练出的所有模型 的输出的平均值真实模型的输出值之间的差异。

varience:反映的是拟合值波动的情况。不同的训练数据集训练出的模型输出值之间的差异。

Noise:噪声 的存在是学习算法所无法解决的问题,数据的质量决定了学习的上限。假设在数据已经给定的情况下,此时上限已定,我们要做的就是尽可能的接近这个上限。

2、偏差、方差与过拟合、欠拟合的关系?

偏差(Bias)与方差(Variance) - 知乎 (zhihu.com)

3、trade-off between bias and variance

泛华误差=偏差(Biase)+方差(Variance)+噪声(Noise)。

从本质上讲,如果你使模型更复杂并添加更多变量,你将会失去一些 Bias 但获得一些 Variance,这就是我们所说的权衡(tradeoff)。这也是为什么我们在建模的过程中,不希望这个模型同时拥有高的偏差和方差。

4、KNN对比K-means

有监督和无监督。

都是基于距离的。

相关推荐
大公产经晚间消息5 分钟前
“胜算未来·2026戈峻思享会”即将登陆大连
大数据·人工智能·ai
烟漠河洛6 分钟前
AI Agent 在代购系统中的三个落地实战:从知识图谱到自动化链路
人工智能·自动化·知识图谱
IvorySQL7 分钟前
PG 日报|修复高 IO 并发场景,解决预读机制耗尽本地缓冲区缺陷
数据库·人工智能·sql·postgresql·区块链
鲜于言悠90512 分钟前
Vibe Coding正确打开方式:前端开发者的AI协作编码方法论
人工智能
武子康14 分钟前
同一套 ComfyUI 工作流第二次为什么快一倍:4 类消息误解 + 互斥阶段账本 + 10 单元实验矩阵
人工智能·aigc·agent
aneasystone本尊14 分钟前
Headroom 介绍:给 AI agent 装一层可逆的上下文压缩
人工智能
Python私教15 分钟前
Godot第一个项目怎么创建?三种渲染器到底怎么选
人工智能
染指111017 分钟前
64.高级RAG-摄取管道
人工智能·llama_index·llamaindex·摄取管道
再渊18 分钟前
基因归因到底怎么计算的?
python·深度学习·机器学习
中微极客21 分钟前
神经形态计算:从忆阻器到SNN训练工程实践
人工智能·mvc