深度学习常见问题

1.将 100 个大小为 5 x 5 的滤波器应用于 500 x 500 x 3 的图像,输出结果是什么?

本题目考察卷积公式:

先计算一个滤波器输出的结果,输出结果高度为(矩形情况下):,其中为图像输入高度,为滤波器尺寸,为填充大小,为步长。

本题目中=500,=5,(无填充),=1。

所以输出图像高度为:

而滤波器数量为100,所以输出为

2.梯度下降法的标准方程是什么?

3.什么是生产对抗式网络?

生产对抗式网络是一种机器学习模型,由两个神经网络组成:生成器和判别器。生成器网络基于随机噪声输入生成的新的数据样本,判别器网络评估这些生成的样本,并将其与真实数据样本比较,以确定它们是真实的还是伪造的。通过迭代学习,生成器不断提高生产逼真样本的能力,而判别器不断提升区分真是样本和伪造样本的能力。

4.卷积神经网络的输出方程是什么?

单个输出的典型方程可以表示为:output=activation_function(sum(weight_i*input_i+bias))

weight_i和input_i分别表示第i个卷积核的权重和输入。

5.什么是深度学习?什么是机器学习?

深度学习是机器学习的一个分支。机器学习包含所有"让计算机利用经验改善性能的算法",例如决策树、支持向量机、朴素贝叶斯,也包括深度学习。

深度学习和传统机器学习的区别在于,深度学习不需要人类手动将数据转化为机器能理解的特征向量,而深度学习可以实现对数据的端到端的处理

6.什么是overfit(过拟合)?

模型在训练数据上拟合的过好,把训练数据中的一些噪声当成了普适规律,导致在测试集上表现得很糟糕。过拟合的特征是验证集损失曲线先降后升,权重过大或者剧烈震荡。

7.如何防止过拟合?

增加数据量,数据增强,降低模型复杂度等等。

8.什么是正则化?L1正则化和L2正则化的区别是什么?

正则化的本质就是在损失函数里加入惩罚项,限制模型的复杂度。

L1正则化是权重的绝对值之和,L2正则化是权重的平方和。

L1正则化会让不重要的特征归0。L2正则化会让权重整体变小,但不会恰好为0,每个特征都保留一点点贡献。

9.什么是attention机制?

输入四个向量a1、a2、a3、a4,每一个向量都可以生产自己的三个q、k、v向量。

输出向量b1,b1是由a1的q向量和其他所有的向量的k、v向量逐个点积而成。

10.什么是自监督学习?

自监督学习的特征就是数据自己生产问题+数据自己提供答案。

相关推荐
YOLO数据集集合8 分钟前
无人机树木识别检测数据集 | 树木检测 树种分类 无人机航拍 林业调查9082期
深度学习·yolo·目标检测·无人机·无人机视角·树冠识别·树冠
TAN-90°-14 分钟前
Deep Learning for Computer Vision——Generative Models 1
人工智能·深度学习·神经网络·目标检测·机器学习·计算机视觉
AIGCmagic社区15 分钟前
OpenWAM把世界动作模型预训练拆成可替换的受控实验
人工智能·aigc·具身智能
u13013017 分钟前
GitHub 热榜项目:日榜(2026-09-18)
人工智能·github
天涯明月199317 分钟前
SGLang 设计与实现——RadixAttention 与前后端协同,让 KV 缓存不再用完即弃
人工智能·大模型·推理框架·ai infra
胡家伟++18 分钟前
从“过滤”到“选择”:投机解码、拒绝采样与强化学习的方差缩减统一理论
人工智能·机器学习
深兰科技19 分钟前
深兰科技受邀参与第二届中国(南宁)—东盟人工智能场景应用对接会,深化AI国际合作
人工智能·qt·r语言·scala·symfony·智能机器人·深兰科技
m0_5873830021 分钟前
上海24小时自助健身房系统软件开发实战指南:从架构到部署
人工智能·小程序·数据挖掘·系统架构·需求分析
2301_7903559722 分钟前
深度剖析:AI配音如何实现真正的情感化、拟人化?
人工智能·自然语言处理
万联WANFLOW24 分钟前
AI Agent 架构如何重构跨境电商选品与广告投放
网络·人工智能·业界资讯