杭电 神经网络与深度学习 学习笔记

考试范围:

机器学习基础:

绪论

基础网络模型:

前馈神经网络

卷积神经网络

循环神经网络

网络优化与正则化

记忆与注意力机制

无监督学习

模型独立学习方式

1.绪论

神经网络:一种以人工神经元为基本单元的数学网络模型。

深度学习:一类机器学习问题以及解决这类问题的方法。

涉及的知识体系:

人工智能(artificial intelligence):

让机器具有人类的智能。

标志性事件:

1956年的达特茅斯(Dartmouth)会议,标志着人工智能这个学科的诞生。

深度学习与机器学习、人工智能的关系:

人工智能:机器展现的人类智能;

机器学习:计算机利用已有的数据(经验),得出了某种规律,并利用此模型预测未来的一种方法;

深度学习:实现机器学习的一种技术。

人工智能的发展轴:

机器学习的流程:

浅层学习:不涉及特征学习,其特征主要是靠人工经验或特征转换方法来抽取。

什么是好的数据表示?

非常主观,但一个好的表示具有以下几个优点:

极强的表示能力;

使得后续的学习任务变得简单。

特征提取 vs 表示学习:

特征提取:依据先验或任务目标,手动去除无用特征。

表示学习:把"学特征"并入模型,用深度网络自动学习高层语义特征。

深度学习:

通过构建具有一定"深度"的模型,可以让模型来自动学习好的特征表示(从底层特征,到中层特征,再到高层特征),从而最终提升预测的准确性。

人工神经网络示意图:

2.前馈神经网络

相关推荐
江畔柳前堤2 小时前
LLM 训练核心机制深度解析:Warmup、Cosine Decay 与 Perplexity 的完整知识体系
网络·人工智能·深度学习·算法·机器学习·语音识别
蒸蒸yyyyzwd3 小时前
秋招不熟悉力扣学习笔记1
笔记·学习·leetcode
小弥儿4 小时前
GitHub今日热榜 | 2026-08-11:图原生基础设施首日登顶
学习·开源·github
Mr.huang6 小时前
自注意力机制(Self‑Attention)
人工智能·深度学习
for_ever_love__7 小时前
python基础语法学习: 数据容器
windows·python·学习
云空8 小时前
《电子专业完整学习路线图(分两套:本科四年版 / 零基础自学速成版)》
科技·学习·学习方法·高考
min(a,b)8 小时前
学习第16天:LangGraph 与 Agent 工作流编排
学习
woshihuanglaoshi8 小时前
鸿蒙技术进阶全景高级成长体系:从初中级到架构师的技能树/学习路径/项目实战/认证体系系统性方法论
学习·华为·harmonyos
AI即插即用8 小时前
即插即用系列 | IEEE TMI PLG-HN:原型学习引导的 CNN-Transformer 混合网络,攻克乳腺肿瘤分割难题
人工智能·深度学习·神经网络·学习·目标检测·cnn·transformer
Lee_jerome9 小时前
python神经网络编程入门(三十三)——多头注意力(Multi-Head Attention)
深度学习·nlp·transformer·注意力机制·多头注意力·self-attention