杭电 神经网络与深度学习 学习笔记

考试范围:

机器学习基础:

绪论

基础网络模型:

前馈神经网络

卷积神经网络

循环神经网络

网络优化与正则化

记忆与注意力机制

无监督学习

模型独立学习方式

1.绪论

神经网络:一种以人工神经元为基本单元的数学网络模型。

深度学习:一类机器学习问题以及解决这类问题的方法。

涉及的知识体系:

人工智能(artificial intelligence):

让机器具有人类的智能。

标志性事件:

1956年的达特茅斯(Dartmouth)会议,标志着人工智能这个学科的诞生。

深度学习与机器学习、人工智能的关系:

人工智能:机器展现的人类智能;

机器学习:计算机利用已有的数据(经验),得出了某种规律,并利用此模型预测未来的一种方法;

深度学习:实现机器学习的一种技术。

人工智能的发展轴:

机器学习的流程:

浅层学习:不涉及特征学习,其特征主要是靠人工经验或特征转换方法来抽取。

什么是好的数据表示?

非常主观,但一个好的表示具有以下几个优点:

极强的表示能力;

使得后续的学习任务变得简单。

特征提取 vs 表示学习:

特征提取:依据先验或任务目标,手动去除无用特征。

表示学习:把"学特征"并入模型,用深度网络自动学习高层语义特征。

深度学习:

通过构建具有一定"深度"的模型,可以让模型来自动学习好的特征表示(从底层特征,到中层特征,再到高层特征),从而最终提升预测的准确性。

人工神经网络示意图:

2.前馈神经网络

相关推荐
qq_284274051 小时前
机械原理笔记:平面机构自由度计算(复合铰链、局部自由度、虚约束)与四杆机构入门(含考点)
笔记·学习·平面·自动化·制造
qq_284274052 小时前
数控铣床与加工中心笔记:铣刀与刀柄系统、G54试切对刀、镜像加工指令、孔加工工艺(钻扩铰镗)与固定循环G73/G83/G81/G76/G87/G84
笔记·学习·自动化·制造
数智工坊3 小时前
视觉SLAM第12讲|地图构建:单目稠密重建、RGB-D点云与八叉树地图全解析
人工智能·深度学习·矩阵·机器人
GPU实战笔记3 小时前
云端 GPU 训练的账户余额提醒:它能说明什么,不能说明什么?
深度学习·算法·成本管理·gpu云计算·云端训练
Titan20243 小时前
MySQL访问个人学习笔记
笔记·学习·mysql
小雪崩4 小时前
嵌入式学习 day64:字符设备驱动
学习
个 人 练 习 生4 小时前
C++ string 类模拟实现:从底层理解字符串(上)
开发语言·c++·经验分享·学习·程序人生
论文复现现场5 小时前
8卡4090能跑70B吗?Llama-2显存预算、QLoRA与通信瓶颈
人工智能·深度学习·分布式训练·llama·显存·qlora·算家云
坤坤子吖5 小时前
C++智能指针:RAII、shared_ptr与内存泄漏
开发语言·c++·笔记·学习
用户15970637605 小时前
一文读懂淘宝店铺在售商品接口:整店商品批量拉取用于竞品研究
深度学习