深度学习笔记之线性代数

深度学习笔记之线性代数

一、向量

在数学表示法中,向量通常记为粗体小写的符号(例如,xyz )当向量表示数据集中的样本时,它们的值具有一定的现实意义。例如研究医院患者可能面临的心脏病发作风险,用一个向量表示一个患者,其分量为最近的生命特征、胆固醇水平、每天运动时间等。

可以使用下标来引用向量的任意元素

使用切片访问

向量只是一个数字数组,就像每个数组都有一个长度,向量的长度通常称为向量的维度(dimension)

可以通过调用Python的内置len()函数来访问张量的长度

当张量表示一个向量时,可以通过.shape属性访问向量的长度。对于只有一个轴的张量,形状只有一个元素。

二、矩阵

矩阵将向量从一阶推广到二阶。通常用粗体大写字母表示矩阵(例如X,Y,Z),在代码中表示具有两个轴的张量。

索引访问

求矩阵的转置

判断一个矩阵是否为对称矩阵。即这个矩阵是否等于它的转置矩阵。

三、张量算法的基本性质

两个形状相同的矩阵相加,会在这两个矩阵上执行元素加法

两个矩阵按元素乘法成为Hadamard积

将张量乘以或加上一个标量不会改变张量的形状,其中张量的每个元素都与标量相加或相乘

四、降维

计算向量中元素的和

为了通过求和所有行元素来降维,可以在调用函数时制定axis=0

也可以指定axis=1将通过汇总所有列的元素降维

沿着行和列对矩阵求和,等价于对矩阵的所有元素进行求和

计算任意形状张量的平均值

五、非降维求和

如果我们想沿某个轴计算A元素的累积总和, 比如axis=0(按行计算),可以调用cumsum函数。 此函数不会沿任何轴降低输入张量的维度。

六、点积

七、矩阵-向量积

八、矩阵-矩阵乘法

九、范数


相关推荐
workflower10 小时前
设备单元级(L1)实施路径
人工智能·线性代数·矩阵·机器人·开源
Token炼金师10 小时前
幂律的预言:Kaplan 与 Chinchilla 的算力账本 —— Scaling Laws 与最优配比
人工智能·深度学习·大模型架构·kv cache·scaling laws
四月天4313 小时前
web安全-SSTI(服务器模板注入)
笔记·学习·web安全·网络安全
Token炼金师14 小时前
算力显存通信的三角博弈:DP/TP/PP/SP、ZeRO、混合精度与稳定性 —— 训练优化四件套
人工智能·深度学习·dp·sp·pp·zero·tp
疯狂打码的少年14 小时前
【操作系统】虚拟存储管理(局部性原理、缺页中断)
笔记
NULL指向我14 小时前
TMS320F28379D笔记5:CAN通信多邮箱配置
笔记
2601_9516599915 小时前
YOLOv11 改进 - 主干网络 ConvNeXtV2全卷积掩码自编码器网络:轻量级纯卷积架构破解特征坍塌难题,提升特征多样性
深度学习·yolo·计算机视觉
aaaameliaaa16 小时前
进制练习题【找出只出现一次的数字、交换两个变量(不创建临时变量)、统计二进制中1的个数、打印整数二进制的奇数位和偶数位、求两个数二进制中不同位的个数】
c语言·数据结构·笔记·算法
2601_9628464916 小时前
计算机毕业设计之基于大数据加护的国产美妆行业发展状况研究
大数据·人工智能·深度学习·信息可视化·课程设计
极光代码工作室16 小时前
基于YOLO目标检测的智能监控系统
python·深度学习·yolo·机器学习·计算机视觉