Pytorch-统计学方法、分布函数、随机抽样、线性代数运算、矩阵分解

Tensor中统计学相关的函数

python 复制代码
torch.mean() #返回平均值
torch.sum() #返回总和
torch.prod() #计算所有元素的积
torch.max() # 返回最大值
torch.min() # 返回最小值
torch.argmax() #返回最大值排序的索引值
torch.argmin() #返回最小值排序的索引值
torch.std() #返回标准差
torch.var() #返回方差
torch.median() #返回中间值
torch.mode() #返回众数值
torch.histc() #计算input的直方图
torch.bincount() #返回每个值得频数

分布函数

Tensor的torch.distributions

distributions 包含可参数化的概率分布和采样函数

  • 得分函数
    • 强化学习中策略梯度方法的基础
  • pathwise derivative估计器
    • 变分自动编码器中的重新参数化技巧
  • ExponentialFamily、Bernoulli、Categorical、 Beta、 Binomial.Cauchy、Chi2、Dirichlet、Exponential、 FisherSnedecor.Gamma、Geometric、Gumbel、HalfCauchy、HalfNormal.Independent、 Laplace、 LogNormal、LowRankMultivariateNormal、Multinomial、 MultivariateNormalNegativeBinomial、Normal、OneHotCategorical、 Pareto、Poisson、RelaxedBernoulli、RelaxedOneHotCategorical.StudentT、TransformedDistribution、Uniform、 Weibul

Tensor中的随机抽样

  • 定义随机种子
    • torch.manual_seed(seed)
  • 定义随机数满足的分布
    • torch.normal()

Pytorch与线性代数运算

Tensor中的范数运算

范数

  • 在泛函分析中,它定义在赋范线性空间中,并满足一定的条件,即 非负性、齐次性、三角不等式
  • 常被用来度量某个向量空间(或矩阵)中的每个向量的长度或大小

0范数/1范数/2范数/p范数/核范数

  • torch.dist(input, other p=2)计算p范数
  • torch.norm()计算2范数

Tensor中的矩阵分解

常见的矩阵分解

  • LU分解:将矩阵A分解成L(下三角)矩阵和U(上三角)矩阵的乘积
  • QR分解:将原矩阵分解成一个正交矩阵Q和一个上三角矩阵R的乘积
  • EVD分解:特征值分解
  • SVD分解:奇异值分解

特征值分解

  • 将矩阵分解为由其特征值和特征向量表示的矩阵之积的方法
  • 特征值 VS 特征向量


PCA与特征值分解

  • PCA:将n维特征映射到k维上,这k维是全新的正交特征也被称为主成分,是在原有n维特征的基础上重新构造出来的k维特征
  • PCA算法的优化目标就是
    • 降维后同一纬度的方差最大
    • 不同维度之间的相关性为0
    • 协方差矩阵

奇异值分解

LDA与奇异值分解


EVD分解 VS SVD分解

  • 矩阵方阵且满秩(可对角化)
  • 矩阵分解不等于特征降维度
  • 协方差矩阵描述方差和相关性

Pytorch中的奇异值分解

  • torch.svd()
相关推荐
向成科技5 分钟前
XC3588N工控主板助力电力巡检机器人
人工智能·rk3588·安卓·硬件·工控主板·主板
taxunjishu6 分钟前
DeviceNet 转 EtherCAT:发那科焊接机器人与倍福 CX5140 在汽车焊装线的高速数据同步通讯配置案例
人工智能·区块链·工业物联网·工业自动化·总线协议
sali-tec16 分钟前
C# 基于halcon的视觉工作流-章33-矩状测量
开发语言·人工智能·算法·计算机视觉·c#
格林威32 分钟前
短波红外相机在机器视觉检测方向的应用
运维·人工智能·深度学习·数码相机·计算机视觉·视觉检测
这儿有一堆花1 小时前
DeepSeek-VL 解析:混合视觉-语言模型如何超越传统计算机视觉方法
人工智能·计算机视觉·语言模型
九年义务漏网鲨鱼1 小时前
【Debug日志 | DDP 下 BatchNorm 统计失真】
pytorch
model20051 小时前
ubuntu24.04+5070ti训练yolo模型(2)
人工智能·yolo
CV-杨帆1 小时前
论文阅读:openai 2025 Why Language Models Hallucinate
论文阅读·人工智能·语言模型
javastart2 小时前
OpenRLHF:面向超大语言模型的高性能RLHF训练框架
人工智能·自然语言处理·aigc
IT_陈寒2 小时前
《Java 21新特性实战:5个必学的性能优化技巧让你的应用快30%》
前端·人工智能·后端