【动手学深度学习】06 矩阵计算(个人向笔记)

标量导数

这个比较简单,就是直接求导

亚导数

举了两个例子

梯度

  • 下面是当 y 和 x 分别为向量和标量时求导的结果。一个为向量,一个为标量则结果为向量。两个都为向量结果为矩阵,两个都为标量结果为标量
  • 当 y 为标量,x 为列向量时 ,结果为一个行向量,其计算结果相当于求偏导,具体看例子(吐槽一下沐神课上时真没听懂,不过一问gpt就懂了)


  • 当 y 为向量,x 为标量时, 那么对于每一个 y 中的元素都对 x 求导即可,结果是一个列向量
    - 当 x 和 y 都为向量时 ,那么我们把 y 中的每一个元素看作一个标量,然后对每一个 y 中的元素执行对向量 x 求导数,然后把结果的行向量都排在一起构成了矩阵
  • 维度更多的情况,最终的维度其实就是把两者的维度加起来
相关推荐
卡布叻_星星4 小时前
Vue 生态演进指南:主流框架搭配以及Vue CLI vs Vite 与 Vue2 vs Vue3 核心区别
笔记
过期的秋刀鱼!5 小时前
人工智能-深度学习-线性回归
人工智能·深度学习
小裕哥略帅5 小时前
PMP学习笔记--环境
笔记·学习
liuaa415 小时前
期刊论文笔记
笔记
IE065 小时前
深度学习系列84:使用kokoros生成tts语音
人工智能·深度学习
HXR_plume5 小时前
【Web信息处理与应用课程笔记3】个性化检索(上)
笔记
IE065 小时前
深度学习系列83:使用outetts
人工智能·深度学习
亚里随笔7 小时前
突破性框架TRAPO:统一监督微调与强化学习的新范式,显著提升大语言模型推理能力
人工智能·深度学习·机器学习·语言模型·llm·rlhf
Cathy Bryant8 小时前
傅里叶变换(一):简介
笔记·算法·数学建模·信息与通信·傅里叶分析
wdfk_prog9 小时前
[Linux]学习笔记系列 -- [fs]fs-writeback
linux·笔记·学习