技术栈

LN和BN

HRU_39122024-01-05 11:06

假设batch为2,(2,3,256,256)这样的样本

LN比较直观就是在每个独立的样本上计算均值和方差,然后归一化。(2,3,256,256)

归一化是将数据放缩到[0,1]或[-1,1]这样的区间内,标准化是让数据符合特定均值和方差的分布。

BN是按照一个batch中所有样本的通道计算均值和方差,它的计算单位是所有蓝色通道,所有黄色通道,所有红色通道。(2,3,256,256)

上一篇:前端中级算法题
下一篇:Text-to-SQL小白入门(十一)DAIL-SQL教你刷Spider榜单第一
相关推荐
洛水水
3 小时前
【力扣100题】18.随机链表的复制
算法·leetcode·链表
南宫萧幕
3 小时前
规则基 EMS 仿真实战:SOC 区间划分与 Simulink 闭环建模全解
算法·matlab·控制
多加点辣也没关系
3 小时前
数据结构与算法|第二十三章:高级数据结构
数据结构·算法
hoiii187
6 小时前
孤立森林 (Isolation Forest) 快速异常检测系统
算法
c++之路
7 小时前
适配器模式(Adapter Pattern)
java·算法·适配器模式
吴声子夜歌
7 小时前
Java——接口的细节
java·开发语言·算法
myheartgo-on
7 小时前
Java—方 法
java·开发语言·算法·青少年编程
宝贝儿好
8 小时前
【LLM】第三章:项目实操案例:智能输入法项目
人工智能·python·深度学习·算法·机器人
雪碧聊技术
9 小时前
上午题_算法
算法·软考·软件设计师
热门推荐
01GitHub 镜像站点02Codex 接入 DeepSeek API 完整配置文档03CC-Switch & Claude 基于 Linux 服务器安装使用指南04零基础教你claude code 接入 deepseek V405【AI】2026 年具身智能模型和世界模型总结06Windows端Codex接入第三方模型(DeekSeek,BaiLian)07Cursor 接入 DeepSeek‑V4‑Pro 完整指南(2026 实测)08要裂开了!ChatGPT要手机号验证了?注册Codex要求验证电话号码怎么办?2026年登陆Codex要手机号验证的解决办法09codex app每次打开重连5次Reconnecting问题解决10裂开!ChatGPT 居然开始要手机号验证,附详细解决方法