多分类loss学习记录

这里简单的记录在人脸识别/声纹识别中常用的分类loss。详细原理可以参考其他博客。
扩展资料1
扩展资料2

  • L-softmax A-softmax AM-softmax

    L-softmax :基于softmax加入了margin, Wx 改写为||w|| ||x||cos(角度),将角度变为了m 角度

    A-softmax :a=Angular,归一化||w||为1,b=0,W*x 变成了cos(theta),只优化角度

    AM-softmax : 将A-softmax中的角度乘法,改为了cos角度之后做减法,好像实现等于CosFace,只不过分析角度不同

  • ArcFace CosFace SphereFace

    arcface sphereface cosface都在上面的基础上添加了margin,但是margin添加的位置不同;

    arcface直接作用于角度加法,使得类内角度尽量小;

    sphere直接作用于角度乘法,使得类内角度尽量小;

    cosface直接作用于cos角度计算之后,做减法,使得(cos角度)越大越好;

相关推荐
自然语1 分钟前
基于场景、需求、方法匹配和学习评价的垂直移动任务控制系统
学习
旅僧38 分钟前
Π0 理论讲解更新中
学习
知南x1 小时前
【DPDK例程学习】(3) timer
学习
「維他檸檬茶」2 小时前
大模型算法学习2026.6.13
学习·算法
dog2502 小时前
信号权重和流分类的对数规律
人工智能·分类·数据挖掘
代码续发2 小时前
AI Agent的学习记录
学习
现代野蛮人3 小时前
【深度学习】 —— 几种优化器对比实验
人工智能·深度学习·分类·tensorflow
ken22323 小时前
文本编辑器默认字体 收集
学习
H__Rick3 小时前
C51学习-DAY6
单片机·嵌入式硬件·学习
YM52e3 小时前
手写模型集合书籍鸿蒙PC ArkTS 对象字面量类型问题约束深度解析
学习·华为·harmonyos·鸿蒙