MHSSMamba:高光谱图像分类的多头空间光谱Mamba

Multi-head Spatial-Spectral Mamba for Hyperspectral Image Classification

2408.01224 (arxiv.org)

MHSSMamba提出了一种名为多头空间光谱Mamba的方法,用于高光谱图像分类。该方法通过增强光谱标记和应用多头自注意力机制来捕获复杂的光谱带与空间位置之间的关系,从而在高光谱图像分类任务中表现出色。相较于传统的Mamba模型,该方法不仅提升了计算效率并捕获了长距离依赖关系,还能处理HSI中丰富的光谱信息以及高维和序列数据。此外,MHSSMamba还保留了跨光谱带的上下文信息,并有效地管理长距离依赖关系和HSI数据的序列性。在帕维亚大学、休斯顿大学、萨利纳斯和武汉龙口数据集上进行实验验证时,MHSSMamba展现出优秀的分类准确率分别为97.62%、96.92%、96.85% 和 99.49%。

核心方法:Multi-Head Self-attention + Mamba

个人评价:感觉怪怪的,Mamba本身就是解决self-attention的问题,为什么要两个串联使用?

相关推荐
大模型任我行3 小时前
阿里:揭示RLVR训练不稳定性根源
人工智能·语言模型·自然语言处理·论文笔记
沃达德软件8 小时前
视频增强技术解析
人工智能·目标检测·机器学习·计算机视觉·超分辨率重建
魔乐社区8 小时前
GLM-5上线魔乐社区,基于昇腾的模型推理+训练部署教程请查收!
人工智能·开源·大模型
geneculture8 小时前
化繁为简且以简驭繁:唯文论英汉对照哲学术语49个主义/论
人工智能·融智学的重要应用·哲学与科学统一性·信息融智学·融智时代(杂志)
睡醒了叭9 小时前
coze-工作流-http请求
人工智能·aigc
twilight_4699 小时前
机器学习与模式识别——机器学习中的搜索算法
人工智能·python·机器学习
冰西瓜6009 小时前
深度学习的数学原理(十)—— 权重如何自发分工
人工智能·深度学习·计算机视觉
niuniudengdeng9 小时前
基于时序上下文编码的端到端无文本依赖语音分词模型
人工智能·数学·算法·概率论
Soonyang Zhang10 小时前
flashinfer attention kernel分析
人工智能·算子·推理框架
林籁泉韵711 小时前
2026年GEO服务商推荐:覆盖多场景适配,助力企业AI时代增长
人工智能