特征解耦

nap-joker14 天前
人工智能·特征解耦·婴儿年龄预测·vae-based
解耦多模态对抗自编码器:在不完全多模态神经图像下婴儿年龄预测中的应用得益于不同成像方式提供的互补信息,结构磁共振成像(sMRI)和功能性磁共振成像(fMRI)数据的有效融合,有望提高婴儿年龄预测的准确性。然而,与sMRI的形态特征相比,婴儿期fMRI测量的功能连接性较为不成熟且噪声较大,因此用于婴儿脑部分析的sMRI和fMRI融合极具挑战性。在传统的多模融合策略中,添加fMRI数据用于年龄预测的风险较高,会产生更多噪声而非有用特征,导致准确性低于单纯使用sMRI数据。为解决这一问题,我们开发了一个新模型,称为解缠多模对抗自编码器(DMM-AAE),基于多模脑MRI进行婴儿
nap-joker5 个月前
知识蒸馏·特征解耦·教师模型-学生模型·多模态抑郁症识别·特征正交性分析·不完整多模态数据
解纠缠-多模态特权知识提取在不完全多模态数据下的抑郁症识别提出融合特征解耦与特权知识蒸馏的框架(Dis2DR) 针对多模态抑郁症识别中模态缺失或降质问题,设计了一个通用框架,同时利用特征解耦和特权知识蒸馏来提高识别鲁棒性。
nap-joker7 个月前
学习·多模态融合·最优传输·多模态表征学习·特征解耦·音频+图像+文本·原型引导
【多模态解耦】DecAlign:用于解耦多模态表示学习的分层跨模态对齐1、多模态解耦,提出了一种新型原型引导的最优运输对比策略,利用高斯混合模型和多边际运输,缓解了模态独特特征的分布差异。同时,通过将潜在分布匹配和最大平均差异正则化对齐,增强了各个模态之间的语义一致性。此外,采用了多模态Transformer以增强高级语义特征融合,进一步减少跨模态不一致。
我是有底线的