论文笔记:Frozen Language Model Helps ECG Zero-Shot Learning

2023 MIDL

1 intro

  • 心电图(ECG)被广泛应用于检测各种心脏疾病,包括心律失常、心脏病发作和心力衰竭等
  • 近些年深度学习方法在心电图数据分类领域取得了不错的效果。
    • 基于深度学习的ECG数据分类方法,通常以监督学习范式进行训练,需要大量的高质量标记数据
  • 一些特殊形式的心电图数据往往难以获得准确的数据标签,需要受过专业培训的心脏病专家对心电图进行手动解释,耗费大量时间及成本
    • ------>部分研究采用自监督预训练+微调的范式来对ECG数据进行分类
    • 相比于基于监督学习方法,这类方法能够更灵活地适配异常检测、心律失常分类等下游任务
    • 但仍然需要一定量的与下游任务相关的标记样本来对模型进行微调
  • 上述两种范式并不能实现零样本学习任务,即模型能够识别训练或微调数据中并没有见过的类别
    • 现有的零样本学习方法通过从已知类别样本中学习共享特征,然后基于未见类别特征的"描述"将共享特征推广到未见类别样本上来实现分类
    • 对于ECG数据,未见类别的"描述"可以借用外部医学领域知识,例如文本形式的心电图报告
    • ------>论文利用临床报告来引导ECG数据的预训练,实现ECG数据的零样本学习

2 方法

训练时候的文本:

测试阶段的文本:

相关推荐
不开大的凯20773 小时前
超级更新月的“硬菜“:模型、硬件与应用全面进入爆发期
人工智能·dubbo·文心一言
青松@FasterAI3 小时前
【动手学大语言模型】神经网络启蒙:PyTorch 入门实战
人工智能·pytorch·神经网络·大模型开发
Paraverse_徐志斌3 小时前
【AI Agent】常用架构模式:ReAct、Plan-and-Execute、Reflection
人工智能·ai·架构·llm·agent·react
零壹AI实验室3 小时前
DeepSeek本地部署:从零开始,把大模型跑在自己电脑上
服务器·网络·人工智能·电脑
咚咚王者3 小时前
人工智能之RAG工程 第七章 RAG 前沿技术与未来趋势
人工智能
Agent手记3 小时前
物流对账全流程自动化,落地实操与财务打通方案:基于LLM+智能体驱动的业财一体化实践
运维·人工智能·ai·自动化
HIT_Weston3 小时前
79、【Agent】【OpenCode】bash 工具提示词(路径安全)
人工智能·agent·opencode
Joseph Cooper3 小时前
AI Agent 记忆系统深度调研 2026:从基础原理到企业级方案
人工智能·长期记忆
代码AI弗森3 小时前
GGUF、GPTQ、AWQ、EXL2、MLX、VMLX...运行大模型,为什么会有这么多格式?
人工智能
团象科技3 小时前
跨境合规压力加剧,海外云风控筑牢 AI 出海安全底座
大数据·人工智能