SPLD论文笔记

SLPD论文笔记

题目:SLPD: Slide-Level Prototypical Distillation for WSIs

摘要

提高特征表示能力是许多全玻片病理图像 (WSI) 任务的基础。最近的工作在病理特异性自我监督学习(SSL)方面取得了巨大成功。然而,它们中的大多数只专注于学习补丁级表示,因此在代理和slide级下游任务之间仍然存在差距,例如子类型、分级和分期。

针对slide级表示,本文提出了

slide级原型蒸馏(SLPD)来探索载玻片内和载玻片间的语义结构,以便在WSI上进行上下文建模。对每个 WSI 中的区域(4096 × 4096 个斑块)进行迭代内聚类,以产生原型并鼓励区域表示更接近指定的原型。

通过用原型表示每张slide,进一步根据原型的设定距离选择相似的slide,并通过交叉slide原型分配区域进行蒸馏。

代码地址:GitHub - Carboxy/SLPD

方法

(a) WSI 具有 WSI-region-patch-image 的层次结构,从粗到细。

(b) 两阶段预训练范式依次执行图像到patch和patch到区域聚合。

(C-E)拟议的SLPD。SLPD 通过幻灯片级聚类来探索语义结构。除了自蒸馏之外,区域表示还与slide内和slide之间的原型相关联,以全面了解 WSI。

其他:

  1. Hierarchical Image Pyramid Transformer(HIPT)预训练模型
  2. slide级聚类"由一组原型抽象出来,这些原型捕获了 WSI 的语义结构
  3. slide间蒸馏:

实验结果


相关推荐
天树星智源4 天前
记忆该记「赔率跳变」:机器人长时程十连任务,事件记忆 88.0%,删掉失败记录只剩 1.7%
论文阅读·人工智能·机器人
XLYcmy5 天前
ASR 识别任务:两篇论文阅读分析与系统方案技术报告 当前报告的建议和改进方向
论文阅读·论文笔记·token·commit·asr·论文分享·tokenizer
XLYcmy6 天前
ASR 识别任务:两篇论文阅读分析与系统方案技术报告 当前报告不足
论文阅读·论文笔记·token·cuda·asr·论文分享·tokenizer
feasibility.7 天前
LeCun团队世界模型JEPA首登无人机:9K参数模型,零样本Sim-to-Real飞入100Hz闭环
论文阅读·嵌入式·无人机·具身智能·世界模型·杨立昆·jpea
XLYcmy7 天前
ASR识别任务两篇论文阅读分析与系统方案技术报告 上
论文阅读·ai·gpu·asr·论文分享·speechbrain·wespeaker
Zucker n8 天前
文献发现、课题组织与证据可追溯的论文阅读。
论文阅读·windows·ubuntu
西柚小萌新8 天前
【论文阅读】--可信LLM智能体的威胁与对策 综述
论文阅读
Rocky Ding*8 天前
【三年面试五年模拟】2026-11-05_月之暗面大模型算法岗一面、二面面经全解析
论文阅读·人工智能·深度学习·机器学习·aigc·强化学习·ai-native
Rocky Ding*10 天前
REPA-E技术深度解析:解冻 VAE 之后,扩散模型为什么需要选择梯度
论文阅读·人工智能·深度学习·机器学习·aigc·ai-native·repa-e
Rocky Ding*11 天前
【三年面试五年模拟】2026-11-01_字节跳动AI Agent全栈研发一面面经全解析
论文阅读·人工智能·深度学习·机器学习·aigc·ai-native·ai agent