小样本分割的新视角,Learning What Not to Segment【CVPR 2022】

论文地址:Excellent-Paper-For-Daily-Reading/image-segmentation at main

类别:图像分割

时间:2023/11/01

摘要

目前背景:少样本分割 (FSS) 得到了广泛的发展。以前的大多数工作都在努力通过分类任务衍生的元学习框架来实现泛化。

存在问题:但受过训练的模型偏向于预测可见类,从而阻碍了对新范式的认识。

论文贡献:本文提出了一个新鲜而直接的见解,以缓解此类问题。具体而言,将额外分支(基础学习器)应用于常规FSS模型(元学习器),以明确识别基类的目标,即不需要细分的区域。然后,将这两个学习器的粗略结果进行了自适应整合,以产生精确的分割预测。考虑到元学习器的灵敏度,进一步引入了一个调整因素,以估计输入图像对之间的场景差异,以促进模型集合预测。

实验效果:在数据集Pascal-5i和COCO-20i上的显著性能提升验证了效果。此外,鉴于提出的方法的独特性质,还将其扩展到更现实但具有挑战性的环境,即广义FSS。

代码已开源:

chunbolang/BAM:Learning What Not to Segment: A New Perspective on Few-Shot Segmentation

实验

左边的面板来自PASCAL-5,右边的面板来自COCO-20

基线方法为上图第三行,BAM的效果为上图第四行,经过比对可以发现基线方法错误分割的的目标被显著的抑制了。这里表明了研究工作的正确性。

总结

在原先的元学习框架中,是对大量的标注样本的基数据集上进行的元训练,其更加偏向于原先学习的类别,这阻碍了对于新概念的理解。论文方案的核心思想是利用基础学习器来识别查询图像中的可混淆(基)区域,并进一步细化元学习器的预测。令人惊讶的是,即使使用两个简单的学习器,我们的方案也设定了FSS基准的最新水平。此外,我们将当前的任务扩展到更具挑战性的广义设置,并产生了强有力的基线结果。

相关推荐
武子康1 分钟前
多 Agent 不是多开几个终端:Pi 的 Sub-agent 取舍
人工智能·llm·agent
leoZ2315 分钟前
10-Git 仓库蒸馏术:从代码仓库到 OpenClaw 虚拟人-蒸馏工具链
大数据·git·深度学习·神经网络·目标检测·elasticsearch·lstm
俊哥V7 分钟前
每日 AI 研究简报 · 2026-08-22
人工智能·ai
龙虾PRO12 分钟前
数据中台 + AI 落地:2026 五大趋势与零售出海完整实操案例
人工智能·零售
wish36617 分钟前
K8S 免镜像部署:通过 API 上传文件动态创建服务(以 Ollama 为例)
人工智能·云原生·容器·kubernetes·local llm
AI导出鸭PC端22 分钟前
文心怎样生成word文档?一键智能排版,AI导出鸭解决格式错乱痛点
人工智能·ai·word·豆包·deepseek·ai导出鸭
深小乐24 分钟前
DeepSeek Harness 发布一周,登顶 Top10 的插件,暴露了哪些真实需求?
人工智能
奈斯先生Vector32 分钟前
OpenScience 安装失败怎么办?Windows 环境、API 配置与本地服务排错指南
人工智能·windows·架构·开源·aigc·midjourney
武子康33 分钟前
Email Thread 不是 Agent Session:生产级异步通信网关的状态、幂等与审批合同
人工智能·llm·agent
AIDANHANG35 分钟前
放开长期挂着开关前先核到期日默认安全值与残留分支
人工智能