【北邮鲁鹏老师计算机视觉课程笔记】09 Segmentation 分割

【北邮鲁鹏老师计算机视觉课程笔记】09 Segmentation 分割

1 过分割与欠分割

找一个合适的分割方法

过分割:分割得太细

自底向上的方法

无监督的

自底向上:基于像素的

自顶向下:从语义的角度

2 人是如何感知世界的

人会感觉下面的线比上面的线长

人的感知:先感知部件,然后理解组合后的整体语义

3 分割思路

临近的、颜色相似的、形状相似的、同向的、平行的、对称的、连续的、封闭的

电梯上的楼层按键

4 把分割建模成聚类任务

将像素点投影到RGB三维空间

k-means聚类

中图:基于灰度的聚类

右图:基于RGB图的聚类

缺陷:不能区分实例

5 语义分割、实例分割

实例分割:不仅要知道是辣椒类、而且要知道是哪个辣椒上的

实例的最大差异在空间上

6 k-means算法


在特征空间中寻找密集的中心


统计区域内所有点的重心

把蓝色框移动到重心上,均值漂移

一致的时候漂移结束



6 mean-shift clustering


确定有多少个密度中心

不需要假定球形聚类

维度灾难、高维空间计算困难

7 基于图的分割

分割的目标就是删除连接的边

删除相似度小的边

删除的边的相似度之和最小

定义相似性



8 归一化的图分割


w ( A , B ) w(A,B) w(A,B)是 A 、 B A、B A、B集合的全部联系权重,最小分割是希望 w ( A , B ) w(A,B) w(A,B),但是容易要么分割A,要么分割B

避免分割得过小,不鼓励只有一条边的情况
w ( A , B ) w ( A , V ) \frac{w(A,B)}{w(A,V)} w(A,V)w(A,B)
w ( A , V ) w(A,V) w(A,V)是A与其他全部顶点的连接,A的像素越多,这个值就越大,分数就越小。如果只把A或者B切割成一个像素,那么 w ( A , V ) w(A,V) w(A,V)或者 w ( A , B ) w(A,B) w(A,B)就会很小,分数就变大,这不是预期的

W是相似度矩阵,是一个对称矩阵

D是一个对角阵,第i个位置表示W第i列的和

相关推荐
灰灰勇闯IT几秒前
领域制胜——CANN 领域加速库(ascend-transformer-boost)的场景化优化
人工智能·深度学习·transformer
灰灰勇闯IT2 分钟前
从零到一——CANN 社区与 cann-recipes-infer 实践样例的启示
人工智能
小白狮ww5 分钟前
要给 OCR 装个脑子吗?DeepSeek-OCR 2 让文档不再只是扫描
人工智能·深度学习·机器学习·ocr·cpu·gpu·deepseek
lili-felicity7 分钟前
CANN优化LLaMA大语言模型推理:KV-Cache与FlashAttention深度实践
人工智能·语言模型·llama
程序猿追9 分钟前
深度解码昇腾 AI 算力引擎:CANN Runtime 核心架构与技术演进
人工智能·架构
金融RPA机器人丨实在智能9 分钟前
Android Studio开发App项目进入AI深水区:实在智能Agent引领无代码交互革命
android·人工智能·ai·android studio
lili-felicity13 分钟前
CANN异步推理实战:从Stream管理到流水线优化
大数据·人工智能
做人不要太理性13 分钟前
CANN Runtime 运行时组件深度解析:任务下沉执行、异构内存规划与全栈维测诊断机制
人工智能·神经网络·魔珐星云
不爱学英文的码字机器13 分钟前
破壁者:CANN ops-nn 仓库与昇腾 AI 算子优化的工程哲学
人工智能
晚霞的不甘16 分钟前
CANN 编译器深度解析:TBE 自定义算子开发实战
人工智能·架构·开源·音视频