【北邮鲁鹏老师计算机视觉课程笔记】09 Segmentation 分割

【北邮鲁鹏老师计算机视觉课程笔记】09 Segmentation 分割

1 过分割与欠分割

找一个合适的分割方法

过分割:分割得太细

自底向上的方法

无监督的

自底向上:基于像素的

自顶向下:从语义的角度

2 人是如何感知世界的

人会感觉下面的线比上面的线长

人的感知:先感知部件,然后理解组合后的整体语义

3 分割思路

临近的、颜色相似的、形状相似的、同向的、平行的、对称的、连续的、封闭的

电梯上的楼层按键

4 把分割建模成聚类任务

将像素点投影到RGB三维空间

k-means聚类

中图:基于灰度的聚类

右图:基于RGB图的聚类

缺陷:不能区分实例

5 语义分割、实例分割

实例分割:不仅要知道是辣椒类、而且要知道是哪个辣椒上的

实例的最大差异在空间上

6 k-means算法


在特征空间中寻找密集的中心


统计区域内所有点的重心

把蓝色框移动到重心上,均值漂移

一致的时候漂移结束



6 mean-shift clustering


确定有多少个密度中心

不需要假定球形聚类

维度灾难、高维空间计算困难

7 基于图的分割

分割的目标就是删除连接的边

删除相似度小的边

删除的边的相似度之和最小

定义相似性



8 归一化的图分割


w ( A , B ) w(A,B) w(A,B)是 A 、 B A、B A、B集合的全部联系权重,最小分割是希望 w ( A , B ) w(A,B) w(A,B),但是容易要么分割A,要么分割B

避免分割得过小,不鼓励只有一条边的情况
w ( A , B ) w ( A , V ) \frac{w(A,B)}{w(A,V)} w(A,V)w(A,B)
w ( A , V ) w(A,V) w(A,V)是A与其他全部顶点的连接,A的像素越多,这个值就越大,分数就越小。如果只把A或者B切割成一个像素,那么 w ( A , V ) w(A,V) w(A,V)或者 w ( A , B ) w(A,B) w(A,B)就会很小,分数就变大,这不是预期的

W是相似度矩阵,是一个对称矩阵

D是一个对角阵,第i个位置表示W第i列的和

相关推荐
Zzj_tju几秒前
CLIP 图文对齐:先核对正样本,再相信检索分数
人工智能·深度学习·语言模型·自然语言处理
ChenDestiny几秒前
AI Agent学习(5.6):RAG进阶(一)从Naive到Agentic的演进地图
人工智能
江湖人称菠萝包14 分钟前
【Windows】《深入浅出Windows API程序设计:核心编程篇》笔记-Chapter4-进程
windows·笔记
千里码aicood16 分钟前
基于深度学习的驾驶员分心驾驶行为识别研究
人工智能·深度学习
大模型真好玩22 分钟前
DeepSeek Harness 入门很简单(四)——DeepSeek Harness接入插件
人工智能·agent·deepseek
程序员cxuan41 分钟前
GPT-6 Astra 的提示词泄露了,里面居然藏着个保安?
人工智能·后端·程序员
悬木1 小时前
从单体到 AI 搜索:一个电商搜索系统的进化
人工智能
码海无涯回头无岸1 小时前
多轮对话:messages是Agent的记忆
人工智能
m4Rk_1 小时前
【论文阅读】Agent 记忆机制(69):STITCH——用上下文意图解决“语义相关但情境错误”的记忆检索
论文阅读·人工智能·学习·开源·github
zhikouai1 小时前
删掉提示词之后,AI的表现反而更好
人工智能