PointNet++点云处理原理

PointNet++点云处理原理

借鉴了多层神经网络的思想

pointnet要么是一个点,要么是所有点进行操作,就不会有局部上下文信息

pointnet++基本思想是迭代地应用到局部区域

1.多级别特征学习

2.旋转不变性

3.置换不变性

选取中心点centroid,通过pointnet学到这个小区域的全局特征

sampling采样:选取centroid (sample centroids)

grouping分组:以centroid为中心,选取局部的点 (group points by centroids)

PointNet:对分组内的点应用pointnet进行特征的学习 (apply PointNet on each point group)

以上过程加起来称作Set Abstraction

PointNet++层次化特征学习的架构

经过两个set abstraction 得到全局特征

分割用到了interpolate(插值),再进行拼接,拼接后再使用pointnet对每一个点进行分类,有点像图像中的encoder+decoder的结构

在PointNet++中,"interpolate"(插值)是一个关键的操作,尤其在它的特征传播(feature propagation)阶段中扮演着重要的角色。

PointNet++采用的插值方法主要用于特征传播阶段,以实现多尺度特征的融合和细节的恢复。在对点云进行分层采样和分组操作后,网络需要在解码阶段将低维度的特征映射回高维度的空间。这一过程中,插值方法就被用来估计非采样点的特征。

具体来说,PointNet++中的插值方法通常指的是最近邻插值或三线性插值:

  • 最近邻插值(Nearest Neighbor Interpolation):这种方法将某一点的特征值设置为其最近邻点的特征值。它简单且计算成本低,但可能不够平滑。
  • 三线性插值(Trilinear Interpolation):在三维空间中,这种方法基于周围点的特征值通过线性插值计算目标点的特征值,能够生成更平滑的特征映射。然而,点云数据的离散性质意味着这种方法需要适当的调整或替代方案。

实际中,PointNet++常用的是一种加权平均插值方法,其中权重基于点之间的空间距离。例如,在特征传播阶段,可以通过寻找每个上采样点在原始点云中的k个最近邻点,然后基于这些邻点的特征和它们与上采样点的距离,通过加权平均来估计上采样点的特征。

这种插值方法使得PointNet++能够有效地处理不同尺度的点云数据,同时保留更多的空间结构信息,提高了对复杂场景的识别和分类精度。

非均匀采样的密度

小卷积核会受到可变密度的影响,对点云来说,用小的kernel效果不一定好

MSG:同一区域拼接不同半径区域的特征,处理复杂度较高

MRG:不同级别的特征进行拼接

分类结果

分割结果

相关推荐
2403_87573687几秒前
道品科技智慧农业中的自动气象检测站
网络·人工智能·智慧城市
学术头条24 分钟前
AI 的「phone use」竟是这样练成的,清华、智谱团队发布 AutoGLM 技术报告
人工智能·科技·深度学习·语言模型
准橙考典25 分钟前
怎么能更好的通过驾考呢?
人工智能·笔记·自动驾驶·汽车·学习方法
ai_xiaogui28 分钟前
AIStarter教程:快速学会卸载AI项目【AI项目管理平台】
人工智能·ai作画·语音识别·ai写作·ai软件
孙同学要努力33 分钟前
《深度学习》——深度学习基础知识(全连接神经网络)
人工智能·深度学习·神经网络
喵~来学编程啦1 小时前
【论文精读】LPT: Long-tailed prompt tuning for image classification
人工智能·深度学习·机器学习·计算机视觉·论文笔记
深圳市青牛科技实业有限公司1 小时前
【青牛科技】应用方案|D2587A高压大电流DC-DC
人工智能·科技·单片机·嵌入式硬件·机器人·安防监控
水豚AI课代表2 小时前
分析报告、调研报告、工作方案等的提示词
大数据·人工智能·学习·chatgpt·aigc
几两春秋梦_2 小时前
符号回归概念
人工智能·数据挖掘·回归
用户691581141653 小时前
Ascend Extension for PyTorch的源码解析
人工智能