【Point Cloud】Point Cloud Fundamentals(1)

文章目录

  • [点云基础(Point Cloud Fundamentals)](#点云基础(Point Cloud Fundamentals))
  • [1、点云数据概述(Point Cloud Data Overview)](#1、点云数据概述(Point Cloud Data Overview))
  • [2、点云应用领域与发展分析(Applications and Development of Point Clouds)](#2、点云应用领域与发展分析(Applications and Development of Point Clouds))
  • [3、点云分割任务(Point Cloud Segmentation)](#3、点云分割任务(Point Cloud Segmentation))
  • [4、点云补全任务(Point Cloud Completion)](#4、点云补全任务(Point Cloud Completion))
  • [5、点云检测与配准任务(Detection and Registration)](#5、点云检测与配准任务(Detection and Registration))
  • [6、点云数据特征提取概述与预告(Feature Extraction for Point Clouds)](#6、点云数据特征提取概述与预告(Feature Extraction for Point Clouds))
  • [补充:点云深度学习发展路线(Evolution of Point Cloud Deep Learning)](#补充:点云深度学习发展路线(Evolution of Point Cloud Deep Learning))
  • 参考

点云基础(Point Cloud Fundamentals)

text 复制代码
点云是什么
        │
        ▼
点云有哪些应用
        │
        ▼
点云有哪些经典任务
(分割、补全、检测、配准)
        │
        ▼
点云如何预处理
        │
        ▼
点云如何提取特征
        │
        ▼
点云深度学习的发展路线
        │
        ▼
PointNet → PointNet++ → DGCNN → KPConv → Point Transformer → Point Foundation Models

1、点云数据概述(Point Cloud Data Overview)

点云(Point Cloud) 是在同一空间参考系下,表达目标空间分布和表面特性的海量数据点集合。

通俗地说,如果把一张普通的 2D 照片看作是平铺在画布上的"像素网格",那么点云就是悬浮在三维空间中的"微小颗粒"。当这些颗粒足够密集时,它们就能在数字世界中重构出真实物体的立体轮廓

点云的数据来源

  • 激光雷达(LiDAR)
  • 双目视觉(Stereo Vision)
  • RGB-D 相机
  • ToF 相机
  • 三维扫描仪

点云特点

  • 无序(Unordered)
  • 稀疏(Sparse)
  • 不规则(Irregular)
  • 高维

近密原疏

飞机1

飞机2

飞机3


2、点云应用领域与发展分析(Applications and Development of Point Clouds)

DEM(Digital Elevation Model,数字高程(海拔)模型) 是一种用数字方式描述地球表面(或其他物体表面)高度信息的数据模型。简单来说,它就是一张带有高度值的三维地形地图。

自动驾驶

  • 激光雷达建图
  • 障碍物检测
  • BEV感知

机器人

  • SLAM
  • 导航
  • 抓取
  • 避障

AR/VR

  • 空间建模
  • 三维重建
  • 工业视觉
  • 三维测量
  • 缺陷检测
  • 尺寸检测

医疗

  • CT
  • MRI
  • 三维重建

数字孪生

  • 城市建模
  • BIM
  • 工厂数字化

点云的发展趋势

  • Neural Rendering
  • Gaussian Splatting
  • NeRF
  • 3D Foundation Model

无人机勘测

工厂建模,安全监测

智慧城市

点云分割,路灯

得到路灯的位置

点云分割公开数据集

点云分割


3、点云分割任务(Point Cloud Segmentation)

这是最重要的基础任务之一。

语义分割(Semantic Segmentation)

text 复制代码
PointNet
PointNet++
RandLA-Net
KPConv

实例分割(Instance Segmentation)

text 复制代码
PointGroup
SoftGroup
Mask3D

全景分割(Panoptic Segmentation)

结合:

text 复制代码
Semantic
Instance

上面一排是点云,下面一排是点云分割结果

相同的东西,用相同的颜色表示

不同的东西,用不同的颜色表示

每个点属于什么类别


4、点云补全任务(Point Cloud Completion)

现实中的点云往往存在

  • 遮挡
  • 漏扫
  • 稀疏

因此需要补全

整理来说类似 GAN 和 Unet 那种感觉(编码解码网络)


5、点云检测与配准任务(Detection and Registration)

点云目标检测(3D Object Detection)

text 复制代码
PointRCNN
PV-RCNN
SECOND
CenterPoint

点云配准(Point Cloud Registration):是指将同一场景或物体,从不同视角、不同时间或不同设备获取的两个或多个点云数据集,对齐到同一个全局坐标系下的过程。

text 复制代码
Deep Closest Point (DCP)
Predator
GeoTransformer

其实传统图像中能做的都可以在点云中实现

分割和检测最热门

配准前

配准后

配准前

配准后


6、点云数据特征提取概述与预告(Feature Extraction for Point Clouds)

点云有哪些特征?

几何特征

  • 法向量(Normal)
  • 曲率(Curvature)
  • 密度(Density)

统计特征

  • FPFH
  • PFH
  • SHOT

学习特征

  • PointNet Feature
  • EdgeConv
  • Transformer Feature

把每个点都转成一个特征

补充:点云深度学习发展路线(Evolution of Point Cloud Deep Learning)

时间 方法 核心思想
2017 PointNet 直接处理无序点集
2017 PointNet++ 引入局部邻域学习
2018 DGCNN 动态图卷积
2019 KPConv 点卷积
2020 RandLA-Net 大规模点云高效学习
2021 Point Transformer Transformer 建模点间关系
2022--2024 PointNeXt、Point-BERT、Point-MAE 大模型与自监督预训练
2025--至今 3D Foundation Models、Vision-Language-3D 多模态与基础模型融合

参考

教学视频连接:https://www.bilibili.com/video/BV1edjczQEcZ?spm_id_from=333.788.videopod.episodes\&vd_source=a2337ee1e48dbaccac1746d36aed6c99\&p=6


相关推荐
jay神1 天前
基于 YOLOv8 的手势识别系统(Web 版)
前端·人工智能·python·深度学习·yolo·计算机视觉·计算机毕业设计
wangxiaoxuan2172 天前
TF2 的原理与使用:把坐标、运动和观测时间一起算清楚
计算机视觉·机器人·科沃斯八界
硅谷秋水2 天前
EgoHumanoid‑V2 方法分析
人工智能·机器学习·计算机视觉·语言模型·机器人
BYSJMG2 天前
计算机毕业设计选题推荐:【基于深度学习的车辆损坏严重程度评估方法研究】ResNet50 图像分类
人工智能·深度学习·目标检测·机器学习·计算机视觉·分类·课程设计
BYSJMG2 天前
计算机毕业设计选题推荐|【基于深度学习的电梯电动车违规进入检测研究】YOLO26m+可视化大屏
人工智能·深度学习·神经网络·目标检测·机器学习·计算机视觉·课程设计
硅谷秋水3 天前
将闲科技(LiberAI)提出世界动作模型Liber-0
机器学习·计算机视觉·语言模型·机器人
ahccqw3 天前
OpenCV 车辆数量统计
人工智能·opencv·计算机视觉
硅谷秋水4 天前
PhysicalWords:一种用于构建机器人操作中潜推理过程的词汇体系
人工智能·机器学习·计算机视觉·语言模型·机器人
.道阻且长.4 天前
AI 按数据模态分类:计算机视觉、NLP、语音处理,一篇理清
人工智能·计算机视觉·分类
末世灯光4 天前
ICML 2026|AURA:用视觉原型理解情感,而不只是预测标签
计算机视觉·情感识别·情感计算