腾讯混元3D团队开源 P3-SAM: 原生3D零件分割

将3D资产分割为其组成部分对于增强三维理解、促进模型复用以及支持部件生成等应用至关重要。然而,现有方法在处理复杂物体时存在鲁棒性不足等问题,且无法实现全自动化流程。本文提出了一种原生3D点提示部件分割模型P3-SAM,旨在实现任意三维物体的全自动组件分割。受SAM启发,P3-SAM由特征提取器、多重分割头和IoU预测器组成,支持用户交互式分割。我们还提出了一种算法来自动筛选并合并模型预测的掩膜,实现部件实例分割。该模型在我们新建的包含370万个带合理分割标签模型的数据集上进行训练。对比实验表明,本方法能在任意复杂物体上实现精确分割结果和强大鲁棒性,达到了当前最优性能。

方法


P3-SAM的网络架构:输入点云被送入特征提取器以获取逐点特征。这些特征、点提示以及原始点云随后被输入到一个两阶段多掩模分割器中,生成不同尺度的三个掩模。最后,利用IoU预测器评估掩模质量,并选择最佳掩模作为最终预测结果。


自动分割流程:通过FPS采样点提示,输入P3-SAM模型获取多个掩码,随后采用非极大值抑制(NMS)合并冗余掩码。最后将点级掩码投影到网格面上,得到部件分割结果。

https://murcherful.github.io/P3-SAM/

相关推荐
雪花desu5 分钟前
深度解析RAG(检索增强生成)技术
人工智能·深度学习·语言模型·chatgpt·langchain
咚咚王者29 分钟前
人工智能之数学基础 离散数学:第四章 离散概率
人工智能
MrBread29 分钟前
突破限制:vue-plugin-hiprint 富文本支持深度解析与解决方案
前端·开源
阿标在干嘛33 分钟前
科力辰平台:作为一个科技查新平台,其核心能力边界在哪里?
人工智能·科技
徽44038 分钟前
农田植被目标检测数据标注与模型训练总结3
人工智能·目标检测·目标跟踪
冒泡的肥皂39 分钟前
25年AI我得DEMO老师
人工智能·后端
骑猪兜风23342 分钟前
软件工程大师 Martin Fowler 谈 AI 与软件工程的变迁
人工智能·软件工程·ai编程
serve the people43 分钟前
Agent 基于大模型接口实现用户意图识别:完整流程与实操
大数据·人工智能·agent
云计算小黄同学43 分钟前
软件工程/SRE 专家:AI 胜任力进阶路线图
人工智能·软件工程
咬人喵喵1 小时前
文生图:AI 是怎么把文字变成画的?
人工智能·编辑器·svg