更好的 3D 网格,从重建到生成 AI

这篇文章最初发表在 NVIDIA 技术博客上。

下一代人工智能管道在生成高保真 3D 模型方面取得了令人难以置信的成功,从生成与给定图像匹配的场景的重建,到生成交互式体验资产的生成人工智能管道。

这些生成的三维模型通常被提取为标准三角形网格。网格表示提供了许多好处,包括支持现有软件包、高级硬件加速和支持物理模拟。然而,并非所有网格都是相等的,这些好处只有在高质量的网格上才能实现。

NVIDIA 最近的研究发现了一种名为 FlexiCubes 的新方法,用于在 3D 管道中生成高质量网格,从而在一系列应用中提高质量。

FlexiCubes 网格生成

图 1。FlexiCube 重建的网格示例s

从重建到模拟,人工智能管道的共同组成部分是通过优化过程生成网格。在过程的每一步,表示都会更新,以更好地匹配所需的输出。

FlexiCubes 网格生成的新思想是引入额外的、灵活的参数来精确调整生成的网格。通过在优化过程中更新这些参数,大大提高了网格质量。

熟悉基于网格的管道的人过去可能使用行进立方体来提取网格。FlexiCubes 可以作为基于优化的 AI 管道中行进立方体的替代品。

图 2:FlexiCubes 高品质网眼布

FlexiCubes 通过摄影测量和生成 AI 等神经工作流生成高质量网格。

更好的网格,更好的 AI

FlexiCubes 网格提取改进了许多最近的 3D 网格生成管道的结果,生成了更高质量的网格,可以更好地表示复杂形状中的精细细节。

生成的网格也非常适合物理模拟,其中网格质量对于使模拟高效和稳健尤为重要。四面体网格已准备好用于开箱即用的物理模拟。

图 3。FlexiCubes 四面体网格示例

立即浏览 FlexiCubes

这项研究是 NVIDIA 在洛杉矶 SIGGRAPH 2023 上取得的一部分进展。想要了解更多关于新方法的信息,请参阅 Flexible Isosurface Extraction for Gradient-Based Mesh Optimization。您也可以在 FlexiCubes 项目页面上探索更多结果。

阅读原文

相关推荐
mortimer4 天前
在 Windows 上部署 NVIDIA Parakeet-TDT 遇到的坑
python·github·nvidia
扫地的小何尚4 天前
Isaac Lab 2.3深度解析:全身控制与增强遥操作如何重塑机器人学习
arm开发·人工智能·学习·自然语言处理·机器人·gpu·nvidia
攻城狮7号12 天前
NVIDIA开源Audio2Face模型与SDK,数字人表情迎来“灵魂”时刻
人工智能·nvidia·开源模型·audio2face
Jzzzzzzzzzzzzzz13 天前
NVIDIA-SMI has failed because it couldn‘t communicate with the NVIDIA driver.
ubuntu·nvidia·显卡驱动
深度学习机器16 天前
解密vLLM:基于nano-vllm源码剖析其推理加速之道
pytorch·llm·nvidia
扫地的小何尚16 天前
NVIDIA Dynamo深度解析:如何优雅地解决LLM推理中的KV缓存瓶颈
开发语言·人工智能·深度学习·机器学习·缓存·llm·nvidia
扫地的小何尚17 天前
CUDA 13.0深度解析:统一ARM生态、UVM增强与GPU共享的革命
arm开发·人工智能·自然语言处理·gpu·nvidia·jetson·nvidia thro
扫地的小何尚19 天前
R²D²深度解析:NVIDIA三大神经网络突破如何变革机器人学习
神经网络·r语言·机器人·llm·gpu·nvidia
扫地的小何尚20 天前
深度解析 CUDA-QX 0.4 加速 QEC 与求解器库
人工智能·语言模型·llm·gpu·量子计算·nvidia·cuda
阿里云大数据AI技术22 天前
阿里云 PAI 携手 NVIDIA 提供端到端物理 AI 解决方案
人工智能·nvidia