只需0.5秒 Stability AI新模型超快生成3D图像

生成式人工智能(AI)明星初创公司Stability AI 8月发布最新突破性3D模型Stable Fast 3D,将单张图片生成3D图像的速度大幅提升。Stability AI今年3月发布的3D模型SV3D需要多达10分钟生成3D资产,基于TripoSR的新模型Stable Fast 3D完成同样的任务只需0.5秒,现已可以在Hugging Face上使用。

Stability AI介绍,Stable Fast 3D只需 0.5 秒即可将单个输入图像转换为详细的 3D 资产,认为该创新模型为三维重建领域的速度和质量树立了新的标杆。它能迅速生成完整的3D资产,包括UV拆分网络、材料参数和降低光照烘焙的反照率颜色,而且用户可选四边形或三角形重新网格化,处理时间仅会增加100到200毫秒。

Stable Fast 3D问世代表Stability AI在缩短AI模型处理时间方面实现重大飞跃。

今年3月Stability AI发布了3D模型Stable Video 3D (SV3D),它在Stable Video Diffusion的基础上进行改进,只需一张图就能生成对应的3D模型,适用于新视角合成任务和3D生成的任务。SV3D需要多达10分钟生成3D资产,而Stable Fast 3D完成同样的任务只需0.5秒,将速度提高了1200倍。

Stability AI发布Stale Fast 3D时特别提到,该模型在几个关键领域超越竞争对手,其中之一是:在7GB显卡内存VRAM的GPU 上,每次生成3D资产只需 0.5 秒,而在Stability AI API 上需要将近一秒。此外,该模型具有高质量的UV拆分网络和材料参数,能减少纹理中的纠缠照明,并能生成附加材质参数和法线贴图。


Stability AI称,Stable Fast 3D基于该公司和Tripo AI合作开发的模型TripoSR,可显著改进架构并强化功能。该模型适用于 游戏和虚拟现实(VR)开发者,以及零售、建筑、设计和其他图形密集型行业的专业人士。在游戏和电影制作中有多种用例:

  • 在实验是关键的预制作期间,用该模型实现快速推理。

  • 游戏的静态资产(背景物体、杂物、家具)

  • 电子商务的 3D 模型

  • 增强显示(AR)/VR 的快速模型创建。

目前,Stable Fast 3D可通过Stability AI 的聊天机器人Stable Assistant 和 Stability AI API 使用。用户可以在AI开源社区Hugging Face上使用该模型,Stability AI基于免费用于研究、非商业和商业用途的Stability AI 社区许可而发布。

Stability AI官宣推出Stable Fast 3D后,社交媒体的网友迅速回帖回应,有网友问,该模型生成的UV网络有多清晰,有多少个多边形。有网友称,喜欢Stability AI在发布模型时附上的那个动图,它展示了机器吐出通用的AI 图像模型,并将它们直接扔进垃圾桶。有网友问,可不可以把生成的3D成果打印出来。



有评论称,目前,3D 世界的内容创作是一个瓶颈。我们不想花钱请人手工制作元宇宙。自动生成资产应该是默认的,就像在现实世界中一样。 Stability AI 的新模型是朝着正确方向迈出的一大步。

相关推荐
一个处女座的程序猿7 分钟前
LLMs之SLMs:《Small Language Models are the Future of Agentic AI》的翻译与解读
人工智能·自然语言处理·小语言模型·slms
档案宝档案管理3 小时前
档案宝:企业合同档案管理的“安全保险箱”与“效率加速器”
大数据·数据库·人工智能·安全·档案·档案管理
IT_Beijing_BIT4 小时前
TensorFlow Keras
人工智能·tensorflow·keras
mit6.8244 小时前
[手机AI开发sdk] 安卓上的Linux环境
人工智能·智能手机
张较瘦_4 小时前
[论文阅读] AI + 教育 | AI赋能“三个课堂”的破局之道——具身认知与技术路径深度解读
论文阅读·人工智能
小雨青年5 小时前
Cursor 项目实战:AI播客策划助手(二)—— 多轮交互打磨播客文案的技术实现与实践
前端·人工智能·状态模式·交互
西西弗Sisyphus5 小时前
线性代数 - 初等矩阵
人工智能·线性代数·机器学习
王哈哈^_^5 小时前
【数据集】【YOLO】【目标检测】共享单车数据集,共享单车识别数据集 3596 张,YOLO自行车识别算法实战训推教程。
人工智能·算法·yolo·目标检测·计算机视觉·视觉检测·毕业设计
仙人掌_lz5 小时前
Multi-Agent的编排模式总结/ Parlant和LangGraph差异对比
人工智能·ai·llm·原型模式·rag·智能体
背包客研究5 小时前
如何在机器学习中使用特征提取对表格数据进行处理
人工智能·机器学习