国产 3D 生成大模型火爆外网!歪果仁年都不过了,都在测这个

"3D 大模型终于可以生成锐利的边角了!"

"在钻研了一阵 3D 人工智能后,我总算通过 Hyper3D.ai 用上了 Rodin1.5,它真的可能改变游戏规则。"

2024 年的最后一天,随着 3D 生成工具 Rodin Gen-1.5 的上线,在网络上掀起了新一波对于 3D 生成讨论的热潮。

用 Rodin 背后的研发团队------影眸科技 CTO 张启煊的话说:

这是 3D 大模型第一次能生成如此锐利的边缘------我愿称之为 "圆滑当道时代的锐利异类"------对于 CAD 类工业模型与硬表面模型,它有绝对的优势,扩大了 3D 生成的使用群体。

体验链接:Hyper3D.ai

由于 Rodin 的这次更新恰逢年末,海外很多用户都在放假,但这也并没有阻挡用户们对测试这个新模型的热情:

不论是《双城之战》中的海克斯拳套------

或者是细节更多的赛博朋克靴子------

对于这些结构鲜明的模型,Rodin Gen-1.5 都是信手拈来。

甚至有动画师把 Rodin 生成的资产直接运用在了动画制作中(以下视频中的 3D 资产有 70% 由 Rodin 生成)。

**△**来源:B 站 UP 主 做 3D 的小邓子

当然这样结构鲜明的生成模型,对 3D 打印爱好者也是极其友好的,稍作涂装就是一只精巧的玩具:

AI 生成领域的专业用户也对 Rodin 生成模型的质量赞赏有加:

然而,这已经不是影眸科技这家 3D 大模型公司第一次给这一领域带来一些 "小震撼" 了。

3D 大模型研发的 "非共识" 道路‍‍‍‍

2024 年 8 月,全球最顶尖的计算机图形学会议 ACM SIGGRAPH 大会上,影眸与上科大联合研发的 3D 原生大模型 Clay 发表,并与团队同年研发的 3D 服装生成模型 Dresscode 同时获得 SIGGRAPH2024 最佳论文荣誉提名,团队也成为这一领域内唯一在同一个学术顶会上获得两项该提名的中国团队。

Clay 的提出显著提升了 3D 生成的质量,也成为了当前学术界 3D 大模型广泛认可的技术路径。

**△**Clay、DressCode 获得 SIGGRAPH2024 最佳论文荣誉提名

基于 CLAY 的三维资产生成工具 Rodin Gen-1 在去年 6 月推出,产品以它最接近 "Production-Ready" 的生成效果,上线后就备受关注。

它的生成质量、可用性都代差级地领先当时的同类产品。凭借其优质的生成效果,Rodin 仅用 45 天就达成了 100 万美元 ARR,而大名鼎鼎的 HeyGen 达到这个数字花了 7 个月。

这背后,来源于影眸始终如一对 "Prodution-Ready" 的追求。

"Production-Ready" 这个词来自 CG 行业。CG 行业中有一个词------后期(Post-Production),而 "Production-Ready" 的意思就可以直接接入到后续的流程中使用。

这也是影眸产品研发、开发的共识,正是这样的共识,让影眸在开始 3D 大模型研发之初,就走上了一条 **"**非共识" 的道路。

在那时,2D 升 3D 的技术方案是学术界主流的 3D 生成方式,同时,市面上已经有团队推出了基于 2D 升维技术路径的 3D 生成产品。

可是影眸凭借多年的技术探索和产品打造经验,他们看到了 2D 升维路径的瓶颈。2D 数据终究只记录了真实物体的一个侧面,再多角度的图像也无法完整描述一个 3D 内容,因此模型学到的东西依旧存在很多信息缺失,生成结果还是需要大量的人工修正,很难满足使用需求。唯一的解法是从一开始就用 3D 原生数据。

彼时,影眸正遭遇着资本环境快速变差导致的融资失利。于是一个艰难的选择摆在了影眸面前:

到底是先用主流技术做出一个产品上牌桌,还是用更大的力气去死磕一个还不明确的技术方向。

影眸团队选择了后者,更难、更需要时间、但是更正确的事。

7 个月后,对技术的精准直觉和坚持给了他们回报。

而 Rodin Gen-1.5 的发布更是影眸对 "Production-Ready" 坚持的更进一步。通过新一代 3D 原生表达,Rodin Gen-1.5 全面解决了行业内长期存在的薄面与边缘锐度问题,再次提高 3D 生成全行业商用标准。

无机形状的生成能力、锐利的边缘以及非常干净的拓扑结构,这是 Rodin 1.5 在 3D 生成能力上最凸显出来的性能提升。这一点在游戏,尤其是产品设计领域中尤为重要。这次升级也让影眸的产品领先幅度再次扩大。

已进入游戏、动画工作流‍‍‍‍‍‍‍‍‍‍‍‍

现在,用户借助 Rodin 对几何以及 PBR 材质的精准生成能力,能够快速地制作适用于不同场景的三维资产。

用户们已经在试验 Rodin 辅助游戏制作的能力。

有直接生成单个静态物件的。

**△**来源:X.com @MartinNebelong‍

也有为大场景批量生成 npc 的。

事实上,已经有用户将 Rodin 生成的结果放入自己开发的游戏中了。‍

也有个人开发者基于 Rodin 开发了一整套工作流。

**△**来源:B 站 UP 主 T-BOY‍

动画、影视制作也是 Rodin 应用的一大场景。

有用户使用 Rodin 生成的资产搭建了一整个城镇,制作了简单的动画。

**△**来源:X.com @jungle_jimjim

也有用户和现有 AI 路线结合,在离线引擎中制作高质量 CG 内容。

**△**来源:X.com @Itryandlearn3D

稍作调整,Rodin 的资产质量甚至可以达到影视级。

**△**来源:B 站 UP 主 T-BOY

3D 大模型何时迎来 "ChatGPT 时刻"?‍‍‍‍‍‍‍

影眸认为,在 Rodin-Gen1.5 之前,3D 大模型的发展主要有 2 个阶段:

  • Level1 ------ Clay 发布前的基于 2D 升维技术路径的 3D 生成,需要大量人工后期的修正才能达到可用标准

  • Level2 ------ 以 Clay 为基础的 3D 原生三维生成大模型,刚刚触碰到 "Prodution-Ready" 的标准

而 Rodin Gen-1.5 的发布,已经把三维大模型带到了 Level3 的程度,它对生成模型更加精确、细致地表达,解决了 3D 大模型一直以来存在的问题,大幅拓宽了 3D 大模型的使用边界。

过去几年里,生成式 AI 已在文字、图像、音频、视频取得重大进展,3D 生成常被认为是 "世界模型(World Model)" 的 "最后一块拼图"。随着技术进步和消费需求的提升,3D 行业未来的发展前景广阔。去年,AutoDesk、Meta、NVIDIA、腾讯、微软等纷纷推出了自己的 3D 生成大模型,积极布局这一前沿领域。在与行业巨头的竞争中,影眸团队凭借其在 3D 建模 / 图形学领域的深耕与对 3D 行业用户需求洞察,在技术与商业化方面长期领先。

在未来,3D 生成还有很大的可供挖掘的空间。要实现在 AR/VR / 虚拟世界中的个人创作,就要解放用户的 3D 内容创作能力。作为构建在三维空间中的世界,未来机器对世界的理解也必然基于三维,所以在具身智能领域,对 3D 的需求是始终存在的。

相信在影眸科技等 3D 大模型团队的共同努力下,我们很快就会迎来 3D 领域的 "ChatGPT" 时刻。

  • 本文系量子位获授权刊载,观点仅为原作者所有。

--- ---

相关推荐
中二病码农不会遇见C++学姐1 分钟前
文明6-mod制作-游戏素材AI生成记录
人工智能·游戏
九尾狐ai17 分钟前
从九尾狐AI案例拆解企业AI培训的技术实现与降本增效架构
人工智能
2501_9481201519 分钟前
基于RFID技术的固定资产管理软件系统的设计与开发
人工智能·区块链
(; ̄ェ ̄)。24 分钟前
机器学习入门(十五)集成学习,Bagging,Boosting,Voting,Stacking,随机森林,Adaboost
人工智能·机器学习·集成学习
杀生丸学AI26 分钟前
【物理重建】PPISP :辐射场重建中光度变化的物理合理补偿与控制
人工智能·大模型·aigc·三维重建·世界模型·逆渲染
vlln29 分钟前
【论文速读】递归语言模型 (Recursive Language Models): 将上下文作为环境的推理范式
人工智能·语言模型·自然语言处理
春日见36 分钟前
如何避免代码冲突,拉取分支
linux·人工智能·算法·机器学习·自动驾驶
龙腾AI白云40 分钟前
基于Transformer的人工智能模型搭建与fine-tuning
人工智能·数据挖掘
人工智能培训1 小时前
大模型训练数据版权与知识产权问题的解决路径
人工智能·大模型·数字化转型·大模型算法·大模型应用工程师
无垠的广袤1 小时前
【VisionFive 2 Lite 单板计算机】边缘AI视觉应用部署:缺陷检测
linux·人工智能·python·opencv·开发板