HarmonyOS SDK携手Remy让普通手机即可完成专业级3D空间重建

长期以来,3D重建技术主要应用于游戏开发、影视特效等专业领域,依赖高性能设备与复杂流程,难以真正进入大众生活场景。

Remy的目标,正是改变这一现状。

Remy是一款基于3D重建技术开发的空间记录应用,用户只需使用手机摄像头进行环绕拍摄,即可像录制普通视频一样,生成沉浸式3D空间模型,捕捉生活中的真实三维瞬间。Remy生成的3D内容以Interactive Photo的形式保存,支持360°自由查看与缩放操作,用户可轻松用于生活记录、空间布置、重要场景留存等多种用途。

HarmonyOS SDK助力,通过AR Engine加速创新落地

Remy能够在手机端实现高效、稳定的3D空间生成体验,离不开AR Engine的底层技术支持。

1. 采集端:精准引导让3D拍摄更"可控"

在拍摄阶段,Remy通过AR Engine获取Camera图像数据和每一帧图像对应的相机位姿(Pose),基于这些数据,应用将当前拍摄覆盖情况实时可视化显示在轨迹球(Trajectory Ball)上,直观引导用户补充未拍摄区域,避免视角缺失或重建不完整的问题。

这一能力显著降低了用户对"如何正确拍3D内容"的理解成本,让普通用户也能高质量完成空间采集。

2. 云端:位姿信息辅助3D高斯重建,并提供尺度信息

云端在进行3D高斯泼溅重建时,AR Engine提供的高精度位姿数据可帮助图像配准,减少传统重建流程中的计算复杂度:

  • 用户等待时间显著降低
  • 同时有效降低云端计算资源消耗与整体成本

这使得3D重建不再是"高成本、低频率"的操作,而成为可规模化、可日常使用的能力。

另外,AR Engine提供的高精度位姿信息赋予重建的模型或场景尺度,Remy基于尺度信息可以方便地生成运镜视频,增加可玩性。

3. 用户端:即时输出让等待过程中也有可用体验

为了进一步优化用户体验,AR Engine还可在拍摄完成后即时输出稠密点云数据。

在云端重建进行的同时,用户即可先行查看基于点云的空间预览内容,实现:

  • 拍完即可看
  • 等待不中断体验
  • 降低"空等"的心理成本

这一设计让3D内容的生成过程更加连续、自然,显著提升了整体使用流畅度。

Remy:让3D空间成为一种新的记录方式

通过与HarmonyOS SDK的深度合作,Remy成功将原本复杂、专业的3D重建技术,转化为普通用户也能轻松掌握的创作工具。这不仅拓展了移动端3D内容的应用边界,也为"空间影像"这一全新内容形态提供了现实落点。

HarmonyOS SDK未来将继续通过AR Engine为开发者提供稳定、易用的AR与空间计算能力,助力更多应用在移动端探索3D、AR与真实世界融合的创新体验。

相关推荐
奶油话梅糖3 小时前
苹果的内核跑上了安卓手机:2,631 Star 的 HakiOS 让 XNU 在 Adreno GPU 上画出 118 帧
android·macos·智能手机
贾伟康3 小时前
HarmonyOS API 26 HMAF Skill 端侧 A2A 消息去重与上下文最小化
harmonyos·arkts·skill·a2a·hmaf
贾伟康3 小时前
HarmonyOS API 26 HMAF Skill 多 Skill 冲突仲裁与可恢复执行
harmonyos·arkts·智能体·skill·hmaf
钉先生贾4 小时前
毕业项目:从上游更新到回归发布的完整维护闭环
华为·harmonyos
行者-全栈开发4 小时前
【鸿蒙心迹】权限申请全流程——从声明到用户授权的完整链路(HarmonyOS 7.x)
华为·harmonyos
Martina_032116 小时前
AI生成3D场景的霓虹灯一开就糊成光团?用6步检查Emissive、Bloom与曝光
人工智能·3d·ai·自然语言处理·游戏引擎·材质·贴图
KevinChaos1 天前
阳台小花园开发手记 01|HarmonyOS 7.0 互动卡片:小花园为何要两套界面
华为·harmonyos
Martina_03211 天前
AI生成3D场景从白模换成精模后镜头全偏了?用6步检查单位、枢轴与层级替换
图像处理·人工智能·3d·ai·自然语言处理·材质·1024程序员节
Ranger09291 天前
下一代鸿蒙打包工具链:arkdown
harmonyos
程序猿追1 天前
一个工程面向手机与二合一:HarmonyOS 6 部署配置和本地手记
华为·智能手机·harmonyos