苹果发布开源 AI 模型 SHARP

苹果公司于近期发布并开源了名为 SHARP (Sharp Monocular View Synthesis) 的新型AI模型,它能在1秒内将单张2D照片转换为具有真实物理尺度的高保真3D场景

核心突破与技术特点

为了方便你快速了解,下表汇总了SHARP模型的关键特点、技术实现与局限性:

特性维度 具体说明
核心功能 仅凭一张2D照片,在1秒内完成高质量3D场景重建。
技术原理 基于3D高斯泼溅技术,通过神经网络单次前馈,直接预测数百万个3D高斯球。
质量表现 在LPIPS(感知相似度)和DISTS(纹理相似度)指标上,均显著优于此前最佳模型。
主要局限性 目前主要生成原拍摄视角附近的3D视图,无法可靠"脑补"照片中完全被遮挡或未拍摄到的区域。

开源情况与获取方式

苹果已将SHARP模型的完整代码、预训练模型及相关资源 在多个开发者平台开源-5,包括:

  • GitHub仓库apple/ml-sharp

  • Hugging Faceapple/Sharp

  • 苹果官方项目页面

此举意味着全球开发者可以免费下载、使用甚至在其基础上进行二次开发。

应用前景与影响

SHARP模型的发布,主要有以下几点意义:

  1. 大幅降低3D内容创作门槛:将原本需要专业设备和长时间计算的过程,简化为"一张照片、一秒生成",可能重塑游戏、建筑设计、AR/VR等领域的创作流程。

  2. 推动空间计算生态发展:这与苹果重点发展的Vision Pro等空间计算设备战略高度协同,可为AR/VR应用快速生成丰富的3D素材。

  3. 赋能苹果自身产品 :该技术未来很可能被集成到苹果的Apple Intelligence图像生成工具(Image Playground) 乃至实时翻译等产品功能中,提升其核心体验。

相关推荐
好奇龙猫16 小时前
【AI学习-comfyUI学习-第三十节-第三十一节-FLUX-SD放大工作流+FLUX图生图工作流-各个部分学习】
人工智能·学习
沈浩(种子思维作者)17 小时前
真的能精准医疗吗?癌症能提前发现吗?
人工智能·python·网络安全·健康医疗·量子计算
minhuan17 小时前
大模型应用:大模型越大越好?模型参数量与效果的边际效益分析.51
人工智能·大模型参数评估·边际效益分析·大模型参数选择
Cherry的跨界思维17 小时前
28、AI测试环境搭建与全栈工具实战:从本地到云平台的完整指南
java·人工智能·vue3·ai测试·ai全栈·测试全栈·ai测试全栈
MM_MS17 小时前
Halcon变量控制类型、数据类型转换、字符串格式化、元组操作
开发语言·人工智能·深度学习·算法·目标检测·计算机视觉·视觉检测
ASF1231415sd17 小时前
【基于YOLOv10n-CSP-PTB的大豆花朵检测与识别系统详解】
人工智能·yolo·目标跟踪
水如烟18 小时前
孤能子视角:“意识“的阶段性回顾,“感质“假说
人工智能
Carl_奕然18 小时前
【数据挖掘】数据挖掘必会技能之:A/B测试
人工智能·python·数据挖掘·数据分析
旅途中的宽~18 小时前
《European Radiology》:2024血管瘤分割—基于MRI T1序列的分割算法
人工智能·计算机视觉·mri·sci一区top·血管瘤·t1
岁月宁静18 小时前
当 AI 越来越“聪明”,人类真正的护城河是什么:智商、意识与认知主权
人工智能