DeepSeek 玩家能提前拿苹果新品!只要 15 万元,在家跑满血版 R1

号称地表最强的 M3 Ultra ,本地跑满血版 DeepSeek R1,效果到底如何?

其实,有些 DeepSeek 玩家们已经提前拿到手做过实测了。

例如这位 Alex 老哥就是其中之一:

他提前拿到了两台搭载 M3 Ultra 的 Mac Studio,配置是这样的:

  • M3 Ultra(32 核中央处理器、80 核图形处理器和 32 核神经网络引擎)

  • 512G 统一内存

  • 1TB 固态硬盘

具体来说,Alex 老哥用配备 Thunderbolt 5 互连技术(传输速率为 80Gbps)的 EXO Labs 设备,来运行完整的 DeepSeek R1 模型(671B、8-bit)。

Alex 老哥表示,两台 Mac Studio 本地跑满血版 DeepSeek R1,实际速度是 11 tokens / 秒,理论上可以达到 20 tokens / 秒。

至于价格嘛,一台上述配置的 Mac Studio 是 74249 元 ,两台就是小 15 万元

或许很多小伙伴觉得这个价格有点略贵。

但在 M3 Ultra 之前啊,如果你想在本地使用显卡来推理 V3 或 R1,那么就得起码需要 6、7 张 A100...... 大约小 100 万元

也正因如此,也有不少网友认为搭载 M3 Ultra 的 Mac Studio,堪称是 "性价比最高的大模型一体机"

值得注意的是,苹果这次似乎是主动给 DeepSeek 玩家们提前发货,有种让他们赶紧测一测的意味。

毕竟在发布之际,苹果就强调了可以在 M3 Ultra 版 Mac Studio 中跑超过 6000 亿参数的大模型。

掀起一波本地跑 DeepSeek 的风

其实在 M3 Ultra 版 Mac Studio 发布前后,已经有不少人做过类似的评测。

例如 B 站博主 "虽然但是张黑黑" 的测试结果是:

  • 15.78 tokens / 秒:采用 Ollama 的 GGUF 格式

  • 19.17 tokens / 秒:采用更适合苹果的 MLX 格式

这个速度已经跟在线使用 DeepSeek R1 的速度相媲美了。

除此之外,像外网博主 Xcreate 还把 M3 Ultra 版 Mac Studio 和 M4 Max 版 Macbook Pro 的拉到一个 "擂台" 做了比较。

首先从性能上来看,Geekbench 测试的结果显示,M3 Ultra 在 CPU 性能方面与 M4 Max 非常接近,但 M3 Ultra 略胜一筹。

在本地运行大模型测试方面,博主在运行基于 Llama 的 DeepSeek R1 70B 模型时,M3 Ultra 的速度为 11.3 tokens/ 秒,而 M4 Max 测试结果为 10.69 tokens / 秒,差距并不是很大。

但更重要的是测试满血版 DeepSeek R1 的结果。

对此,博主认为在本地完整运行 671B 的 DeepSeek 是有点困难的,因为已经有人宣告失败。

但也有成功的例子。

他举例另一位评测人员的结果,显示是运行 8bit 量化版本的 DeepSeek R1,得到了 9-21 tokens / 秒的速度。

而在 4bit 量化版情况下,速度为 16-18 tokens / 秒。


至于为什么体量更大的 671B 的 DeepSeek,会比 70B 运行速度更快,是因为 DeepSeek 将 671B 模型分片为 "专家混合体",实际运行时根据问题切换,类似运行 30B 的模型。

最后,博主也提醒想要在本地运行大模型的友友们,网传苹果将在今年 WWDC 上发布 M4 Ultra,所以可以再观望一下。

参考链接:

1\][x.com/alexocheema...](https://link.juejin.cn?target=https%3A%2F%2Fx.com%2Falexocheema%2Fstatus%2F1899604613135028716 "https://x.com/alexocheema/status/1899604613135028716") \[2\][www.bilibili.com/video/BV1nk...](https://link.juejin.cn?target=https%3A%2F%2Fwww.bilibili.com%2Fvideo%2FBV1nkRnYTEWx%2F "https://www.bilibili.com/video/BV1nkRnYTEWx/") --- **完** ---

相关推荐
星爷AG I19 分钟前
14-2 个体、任务与环境(AGI基础理论)
人工智能·agi
飞Link22 分钟前
深度解析 LSTM 神经网络架构与实战指南
人工智能·深度学习·神经网络·lstm
前端不太难23 分钟前
AI 时代,鸿蒙 App 还需要传统导航结构吗?
人工智能·状态模式·harmonyos
格林威23 分钟前
工业相机图像高速存储(C#版):内存映射文件方法,附Basler相机C#实战代码!
开发语言·人工智能·数码相机·c#·机器视觉·工业相机·堡盟相机
geneculture24 分钟前
AGI Maths融智学AGI数学模型
人工智能·融智学的重要应用·哲学与科学统一性·信息融智学·融智时代(杂志)·agi maths.
OpenMMLab25 分钟前
Agent范式转移:组织、协作与商业的重构
人工智能·大模型·多模态大模型·智能体·openclaw
love530love26 分钟前
Windows 11 源码编译 vLLM 0.16 完全指南(RTX 3090 / CUDA 12.8 / PyTorch 2.7.1)
人工智能·pytorch·windows·python·深度学习·vllm·vs 2022
格林威29 分钟前
工业相机图像高速存储(C#版):内存映射文件方法,附堡盟相机C#实战代码!
开发语言·人工智能·数码相机·计算机视觉·c#·工业相机·堡盟相机
人工智能训练33 分钟前
Qwen3.5 开源全解析:从 0.8B 到 397B,代际升级 + 全场景选型指南
linux·运维·服务器·人工智能·开源·ai编程