本文目标:部署 DeepSeek 本地模型,并通过 Ollama 提供 API 支持,Chatbox 提供 UI 界面。
原则:不搞那些高深的玩法,让小白也能理解并真正的上手实践。
- 1.下载Ollama并安装运行DeepSeek
- 2.下载Chatbox并配置为本地DeepSeek
- 3.无需联网也能和DeepSeek畅快聊天
1.下载Ollama并安装运行DeepSeek
从Ollama官方网站下载Ollama:
进入Ollama官方网站后,可以看到Ollama已经支持DeepSeek-R1的部署:
点击DeepSeek-R1
的链接可以看到有关deepseek-r1的详细介绍:
目前deepseek-r1模型大小提供了7个选择:1.5b、7b、8b、14b、32b、70b、671b。
因为我笔记本的显卡配置较低,所以这里只能选择最小的1.5b模型来做演示:
你可以根据你的硬件情况选择,通常模型大小(参数量)越大,模型的理解和生成能力越强,但也会消耗更多的计算资源。
点击Download
按钮下载符合自己平台的Ollama:
我这里选择macOS,点击下载。
下载文件大小不到200M,文件名为:Ollama-darwin.zip
。
解压后打开Ollama应用程序,提示:
点击Install
安装ollama。
按照提示,打开终端,使用 Command + Space 快捷键调用 terminal
:
这里Ollama默认给出的例子是下载/运行llama3.2大模型,
我们这里不使用这个llama3.2模型,直接下载/运行deepseek,参数选择最小的1.5b,在终端窗口运行下面命令:
ollama run deepseek-r1:1.5b
jingyuzhao@jingyuzhao-mac ~ % ollama run deepseek-r1:1.5b
pulling manifest
pulling manifest
pulling manifest
pulling manifest
pulling manifest
pulling manifest
pulling aabd4debf0c8... 100% ▕████████████████████████████████████████▏ 1.1 GB
pulling 369ca498f347... 100% ▕████████████████████████████████████████▏ 387 B
pulling 6e4c38e1172f... 100% ▕████████████████████████████████████████▏ 1.1 KB
pulling f4d24e9138dd... 100% ▕████████████████████████████████████████▏ 148 B
pulling a85fe2a2e58e... 100% ▕████████████████████████████████████████▏ 487 B
verifying sha256 digest
writing manifest
success
>>> Send a message (/? for help)
这里就直接可以和DeepSeek对话了:
>>> Hi! Who are you?
<think>
</think>
Hi! I'm DeepSeek-R1, an artificial intelligence assistant created by DeepSeek. I'm at your service
and would be delighted to assist you with any inquiries or tasks you may have.
>>> 你好,你是谁?
<think>
</think>
你好!我是DeepSeek-R1,一个由深度求索公司开发的智能助手。我擅长通过思考来帮您解答复杂的数学,代码和
逻辑推理等理工类问题。 Feel free to ask me anything you'd like me to know!
>>> Send a message (/? for help)
2.下载Chatbox并配置为本地DeepSeek
Chatbox官方网站:
我这里还是Intel-based的MAC,
下载的Chatbox-1.9.7.dmg
,大小100M多点,点击安装,按下面提示拖到Applications内:
注意,这里我故意选错成DeepSeek API,这也是初学者经常会选错的,实际上,若选择这个你就找不到你本地的DeepSeek模型。
实际正确应该选择OLLAMA API,然后就可以看到我们上一步安装好的deepseek-r1:1.5b
。
3.无需联网也能和DeepSeek畅快聊天
配置好DeepSeek本地模型之后,就可以实现在断网情况下自由问答了,比如,此刻我正在写这篇文章,于是就问他帮我想几个备选的标题:
我正在写一篇文章,我起的名字是"手把手教你部署 DeepSeek 本地模型"。请你帮我重新生成10个吸引眼球的标题供我选择。
他真的迅速给我起了10个吸引眼球的标题,还提供了它思考的过程,而且在我这4年前的电脑上跑起来都很迅速。
嗯,真的很赞!不过我还是决定用自己最初想的朴实标题,不做标题党了。