(一)DeepSeek大模型安装部署-Ollama安装

大模型deepseek安装部署

(一)、安装ollama

复制代码
curl -fsSL https://ollama.com/install.sh | sh
sudo systemctl start ollama
sudo systemctl enable ollama
sudo systemctl status ollama

(二)、安装ollama遇到网络问题,请手动下载 ollama-linux-amd64.tgz

复制代码
curl -L https://ollama.com/download/ollama-linux-amd64.tgz -o ollama-linux-amd64.tgz
修改install.sh部署文件
执行安装命令
复制代码
sh install.sh
>>> Installing ollama to /usr/local
>>> Downloading Linux amd64 bundle
>>> Creating ollama user...
>>> Adding ollama user to video group...
>>> Adding current user to ollama group...
>>> Creating ollama systemd service...
>>> Enabling and starting ollama service...
Created symlink from /etc/systemd/system/default.target.wants/ollama.service to /etc/systemd/system/ollama.service.
>>> NVIDIA GPU installed.

(三)、安装deepseek大模型

访问ollama网址

library

可以支持下载 1.5b 7b 8b 14b 32b 70b 671b模型

安装deepseek-r1:32b模型

复制代码
ollama run deepseek-r1:32b

(四)、deepseek大模型资源推荐

|-------------------------------|---------|-----------|-----------|----------------------------------|
| 模型名称 | 参数量 | 激活参数量 | 上下文窗口 | 推理资源推荐 |
| DeepSeek-V3 | 671B | 37B | 128K | 多机分布式部署,节点数量:2个,单节点配置:HCCPNV6 机型 |
| DeepSeek-R1 | 671B | 37B | 128k | 多机分布式部署,节点数量:2个,单节点配置:HCCPNV6 机型 |
| DeepSeek-R1-Distill-Qwen-1.5B | 1.5B | - | - | 12C44GB 1卡A10 |
| DeepSeek-R1-Distill-Qwen-7B | 7B | - | - | 12C44GB 1卡A10 |
| DeepSeek-R1-Distill-Llama-8B | 8B | - | 128K | 12C44GB 1卡A10 |
| DeepSeek-R1-Distill-Qwen-14B | 14B | - | - | 16C96G 1卡A100 |
| DeepSeek-R1-Distill-Qwen-32B | 32B | - | - | 32C192G 2卡A100 |
| DeepSeek-R1-Distill-Llama-70B | 70B | - | 128K | 164C948G 8卡A100 |

相关推荐
charlee4410 小时前
PandasAI连接LLM进行智能数据分析
ai·数据分析·llm·pandasai·deepseek
FIT2CLOUD飞致云1 天前
七月月报丨MaxKB在企业环境中实现AI落地的具体场景盘点
人工智能·开源·deepseek
陈佬昔没带相机2 天前
Dify MCP功能实测,小参数模型竟然全军覆没!
ollama·deepseek·mcp
量子位3 天前
WAIC抢先爆料:金融“黑马”大模型超DeepSeek刷新SOTA,论文已上线
deepseek
Younglina3 天前
🔮 用Vue3+TypeScript打造沉浸式AI塔罗牌占卜应用 > 一个集成DeepSeek AI、支持PWA的现代化塔罗牌Web应用开发实战分享
前端·vue.js·deepseek
萌主墩墩4 天前
趣玩-Ollama-Llm-Chatrbot
llm·qwen·ollama·deepseek
程序员岳焱4 天前
从 0 到 1:Spring Boot 与 Spring AI 打造智能客服系统(基于DeepSeek)
人工智能·后端·deepseek
前端工作日常4 天前
DeepSeek-R1 系列不同版本的模型配置要求
deepseek
段智华5 天前
# 微调需要准备哪些环境配置?
大模型微调·deepseek
大模型开发5 天前
刷到就是赚到!大模型学习经验分享,帮你少走 3 年弯路
程序员·llm·deepseek