DeepSeek本地化部署【window下安装】【linux下安装】

一、window 本地安装指导

1.1、下载window安装包

https://ollama.com/download/OllamaSetup.exe

1.2、点击下载好的安装包进行安装

检测安装是否成功:

sh 复制代码
C:\Users\admin>ollama -v
ollama version is 0.5.7

有上面的输出,则证明已经安装成功。

配置系统的环境变量

sh 复制代码
# 配置ollama监听网址,这里表示监听所有网卡
OLLAMA_HOST=0.0.0.0:11434
# 下载的大模型存放路径
OLLAMA_MODELS=F:\ollama_model

这里最后重启下电脑,使得设置的环境变量生效。

1.3、运行需要的大模型

在ollama官网搜索,deepseek,这里选择deepseek-coder来进行部署

并且选择1.3b参数的模型进行部署(资源有限,先保证能用)。

运行命令为:

txt 复制代码
ollama run deepseek-coder

二、linux本地安装指导

ollama api使用指南:

https://github.com/datawhalechina/handy-ollama/blob/main/docs/C4/1. Ollama API 使用指南.md

2.1、下载安装ollama

1、安装ollama模型

curl -fsSL https://ollama.com/install.sh | sh

修改

/etc/systemd/system/ollama.service

添加上环境变量即可

sh 复制代码
OLLAMA_HOST=0.0.0.0:11434

重新启动ollama服务

sh 复制代码
sudo systemctl daemon-reload
sudo systemctl restart ollama

2.2、下载模型

ollama run deepseek-r1:1.5b

2.3、测试模型

curl http://localhost:11434/api/generate -d '{
  "model": "deepseek-r1:1.5b",
  "prompt": "你是一个高级运维工程师。你的职责",
  "stream": false
}'


curl http://localhost:11434/api/chat -d '{
  "model": "deepseek-coder:latest",
  "messages": [
    {
      "role": "user",
      "content": "为什么草是绿的?"
    }
  ],
  "stream": false
}'



curl http://localhost:11434/v1/chat/completions -d '{
    "model": "deepseek-coder:latest",
  "messages": [
    {
      "role": "user",
      "content": "使用java实现一个冒泡排序算法"
    }
  ],
  "stream": false
}'

三、IDEA接入私有化部署的Deepseek大模型

安装CodeGPT插件

3.1、在插件市场搜索CodeGPT,并进行安装。

3.2、配置codeGPT

安装上述图片描述进行配置。

其中URL:部署Deepseek的服务器的IP地址和端口

请求体中model参数是你安装那个deepseek大模型的名称。可以通过ollama list来列出已经安装的大模型。

sh 复制代码
[root@iZbp156z1grx9j03c0zl8tZ ~]# ollama list
NAME                     ID              SIZE      MODIFIED
deepseek-coder:latest    3ddd2d3fc8d2    776 MB    About an hour ago

如果通过ollama安装了多个大模型,你可以指定其他大模型,但是名称要跟使用上面命令列出的模型名称保持一致。

指定刚刚配置的模型为我们的编码助手。

3.3、测试功能是否可用

经过测试,发现已经可以通过codeGPT插件调用Deepseek的大模型了。

四、Deepseek本地部署的大模型API调用

可以参考下面的文档进行使用

ollama api使用指南:

https://github.com/datawhalechina/handy-ollama/blob/main/docs/C4/1. Ollama API 使用指南.md

此外,ollama 还支持通过openAI格式的接口调用,

如对话接口:

sh 复制代码
http://8.136.125.228:11434/v1/chat/completions
相关推荐
梁萌25 分钟前
01什么是DevOps
运维·自动化·devops·ci·cd
吴声子夜歌1 小时前
Linux运维——文件内容查看编辑
java·linux·运维
m0_748237152 小时前
Linux(CentOS)安装 MySQL
linux·mysql·centos
编织幻境的妖2 小时前
关于阿里云 dataworks 运维中心下的任务运维的问题
java·运维·阿里云
小镇敲码人2 小时前
【Linux网络编程】之配置阿里云安全组
linux·网络·阿里云
Azure DevOps2 小时前
Azure DevOps Server(TFS):旧版本即将停止支持
运维·microsoft·azure·devops·tfs
Golinie2 小时前
【Linux网络编程】谈谈网络编程中的select、poll、epoll、Reactor、Proactor模型(下)
linux·网络·reactor·epoll·io多路复用
飞翔的煤气罐boom3 小时前
TCP服务器与客户端搭建
linux·tcp/ip·c
小林熬夜学编程3 小时前
【MySQL】第二弹---数据库基础全解析:从概念到实践的深度探索
linux·开发语言·数据库·mysql·算法
相醉为友3 小时前
005 嵌入式Linux应用开发——文件操作
linux·笔记