1 使用ollama完成DeepSeek本地部署

1 ollama

1.1 什么是ollama

ollama是一个开源的 LLM(大型语言模型)服务工具,用于简化在本地运行大语言模型,降低使用大语言模型的门槛,使得大模型的开发者、研究人员和爱好者能够在本地环境快速实验、管理和部署最新大语言模型。

1.2 下载ollama

(1)直接从ollama官网下载ollama:https://ollama.com/download

不推荐此方式,下载速度巨慢,直接从github上下载也有相同的问题。

(2)网上推荐的通过github加速器下载github上的安装包,加速器地址:https://github.moeyy.xyz/

也不推荐,新版ollama安装包较大,无法下载,只能下载较老版本。

(3)通过迅雷下载(推荐),ollama的发布版本地址:https://github.com/ollama/ollama/releases

选择自己需要的安装包,右键,复制链接到迅雷内粘贴即可下载,我这里选择的是ollama-windows-amd64.zip可以免安装,也可以直接选择OllamaSetup.exe运行安装程序完成安装。

1.3 安装并运行ollama

(1)解压ollama-windows-amd64.zip到自己的安装目录,如

(2)添加ollama.exe路径到环境变量:

这样就可以在cmd中运行ollama了。

(3)添加模型的下载路径,用于保存下载的模型文件。

新建环境变量OLLAMA_MODELS,添加自己的存储路径,我的模型文件保存路径为:D:\software\AIModel\ollama-windows-amd64\ollamaModel\Models,要保证路径下无其他文件否则可能无效。不配置此路径或配置路径无效,模型将默认下载到C:\Users\WRJ.ollama\models目录下。

(4)运行ollama

使用快捷键Win+R打开运行,输入cmd运行命令行,输入ollama serve即可运行运行ollama。

2 部署DeepSeek模型

2.1 进入ollama官网,点击models或直接点击以下链接:https://ollama.com/search

首个就是deepseek模型,点击进入。

根据自己电脑的配置选择合适的模型,我电脑是AMD 9700X+RTX4070TI SUPER 16G,实测运行14B模型无压力,响应流畅,运行32B需要等待20-30s才可响应。选择好模型后复制命令ollama run deepseek-r1:32b,打开一个新的cmd窗口粘贴运行,等待下载完成即可直接使用了。

相关推荐
虎虎(_ _)。゜zzZ1 天前
零基础本地部署Qwen2.5-7B:从环境准备到模型对话的完整实操
agent·ollama·本地大模型·qwen2.5·离线ai·llm部署
ss2731 天前
DeepSeek Harness v0.1.5-rc.1:0.1.5 系列功能冻结,DeepSeek-V41-Flash 成默认模型
人工智能·deepseek·deepseekharness
weixin_416660071 天前
DeepSeek生成的数学公式怎么导出到Word并保持可编辑?
word·deepseek
QiHY1 天前
SpringAI+DeepSeek+HTMX实现AI Agent
人工智能·spring·ai·agent·deepseek·spring-ai
冬奇Lab2 天前
DeepSeek Harness 系列(03):工具系统——给 Agent 装上手
人工智能·deepseek
七牛开发者2 天前
告别反复调参,一个 Skill 让 AI 掌握论文图的视觉语法:以 DeepSeek V4.1 Flash 论文图为例
github·agent·deepseek
一只小bit2 天前
LlamaIndex框架:简单RAG框架的全过程实现手册
llm·milvus·rag·llamaindex·deepseek
浅安的邂逅2 天前
260910-DeepSeek 发布 V4.1 Flash:1M 上下文、552B MoE,KV 缓存降到上一代 1/4,同步开源
人工智能·开源·ai大模型·deepseek·ai日报
小白跃升坊2 天前
从「一切皆插件」到 AI 自进化:DeepSeek Harness 与 Cordis 元框架深度拆解
ai agent·deepseek·cordis·插件架构·harness engineering
ss2732 天前
DeepSeek Harness v0.1.5-alpha.1:系统提示词可动态修改,右侧 Sidebar 来了
deepseek·deepseekharness