来花5分钟在本地部署你的专有Deepseek吧!

好久不见啊!

自从deepseek的开源爆火,相关的应用层出不穷,目前线上已经有很多免费的deepseek版本可以使用了,但考虑到数据安全问题,有些私密数据不方便上网。

今天GIS宇宙就带大家快速部署一个自己的版本,免费的哦~

两个工具

大模型应用发展太快了,曾经需要安装docker和其他语言环境,现在开源项目的安装方式越来越简单了,一个Web页面或客户端加一个提供API的后台就能跑起来。

今天的安装很简单,5分钟就可以搞定。

Ollama

前两分钟来安装一个大模型的后台程序,它负责使唤大模型并以API的方式提供结果。

Ollama是一个大语言模型部署工具,支持在本地运行管理大型语言模型,无需依赖云端,且有mac和win应用程序。 ollama.com/

来到官网下载我们的小羊驼,直接装就完事了

装完后在官网再来花一分钟找一下我们的deepseek模型,Ollama支持很多大语言模型,下次你也可以试试别的。

links:ollama.com/library/dee...

复制图中的命令行,我是3060的显卡,显存较小就跑个7b吧,可以根据自己的设备选择模型,越大效果越好~

打开终端下载模型

下载完就可以在原来的窗口尝尝鲜:

Chatbox

最后再花两分钟配置一下调用Ollama APi的可视化工具

Chatbox是我们与大模型的交互程序,提供了界面让我们与大模型交互就像官网一样,也是直接装就完事儿。 chatboxai.app/zh#

装完打开在设置里添加模型,选择Ollama API,发现模型处已经可以选择deepseek了,这里的api域名默认就是ollama本地的接口,如果你是部署在服务器上可以改成你的服务器ip+端口。

享受你的模型

本期只是简单介绍一下教程,下期会分享怎么构建自己的个人知识库,让AI成为你的私人秘书。

OK,这里是GIS宇宙,我们下期再见!

商业合作请私信公众号

本人其他平台账号:

  • 微信公众号:GIS宇宙
  • CSDN:GIS_宇宙
  • 知乎:GIS宇宙
  • 掘金:GIS宇宙
相关推荐
Canace9 分钟前
给 Claude 一个链接,它真的读了原文吗
前端·人工智能·ai编程
星火102411 分钟前
【LangChain4j系列01】LangChain4j 快速入门与核心概念
java·人工智能
阿宇的技术日志15 分钟前
美团图灵 Agent 评测文章学习:从 “打分“ 到 “基建“,Agent 评测的认知升级
人工智能·agent 评测
武子康15 分钟前
GPT-Live 与 GPT-Realtime:产品模型和公开 API 不应混写
人工智能·chatgpt·agent
zhongerzixunshi15 分钟前
健全创新激励机制,激活企业发展内生动力
大数据·人工智能
changtianshuiyue15 分钟前
拆解 AI Agent 三大核心机制:从概念到 OpenAI API 接口实现
人工智能
beiju17 分钟前
从 Demo 到 Production:Agent Runtime 的失败恢复与验证闭环
人工智能
土星云SaturnCloud20 分钟前
边缘计算赋能电子焊接工位双摄AI管控:土星云SE110S-WC8实现合规检测与质量追溯全闭环
服务器·人工智能·ai·边缘计算
月光船幽幽32 分钟前
分层阈值规避归藏协议过度重置
人工智能·python
世冠科技33 分钟前
世冠科技CEO张桥:从“一句话完成产品研发”到工程智能,AI 原生如何重构复杂装备研发(上篇)
人工智能·科技·重构