学习本地部署DeepSeek的过程(基于LM Studio)

除了使用Ollama部署DeepSeek,还可以使用LM Studio部署DeepSeek,后者是一款允许用户在本地计算机上运行大型语言模型(LLMs)的桌面应用程序,旨在简化本地模型的使用,无需云端连接或复杂配置即可体验 AI 功能。本文学习并记录基于LM Studio部署DeepSeek的过程。
  登录lmstudio官网,下载并安装LM Studio软件,如下图所示。




  运行 LM Studio,第一次启动时会显示下图所示界面,点击右上角的"Skip onboarding"直接进入主界面。

  点击主界面左侧的"发现"图标(图标为一放大镜),点击左下角的App Settings按钮,可以在右侧设置语言、主题等设置。

  在同一界面,点击左上角的Model Search标签,在左侧按需搜索模型文件,本文中选择了配置要求较低的deepseek-r1-distill-qwen-1.5b模型,然后点击右下角的Download按钮下载并加载模型。


  点击主界面左侧第一个聊天图标,在下图圈红处下拉选择模型,本文测试过程中会提示模型加载失败,报"Exit code: 18446744072635812000"的错误。

  百度上述错误信息,找到参考文献3,提示可能是选择的运行时有问题。在主界面左侧点击发现图标,然后点击Runtime标签,在右下侧的配置运行环境中将GGUF设置为"CPU llama.cpp (Windows)。

  再切换回聊天页面,在页面上方选择模型,然后就可以正常和本地模型对话了。

参考文献:

1\]https://lmstudio.ai/ \[2\]https://blog.csdn.net/hj960511/article/details/145390784 \[3\]https://blog.csdn.net/huangyabin001/article/details/145817292

相关推荐
多则惑少则明6 小时前
AI大模型实用(一)SpringAI接入deepseek示例
springai·deepseek·ai大模型测试
、、、、南山小雨、、、、9 小时前
云端部署DeepSeek + 本机Cherry Studio接入
deepseek
weixin_416660079 小时前
插件分享:将AI生成的数学公式无损导出为Word文档
人工智能·ai·word·论文·数学公式·deepseek
unique_perfect1 天前
vue2与springboot实现deepseek打印机聊天
spring boot·websocket·ai·vue2·deepseek
嗷嗷哦润橘_1 天前
AI Agent学习:MetaGPT项目之RAG
人工智能·python·学习·算法·deepseek
weixin_416660071 天前
豆包与DeepSeek底层大模型的深度解析:技术架构、设计理念与生态分野
人工智能·ai·架构·deepseek
AI大模型学徒2 天前
大模型应用开发(十六)_知识库2
chatgpt·大模型·知识库·deepseek
视觉&物联智能2 天前
【杂谈】-RL即服务:解锁新一轮自主浪潮
人工智能·ai·chatgpt·aigc·强化学习·agi·deepseek
AI大模型学徒3 天前
大模型应用开发(十五)_知识库1
人工智能·chatgpt·大模型·llm·知识库·deepseek
realhuizhu4 天前
拿着顶级服务器跑慢查询,就像开着法拉利送外卖
ai编程·sql优化·后端开发·数据库性能·deepseek