生活电子常识-deepseek-r1本地化部署+ui界面搭建

前言

deepseek-r1 14b模型,32b模型部署在本地电脑上也能实现非常好的性能。

因此有兴趣研究了下如何在本地部署。

同时最新流行mauns工作流,他们提供一句话实现网页端任意应用的能力。实际上,你也可以用本地的模型来实现离线的ai工作流功能。

不过这里讲述本地如何首先搭建大模型,一步步来

具体的实现原理,操作步骤如下

原理

1.安装ollama

作用是提供大模型的运行环境,以及提供外部的大模型调用api接口

你没看错,本地部署的大模型也可以提供api接口,这也是后来我们可以使用其他ui界面来访问这个本地大模型的基础

访问https://ollama.com/,下载ollama.exe

安装后,然后在命令框中查看是否可用,可用如图所示

2.选择模型下载

如图所见,可以选择qwn32b模型,deepseekr1模型等等

3.使用命令配置模型,等待下载好即可

命令敲入cmd框中,模型将会自动下载,等待下载好即可。

4.查看可用模型列表,启动模型

可以根据如图片中命令,查看已经安装的模型名称,然后启动即可

5.启动模型,对话

复制代码
ollama run deepseek-r1:14b

6.设置ui界面对话

去chorme扩展商店中搜索page assist插件,安装

在设置中勾选简体中文,即可展示

同时因为ollama为其安装的模型提供了api接口,这个ui插件,也可以访问那些大模型,进行流畅对话

同时,也可以为模型构建知识库,让其回答的更加贴合知识库语料

同时,局域网内,别人访问你的大模型api也可以访问你本地的大模型进行交流

6.1另外一款ui软件

如图所配置即可,chatbox为模型提供了图片和文档上传功能,更加符合日常使用需求。

相关推荐
咖啡屋和酒吧1 天前
人体早衰的隐形推手:肠道微生态失衡的长期慢性损耗
生活·精选
2601_957276861 天前
国庆反向游去哪玩
生活
2601_967287571 天前
浚县装修合同变更单怎么写:字段、签字链与计价口径
生活
2601_965742222 天前
短视频脚本创作方法分享:本地生活类账号的起步思路
大数据·人工智能·算法·ai·新媒体运营·生活
微订校园外卖平台3 天前
多区域本地生活平台权限管理怎么做:角色分层、数据隔离与选型核对
生活·外卖系统·本地生活·微订
2601_967287573 天前
浚县卫生间防水选 JS 还是聚氨酯:参数对比与选型判断
生活
paopaokaka_luck3 天前
个人综合管理小程序(echarts数据看板、健康数据记录与趋势查看、目标拆解和进度管理、日程待办与番茄钟、习惯打卡、收支统计、个人生活记录、跨模块智能提醒)
前端·javascript·spring·小程序·数据分析·echarts·生活
RuixiYc.10 天前
聚乙烯醇-海藻酸钠复合凝胶,PVA-SA Hydrogel的产品发展
生活
人工智能培训10 天前
未来三年,AI 落地的五个确定性判断
大数据·人工智能·学习·生活·ai写作
码农习箫录12 天前
吹箫笔记第 12 篇:把「情绪控制」当成一次资源调度
程序人生·生活