Maxkb玩转大语言模型

Maxkb玩转大语言模型

随着国外大语言模型llama3的发布,搭建本地个人免费"人工智能"变得越来越简单,今天博主分享使用Max搭建本地的个人聊天式对话及个人本地知识域的搭建。

1.安装Maxkb开源应用 github

docker快速安装

docker run -d --name=maxkb -p 8080:8080 -v ~/.maxkb:/var/lib/postgresql/data 1panel/maxkb

默认的用户名:admin密码:MaxKB@123.. 想要数据持久化就需要将docker的文件挂在到本地的电脑上

-v /maxdb/data:/var/lib/postgresql/data 1panel/maxkb

创建模型步骤如下

选择自己的模型并安装,我这边使用ollama安装

API域名不能是localhost和127.0.0.1

安装成功后如下图:

安装过程会出现API域名无效的弹窗提示 有以下原因: 1.没有正确填写域名 2.按装的ollama模型没有开启远程链接

解决方法

填写的API域名只能是服务器: ip:11434 windows下在cmd中执行

set OLLAMA_HOST=0.0.0.0
ollama serve

再次安装大模型就成功了

2.创建自己的本地应用

3.编辑应用的信息

4.测试我们的模型

完成之后,也可以将对话的窗口植入到我们自己的网站

本文由mdnice多平台发布

相关推荐
爱笑的眼睛111 天前
浅谈 前端验证码那些事
前端·程序人生
GPT01232 天前
大模型日报 2024-12-20
程序人生
十二测试录2 天前
Python基础——字符串
开发语言·经验分享·python·程序人生·职场发展
测试老哥2 天前
Python自动化测试图片比对算法
自动化测试·软件测试·python·测试工具·程序人生·职场和发展·测试用例
杰哥就是杰哥3 天前
坚持奋斗到底
程序人生
大鱼前端5 天前
React 19新特性探索:提升性能与开发者体验
程序人生
测试19985 天前
什么是自动化测试?
自动化测试·软件测试·python·测试工具·程序人生·职场和发展·测试用例
python_知世5 天前
基于LLaMA-Factory微调Llama3
人工智能·深度学习·程序人生·自然语言处理·大语言模型·llama·大模型微调
赵大仁6 天前
从零开始掌握Vue.js组件开发:详解原理与实践
前端·javascript·vue.js·经验分享·vscode·程序人生·前端框架