Windows安装ollama和AnythingLLM

一、Ollama安装部署

1)安装ollama

官网下载:https://ollama.com/download,很慢

阿里云盘下载:https://www.alipan.com/s/jiwVVjc7eYb 提取码: ft90

百度云盘下载:https://pan.baidu.com/s/1o1OcY0FkycxMpZ7Ho8_5oA?pwd=8cft 提取码:8cft

2、

复制代码
ollama run llama2

3、启动与运行

在Ollama的终端界面中,键入命令Ollama serve,一键将Ollama设置为后端服务器模式,静待其为您的知识库服务。

复制代码
Ollama serve	

运行私有化大模型(基于ollama)

4、随时查看已经下载大模型

复制代码
ollama list

二、AnythingLLM安装

1、AnythingLLM安装有很多方式,一是到官方网站(Download AnythingLLM for Desktop)下载桌面版,然后双击即可

搭建本地聊天工具(部署Anythingllm)

一个功能强大的大模型开发工具下载地址:

https://useanything.com/

(链接:https://pan.quark.cn/s/a9974a779650 提取码:jnBL)

2、安装也是一键安装,左面图标长这样,点击打开即可

3、配置本地下载的大模型,先点击左下角的【配置】

本地大模型默认地址:http://127.0.0.1:11434

进来之后简单了解翻译一下

4、配置大模型:

5、到此我们已经完成了私有化大模型,聊天机器人的配置,点击左下角返回聊天界面

点击【New Workspace】新建一个聊天空间。

写个名字点【Save】

6、左侧点击进入你刚刚创建空间,然后开始和你专属的大模型聊天

三、搭建私有化知识库

1、嵌入模型选择

2、设置【向量数据库】

3、返回聊天空间,点击【上传按钮】如图

4、上传私有知识文档

5、点击保存

6、保存后有个数据向量化入库的过程。等到完成后右下角不会出现保存,同时文档已经在你的列表中,说明私有化知识库搭建完成了

7、设置知识库模式,两种模式

到此一个私有化知识库大模型搭建完成!

参考:小白速成教程:私有化大模型+知识库_私有大模型和知识库-CSDN博客

参考:AI模型:windows本地运行下载安装ollama运行llama3、llama2、Google CodeGemma、gemma等可离线运行数据模型【自留记录】_ollama下载-CSDN博客

相关推荐
技术与健康27 分钟前
LLM实践系列:利用LLM重构数据科学流程07 - 工程化实践与挑战
人工智能·机器学习·重构·大模型工程化实践
MobotStone37 分钟前
AI Agent工程师≠Prompt工程师:能力断层在哪
人工智能
深瞳智检40 分钟前
目标检测数据集 第007期-基于yolo标注格式的茶叶病害检测数据集(含免费分享)
人工智能·深度学习·yolo·目标检测·计算机视觉
区块链蓝海41 分钟前
UPCX与日本电信公司NTT就新一代去中心化支付系统签署合作协议
人工智能·web3·区块链
berling001 小时前
【论文阅读 | arXiv 2025 | WaveMamba:面向RGB-红外目标检测的小波驱动Mamba融合方法】
论文阅读·人工智能·目标检测
CHEN5_021 小时前
时序数据库选型“下半场”:从性能竞赛到生态博弈,四大主流架构深度横评
数据库·人工智能·ai·架构·时序数据库
top_designer1 小时前
作品集PDF又大又卡?我用InDesign+Acrobat AI构建轻量化交互式文档工作流
人工智能·pdf·自动化·设计规范·acrobat·indesign·交互式pdf
WCL-JAVA1 小时前
java生成带水印的pdf文件
java·python·pdf
涡能增压发动积1 小时前
MySQL数据库为何逐渐黯淡,PostgreSQL为何能新王登基
人工智能·后端
瓦力wow1 小时前
Pytorch安装详细步骤
人工智能·pytorch·python