LLM大模型工具-Ollama简介与安装

1. Ollama是什么

Ollama是一个开源的本地化大型语言模型(LLM)运行框架,旨在简化开源大模型在个人电脑或服务器上的部署与管理。其核心设计理念是让用户无需依赖云端服务,仅需简单操作即可在本地运行各类开源模型(如 Llama、Mistral、Gemma 等),同时保障数据隐私和离线可用性。

Ollama是使用大型语言模型快速上手的最简单方式。添加链接描述

2.下载

官网下载添加链接描述

强烈建议安装在非C盘

3.安装

bash 复制代码
OllamaSetup.exe /DIR=自定义安装目录

之后点击Install

4.配置环境变量

在安装目录中创建大模型存储目录

配置大模型存储目录环境变量

5.处理models

默认在C:\Users\admin.ollama,将此目录下的models目录完整复制到你的安装目录中进行替换

替换完成后删除C盘中的models

6.验证

bash 复制代码
ollama --version
相关推荐
goehou3 小时前
MCP 查数实战:让 LLM 安全地查数据库(只读账号、SQL 校验、参数漂移)
数据库·ai·llm·教程·mcp·function calling
VIP_CQCRE5 小时前
给团队搭一个 AI 工作台:Open WebUI 接入 Ace Data Cloud 实战
docker·ai·rag·open webui·ace data cloud
Smoothcloud润云5 小时前
PyTorch推理服务动态批处理实战:兼顾吞吐与延迟
人工智能·pytorch·python·深度学习·ai·gpu算力
木土雨成小小测试员8 小时前
WorkBuddy的安装使用教程详解
ai
Martina_032110 小时前
AI生成的海岸城市一移动镜头,水面反射就跳?用6步统一反射探针、SSR与平面反射
图像处理·人工智能·平面·3d·ai·自然语言处理·游戏策划
tianyatest11 小时前
给 AI Agent 写了个 Skill:扫描版电子书自动解压合并 + 加书签(附 PDG 格式逆向)
ai·pdf·电子书
风花一世月11 小时前
[特殊字符] 我把一套分布式消防方案做成了能跑的 3D 沙盘(三架无人机共用一根水带,在线直接玩)
分布式·3d·ai·无人机
GalaxyMeteor12 小时前
Windows 本地部署 Sam3 模型笔记(含Demo)
ai
秋饼12 小时前
Java 后端企业级 LLM 网关实战:Spring Cloud Gateway 构建统一大模型接入层
java·ai·技术分享·后端开发
赛博仓鼠13 小时前
Vidu Q4 Preview实测:15张参考图+3段音频驱动,2K/4K输出,国产视频生成新标杆
ai·aigc·音视频