LLM大模型工具-Ollama简介与安装

1. Ollama是什么

Ollama是一个开源的本地化大型语言模型(LLM)运行框架,旨在简化开源大模型在个人电脑或服务器上的部署与管理。其核心设计理念是让用户无需依赖云端服务,仅需简单操作即可在本地运行各类开源模型(如 Llama、Mistral、Gemma 等),同时保障数据隐私和离线可用性。

Ollama是使用大型语言模型快速上手的最简单方式。添加链接描述

2.下载

官网下载添加链接描述

强烈建议安装在非C盘

3.安装

bash 复制代码
OllamaSetup.exe /DIR=自定义安装目录

之后点击Install

4.配置环境变量

在安装目录中创建大模型存储目录

配置大模型存储目录环境变量

5.处理models

默认在C:\Users\admin.ollama,将此目录下的models目录完整复制到你的安装目录中进行替换

替换完成后删除C盘中的models

6.验证

bash 复制代码
ollama --version
相关推荐
涛声依旧god28 分钟前
如何打造一个 AI Agent 自动写作并一键发布技术文章的自动化系统
人工智能·ai·自动化·ai编程
带刺的坐椅1 小时前
当所有人都在用 TS/Python 写 Agent,我们为什么坚持 Java
java·ai·solon·codex·opencode·soloncode
民乐团扒谱机2 小时前
【微科普】一文搞懂AI对话平台公式复制差异:DeepSeek一键粘贴PPT可编辑,豆包复制仅得到LaTeX源码底层原理
人工智能·ai·powerpoint·ai写作·deepseek
心疼你的一切2 小时前
Build-Your-Own-X 实战指南:从复刻经典到掌握核心原理
人工智能·ai·aigc
ajassi20003 小时前
AI语音智能体架构解析(四)AI 语音终端(执行器官)
人工智能·ai·架构·ai编程
艾斯特_3 小时前
混合检索与重排:提升召回与排序质量
后端·python·ai
羑悻的小杀马特3 小时前
AI判不了设备异常?缺的不是算法,是这层数据底座
数据库·人工智能·ai
W658034193 小时前
腾讯混元Hy3深度解析:295B参数只激活21B,推理效率怎么做到提升40%的
ai·gpu算力·国产替代
机器人落地派4 小时前
AI把工作做快了,为什么你反而更累了?
人工智能·ai·人形机器人·ai应用
艾斯特_5 小时前
Function Calling与工具调用:让模型从回答走向执行
人工智能·python·算法·ai