LLM大模型工具-Ollama简介与安装

1. Ollama是什么

Ollama是一个开源的本地化大型语言模型(LLM)运行框架,旨在简化开源大模型在个人电脑或服务器上的部署与管理。其核心设计理念是让用户无需依赖云端服务,仅需简单操作即可在本地运行各类开源模型(如 Llama、Mistral、Gemma 等),同时保障数据隐私和离线可用性。

Ollama是使用大型语言模型快速上手的最简单方式。添加链接描述

2.下载

官网下载添加链接描述

强烈建议安装在非C盘

3.安装

bash 复制代码
OllamaSetup.exe /DIR=自定义安装目录

之后点击Install

4.配置环境变量

在安装目录中创建大模型存储目录

配置大模型存储目录环境变量

5.处理models

默认在C:\Users\admin.ollama,将此目录下的models目录完整复制到你的安装目录中进行替换

替换完成后删除C盘中的models

6.验证

bash 复制代码
ollama --version
相关推荐
bruce_哈哈哈43 分钟前
Claude Code--Feishu-Skill-demo
ai
User_芊芊君子1 小时前
HCCL高性能通信库编程指南:构建多卡并行训练系统
人工智能·游戏·ai·agent·测评
慢半拍iii2 小时前
对比源码解读:ops-nn中卷积算子的硬件加速实现原理
人工智能·深度学习·ai·cann
慢半拍iii2 小时前
CANN算子开发实战:手把手教你基于ops-nn仓库编写Broadcast广播算子
人工智能·计算机网络·ai
User_芊芊君子2 小时前
CANN数学计算基石ops-math深度解析:高性能科学计算与AI模型加速的核心引擎
人工智能·深度学习·神经网络·ai
程序员泠零澪回家种桔子3 小时前
Spring AI框架全方位详解
java·人工智能·后端·spring·ai·架构
深鱼~3 小时前
数学计算加速利器:ops-math在昇腾平台的应用详解
ai·开源·cann
kjkdd3 小时前
6.1 核心组件(Agent)
python·ai·语言模型·langchain·ai编程
慢半拍iii6 小时前
从零搭建CNN:如何高效调用ops-nn算子库
人工智能·神经网络·ai·cnn·cann
空白诗7 小时前
CANN ops-nn 算子解读:AIGC 风格迁移中的 BatchNorm 与 InstanceNorm 实现
人工智能·ai