windows系统ollama安装和使用

ollama安装

直接官网安装要6到7小时,用迅雷几分钟

  1. 安装迅雷

  2. 把下面链接复制到迅雷里下载:
    https://github.com/ollama/ollama/releases/latest/download/OllamaSetup.exe

  3. 下载后按提示安装

  4. 验证是否安装成功
    cmd叉掉重新打开,输入

    ollama --version

弹出版本号即可验证安装成功

模型安装

  1. 模型选型号
    我问的kimi,提供操作系统和显存大小让它推荐
    我的是windwos,4G,选了qwen2.5
  2. 模型下载
    以下皆cmd下载

方法一:

直接ollama pull 比较慢:

复制代码
ollama pull qwen2.5:3b

方法二:

用modelscope的地址下载

https://modelscope.cn/models?name=qwen2.5 3b\&page=1\&tabKey=task

选GGUF的(ollama支持),打开

复制代码
ollama pull modelscope.cn/地址

这里地址是图片上的可复制的Qwen/Qwen2.5-3B-Instruct-GGUF

  1. 运行

    ollama run modelscope.cn/地址

    ollama run modelscope.cn/Qwen/Qwen2.5-3B-Instruct-GGUF

模型使用

python 复制代码
import requests

def query_ollama(prompt, model="modelscope.cn/Qwen/Qwen2.5-3B-Instruct-GGUF"):
    url = "http://localhost:11434/api/generate"
    data = {
        "model": model,
        "prompt": prompt,
        "stream": False  # 设置为 True 可以获取流式响应
    }
    
    response = requests.post(url, json=data)
    if response.status_code == 200:
        return response.json()["response"]
    else:
        raise Exception(f"API 请求失败: {response.text}")

# 使用示例
response = query_ollama("你好,请介绍一下你自己")
print(response)

要事先建好环境,环境里得有相关的包才能运行

运行结果:

相关推荐
l12586511 小时前
# LangGraph Deep Research Agent 全流程设计:多轮研究、人机协同与真实来源管理
数据库·人工智能·python·算法·自然语言处理·oracle·langchain
计科杨某人18 小时前
从复杂系统到大语言模型:理解 AI 中的“涌现”
人工智能·语言模型·自然语言处理·ai涌现
柳絮飞祭奠19 小时前
03-Dify知识库搭建实战专利文档TXT+Excel
人工智能·pytorch·自然语言处理·集成学习
咖啡星人k1 天前
2026 AI Agent 长期记忆:为什么 AI 助手总“聊完就忘“?MonkeyCode 免费上手
人工智能·深度学习·机器学习·语言模型·自然语言处理
sel_92 天前
【多轮对话论文导读(七)】多轮对话论文阅读笔记:从数据生成、用户模拟到上下文重构与长期记忆
论文阅读·人工智能·笔记·深度学习·算法·语言模型·自然语言处理
品尚公益团队2 天前
codex的安装和使用
自然语言处理
极客猴子2 天前
录音内容需要对外翻译:录音转写自动翻译工具横评
人工智能·自然语言处理·机器翻译
咖啡星人k2 天前
2026 多模态大模型:AI 如何“看图+读字+听音“三合一,MonkeyCode 免费上手
人工智能·深度学习·神经网络·计算机视觉·自然语言处理
sel_93 天前
【多轮对话论文导读(二)】多轮对话与LLM Agent论文阅读:长期记忆、多轮评估与Agent训练
人工智能·深度学习·算法·语言模型·自然语言处理
LadiesAndGentlemen3 天前
概览篇:世界模型、空间智能与地理空间智能是什么关系
数据库·人工智能·自然语言处理·开源·aigc