使用Ollama简单部署本地Qwen2

Ollama 是一个开源的、本地运行的 AI 聊天模型,允许在自己的设备上运行 LLM,无需依赖云服务。它支持多种 LLM。目前Ollama library已经支持Qwen2,可以直接使用。

首先安装ollama, 访问官网 下载 ollama 对应版本 Download Ollama on macOS

windows下选择exe ,然后运行安装,安装完成后。添加一个系统环境变量OLLAMA_MODELS,否则Ollama 会将模型默认下载到C盘,比如我这里指了D盘:

然后打开powershell 运行一下,注意不是CMD是powershell ,看是否安装成功

然后我们安装qwen大模型

复制代码
ollama run qwen2:1.5b

1.5b就是对应安装Qwen2 1.5b大模型,如果使用7b 就是 ollama run qwen2:7b

运行完成后就可以和大模型对话了,不过ollama 只有命令行模式运行,这里我下载了chatbox软件来运行,打开软件 模型设置选择ollama 以及 对应的ollama模型。

运行结果:

文章地址 使用Ollama简单部署本地Qwen2 -- AI小站

相关推荐
九年义务漏网鲨鱼1 天前
【大模型面经】千问系列专题面经
人工智能·深度学习·算法·大模型·强化学习
WWZZ20251 天前
快速上手大模型:深度学习7(实践:卷积层)
人工智能·深度学习·算法·机器人·大模型·卷积神经网络·具身智能
山顶夕景1 天前
【RL】ORPO: Monolithic Preference Optimization without Reference Model
大模型·llm·强化学习·rl
彡皮1 天前
基于Qt,调用千问7B大模型,实现智能对话
开发语言·qt·大模型·千问7b
CoderJia程序员甲1 天前
GitHub 热榜项目 - 日榜(2025-11-16)
ai·开源·大模型·github·ai教程
哥本哈士奇1 天前
实现AI和BI整合的初步思路和探索-Part3
大模型
是Dream呀2 天前
一个账号调用N个AI模型!从LLM到视频生成的丝滑解决方案
人工智能·大模型·aigc·音视频·deepseek
zhangbaolin2 天前
深度智能体-长短期记忆
langchain·大模型·长期记忆·深度智能体·短期记忆
宁渡AI大模型2 天前
从生成内容角度介绍开源AI大模型
人工智能·ai·大模型·qwen
Jack_abu2 天前
RAG系统学习之——RAG技术详解与实战指南
llm·rag·ollama