如何将AI大模型部署到本地电脑

所需工具:
Ollama
Docker
open-webui

  1. 下载并安装Ollama

  2. 下载AI模型(支持中文较好的模型qwen2

    Windows命令行输入:

bash 复制代码
ollama run qwen2


  1. 下载并安装Docker

  2. 通过Docker部署open-webui

    Windows命令行输入:

bash 复制代码
docker run -d -p 3000:8080 --add-host=host.docker.internal:host-gateway -v open-webui:/app/backend/data --name open-webui --restart always ghcr.io/open-webui/open-webui:main

安装完docker镜像,可以在Docker软件中看到:

点击自动在浏览器中打开网页:

然后便可以愉快的在浏览器网页上使用AI模型了

相关推荐
fthux1 小时前
装闭 RenoPit 源码解析(08):多模态AI调用、重试与文本降级
人工智能·ai·开源·github·open source·renopit
tachibana21 小时前
文件上传分布式限流如何做?
人工智能·ai·大模型·llm·prompt
智码看视界2 小时前
Day49-AI微服务化-将大模型能力封装为标准微服务
java·微服务·ai·架构·大模型·sse流式输出·ai中台
安逸sgr2 小时前
激活函数有什么用?Sigmoid、Tanh、ReLU 到底怎么选?
人工智能·ai·大模型·agent·智能体
熊猫钓鱼>_>3 小时前
Seedance 2.0 技术深度解析:重构AI视频生成的世界模型新范式
人工智能·笔记·ai·重构·音视频·变革·sedence2.0
VIP_CQCRE3 小时前
用 Ace Data Cloud Studio,把内容营销变成自动运行的 AI 工作流
ai·自动化·内容营销·mcp·acedatacloud
阿克兔3 小时前
建筑兔零基础AI自学记录120|实战1
ai
my_styles3 小时前
ai开发-langchain4j-进阶-03-流式输出
ai·langchain4j
云贝教育-郑老师3 小时前
8.29 杭州线下沙龙|OpenTenBase城市行:当 AI 智能体成为数据库的新生产力
学习·ai·dba
赵大仁17 小时前
Agent 安全:沙箱、权限、Prompt 注入与审计
ai·大模型·agent·ai安全·合规