如何将AI大模型部署到本地电脑

所需工具:
Ollama
Docker
open-webui

  1. 下载并安装Ollama

  2. 下载AI模型(支持中文较好的模型qwen2

    Windows命令行输入:

bash 复制代码
ollama run qwen2


  1. 下载并安装Docker

  2. 通过Docker部署open-webui

    Windows命令行输入:

bash 复制代码
docker run -d -p 3000:8080 --add-host=host.docker.internal:host-gateway -v open-webui:/app/backend/data --name open-webui --restart always ghcr.io/open-webui/open-webui:main

安装完docker镜像,可以在Docker软件中看到:

点击自动在浏览器中打开网页:

然后便可以愉快的在浏览器网页上使用AI模型了

相关推荐
寻星探路5 分钟前
【Python 全栈测开之路】Python 进阶:库的使用与第三方生态(标准库+Pip+实战)
java·开发语言·c++·python·ai·c#·pip
AI智能探索者8 小时前
揭秘大数据领域特征工程的核心要点
大数据·ai
少林码僧8 小时前
2.31 机器学习神器项目实战:如何在真实项目中应用XGBoost等算法
人工智能·python·算法·机器学习·ai·数据挖掘
秉承初心10 小时前
ModelEngine 就像搭积木:技术原理是零件,选型案例是说明书
ai·大模型·modelengine
CORNERSTONE36512 小时前
AI与MES的融合——从“执行记录”到“智能决策”
人工智能·ai·mes
土星云SaturnCloud14 小时前
液冷技术的未来:相变冷却、喷淋冷却等前沿技术探索
服务器·人工智能·ai
寻道模式16 小时前
【时间之外】创业踩坑指南(16)-科技手段
科技·ai·rpa
Corleo16 小时前
记录一次复杂的 ONNX 到 TensorRT 动态 Shape 转换排错过程
python·ai
m0_6038887116 小时前
Decentralized Autoregressive Generation
ai·去中心化·区块链·论文速览
效率客栈老秦17 小时前
Python Trae提示词开发实战(12):AI实现API自动化批量调用与数据处理让效率提升10倍
人工智能·python·ai·prompt·trae