如何将AI大模型部署到本地电脑

所需工具:
Ollama
Docker
open-webui

  1. 下载并安装Ollama

  2. 下载AI模型(支持中文较好的模型qwen2

    Windows命令行输入:

bash 复制代码
ollama run qwen2


  1. 下载并安装Docker

  2. 通过Docker部署open-webui

    Windows命令行输入:

bash 复制代码
docker run -d -p 3000:8080 --add-host=host.docker.internal:host-gateway -v open-webui:/app/backend/data --name open-webui --restart always ghcr.io/open-webui/open-webui:main

安装完docker镜像,可以在Docker软件中看到:

点击自动在浏览器中打开网页:

然后便可以愉快的在浏览器网页上使用AI模型了

相关推荐
Jackilina_Stone1 小时前
【论文阅读笔记】“万字”关于深度学习的图像和视频阴影检测、去除和生成的综述笔记 | 2024.9.3
论文阅读·人工智能·笔记·深度学习·ai
远洋录1 小时前
AI Agent的安全实践:权限控制与数据保护
人工智能·ai·ai agent
ht巷子1 小时前
Zotero中使用Deepseek翻译
ai·zotero·deepseek
Florian10 小时前
2024年度Graph+AI开源探索思考
ai·agent·graph·2024·tugraph
雪球小梦18 小时前
AI x 长寿:OpenAI开发出逆龄AI GPT-4b micro
人工智能·microsoft·ai·openai·azure
l1m0_19 小时前
什么是波士顿矩阵,怎么制作?AI工具一键生成战略分析图!
人工智能·ai·信息可视化·矩阵·aigc·波士顿矩阵
.NET骚操作1 天前
Sdcb Chats 技术博客:数据库 ID 选型的曲折之路 - 从 Guid 到自增 ID,再到 Guid
ai·c#·.net·chats
Bruce_Liuxiaowei1 天前
Edge-TTS在广电系统中的语音合成技术的创新应用
前端·python·ai·edge·语音识别·广电系统
豌豆花下猫2 天前
Python 潮流周刊#87:媲美 OpenAI-o1 的开源模型(摘要)
后端·python·ai
Alluxio2 天前
Alluxio 联手 Solidigm 推出针对 AI 工作负载的高级缓存解决方案
人工智能·机器学习·缓存·ai