windows下docker运行ollama

最终效果

前言

我们之前说过,在dify里配置ollama时,由于dify是在docker里,而ollama是在宿主机上,所以二者的网络需要一些技巧来打通。

其中有一个办法,就是把ollama的IP暴露出来。

这其实看似不安全,实则还挺危险的。

当时,就一直想着,如果能用docker部署ollama就好了。


前序步骤

安装wsl

安装docker desktop

设置一个mirror地址,用于下载image。

这些都有写过,麻烦各位翻一下。

每次开机,都需要把docker desktop打开。

不然所有docker命令都用不了。

所以这也算是一个前置的步骤吧。

使用步骤

执行指令

代码如下(示例):

shell 复制代码
docker run --gpus=all -d -v ollama:/root/.ollama -p 11434:11434 --name ollama ollama/ollama

出来这个看不懂的东西后,就说明成功了。

代码如下(示例):

c 复制代码
data = pd.read_csv(
    'https://labfile.oss.aliyuncs.com/courses/1283/adult.data.csv')
print(data.head())

回到docker desktop的界面,就可以看到:

打开terminal:

执行:

复制代码
ollama run qwen2.5

相关推荐
( •̀∀•́ )9201 分钟前
GitHub Actions SSH 部署密钥
运维·ssh·github
louqle16 分钟前
docker基本知识及常用命令汇总
运维·docker·容器
学烹饪的小胡桃31 分钟前
【运维学习】实时性能监控工具 WGCLOUD v3.6.2 更新介绍
linux·运维·服务器·学习·工单系统
叫致寒吧44 分钟前
Docker
运维·docker·容器
杨浦老苏1 小时前
现代流媒体聚合播放器冬瓜TV MAX
docker·群晖·多媒体
白露与泡影1 小时前
使用systemd,把服务装进 Linux 心脏里~
linux·运维·python
l1t2 小时前
用docker安装oracle 19c
运维·数据库·docker·oracle·容器
k***92163 小时前
【Linux】进程概念(五):详解环境变量的本质
linux·运维·服务器
专业开发者3 小时前
艾通科技(ITON Technology)借助蓝牙 ® 网状网络,构建适用于自动化控制应用的大规模设备网络
运维·物联网·自动化
KakiNakajima3 小时前
CentOS 7 x86系统安装EMQX 【kaki备忘录】
linux·运维·centos