如何设置Ollama可以让其它机器远程访问它的服务?

比如Ollama当前地址是192.168.0.98 ,在本地可以用127.0.0.1:11434 连访问,但是远程的其它服务器连不上,浏览器打不开这个地址网页。同样用curl也打不开,这样不需要在AI Agent软件里测试,就知道其服务不可用。

其实这是一个不是问题的问题,因为只要像下面那样,到Ollama的配置里面处理一下就行了。

之所以单独拿出来记录,是因为还需要穿过NAT路由器,这样实践的时候就颇废了一些周折。

配置Ollama

针对Windows系统,打开Ollama,进入Settings配置:

打开"Expose Ollama to the network"选项,并save

这时候再本地打开网页,ok

复制代码
Ollama is running

但是现在本机可以,远程还是不行。对很多人来说,其实这时候应该远程已经能访问了。

防火墙配置

如果不能访问,这时候就可以看下本机的防火墙配置。

查看Ollama的端口是否放开:

不明白为什么有两个Ollama.exe,一个打开了Private,一个打开了Public。于是把它们都打开。理论上这样做就应该能访问了。

检查网络配置

很不巧,配置完防火墙,还是不行。 这里跨了一个NAT路由器,而且是外网想访问内网,所以用了Easytier组网,组网参考:https://skywalk.blog.csdn.net/article/details/149661717

后来检查网络配置,发现是easytier的网卡ip地址配置错了。没有把网卡设为同一网段。Ollama放在了10.1.2网段,而客户端放在了10.1.20网段,两个网段不在同一网段,所以无法连通。这里是废了很大周折才发现,因为一开始根本没有往这方面想。根本原因是客户端那边配置的时候大意敲错了,当时没能及时发现错误并修改。

重新配置成同一网段,终于ok了。

(这里跨了一个NAT路由器,而且是外网想访问内网,所以用了Easytier组网,组网参考:https://skywalk.blog.csdn.net/article/details/149661717

测试一下:

复制代码
curl 10.1.2.98:11434

输出

复制代码
skywalk@ub19:~$ curl 10.1.2.98:11434
Ollama is runnings

证明可以跨nat路由器访问了!

相关推荐
福大大架构师每日一题7 天前
ollama v0.30.8 最新更新解读:修复启动提供方选择错误,提示词缓存更稳,MLX 推理与递归模型全面增强
ollama
江华森7 天前
TCP/IP 协议栈实战 — 7 个实验详解
网络·tcp/ip·智能路由器
行走__Wz7 天前
【网工入门-eNSP模拟-07】单臂路由
网络·智能路由器
不方便,你要方便吗?7 天前
华为数通 HCIA 到 HCIE 学习大纲(第二部分:HCIP 篇)
智能路由器
lisw058 天前
【计算机科学技术】路由器(route):概念、历史、内容与战略!
机器学习·智能路由器·软件工程
zbtlink8 天前
Mesh组网:真需求还是被制造的需求?
网络·智能路由器
大佐不会说日语~8 天前
在 Windows 本地用 Docker 部署向量模型(bge-m3)
windows·docker·容器·llm·ollama
袁小皮皮不皮8 天前
6.HCIP OSPF域间防环机制与虚链路
服务器·网络·笔记·网络协议·学习·智能路由器
CoderYanger8 天前
Java EE:5.网络原理-初识
java·网络·面试·职场和发展·java-ee·智能路由器·学习方法
腾飞开源9 天前
05_Dify接入Ollama本地大模型
人工智能·项目实战·dify·ai智能体·ollama·企业级应用·接入模型