k8s环境排查nginx转发nacos请求失败问题

一、问题背景

k8s部署两个服务,一个nginx,一个nacos, 服务信息如下(nacos有两个端口):

服务 serviceName service类型 port targetPort nodePort
nginx monitor-cp-nginx NodePort 80 80 31082
nacos monitor-cp-nacos ClusterIP 8848 8848 -
nacos monitor-cp-nacos ClusterIP 9848 9848 -

ng的default.conf配置文件关于nacos部分(将请求转发到nacos):

预期效果:

当请求nginx:服务器IP:31082/nacos时候,ng将请求代理到nacos服务,此时显示nacos的登录页面。

问题出现在请求nginx:服务器IP:31082/nacos时,并没有出现nacos的页面。

二、问题排查

2.1 错误日志

进入nginx容器查看日志,日志目录:/var/log/nginx下的error.log显示内容:

日志显示连接nacos服务失败。

2.2 验证网络

进入nginx容器,验证下网络是否畅通:

确实是连接不上。

2.3 排查nacos服务

2.3.1 确保pod正常运行

执行 kubectl get pod -n oap-dev | grep nacos,可以看到pod是running状态:

2.3.2 检查service服务

执行kubectl get svc -n oap-dev | grep nacos

可以看到两个端口88489848,没有问题。

此处的端口显示的是yaml文件中port字段值。

2.3.3 检查endpoint服务

执行kubectl get ep -n oap-dev | grep nacos

查看两个端口,此处的端口值是yaml文件中的targetPort字段值。

这两个端口值与规划值不符,应该也是8848和9848。(应该是之前执行了一个错误yaml文件,所以才导致端口与规划不符)

至此发现问题所在,将nacos.yaml文件中targetPort的值修改过来,重新执行kubectl apply -f nacos.yaml

三、验证

访问:服务器IP:31082/nacos,页面正常显示:

相关推荐
小谈不敲代码1 小时前
Higress 生产级调优手册
云原生·kubernetes·gateway·负载均衡·higress
MyFreeIT2 小时前
Docker Network
运维·docker·容器
ezreal_pan2 小时前
Docker 多容器日志统一查看
运维·docker·容器
叫我弓木吉3 小时前
从零开始:在宝塔面板上搭建你的专属隐私搜索引擎(SearXNG)
搜索引擎·docker·容器·开源·mango
小小克3 小时前
k8s控制器管理
云原生·容器·kubernetes
程序猿阿越4 小时前
kubelet源码阅读
后端·kubernetes·源码阅读
m0_525724726 小时前
端到端 GitOps + 金丝雀流程测评报告
云原生·自动化·k8s·devops
LayZhangStrive6 小时前
后端开发中间件 - Nacos下载并快速使用教程
中间件·nacos
名字还没想好☜6 小时前
kubectl 排障实战:jsonpath 精准取值、custom-columns、events 排序与 top 速查
运维·前端·chrome·docker·kubernetes
無法複制7 小时前
Windows10安装配置Docker Desktop教程
运维·docker·容器