k8s pod网络排查教程

1、背景

背景:在日常的k8s运维中,经常会遇到pod之间网络无法访问,域名无法解释的情况。且容器中网络排查命令不全,导致无法准确定位问题。

2、nsenter介绍

bash 复制代码
#Centos 下载方式
$ yum install util-linux -y

nsenter 是一个 Linux 命令行工具,作用是可以进入 Linux 系统下某个进程的命令空间,如 network namespace、mount namespace、uts namespace、ipc namespace、pid namspace、user namespace、cgroup

所以使用 nsenter 调试容器网络,可以按照以下步骤操作:

1、找到pod中容器的进程id

2、通过nsenter命令进入

由于找到pod中容器的进程id比较麻烦,所以这里写了一个脚本工具去完成上述过程

vim e-net.sh

bash 复制代码
#!/usr/bin/env bash

function e_net() {
  set -eu
  pod=`kubectl get pod ${pod_name} -n ${namespace} -o template --template='{{range .status.containerStatuses}}{{.containerID}}{{end}}' | sed 's/docker:\/\/\(.*\)$/\1/'`
  pid=`docker inspect -f {{.State.Pid}} $pod`
  echo -e "\033[32m Entering pod netns for ${namespace}/${pod_name} \033[0m\n"
  cmd="nsenter -n -t ${pid}"
  echo -e "\033[32m Execute the command: ${cmd} \033[0m"
  ${cmd}
}

# 运行函数
pod_name=$1
namespace=${2-"default"}
e_net

chmod +x e-net.sh

3、案例

比如我需要排查k8s中 devops名称空间中jenkins容器的网络

1、获取pod名称

kubectl get pods -n devops

2、通过脚本加入容器命名空间

e-net.sh jenkins-bf5ffdf5b-zgxqs devops

3、验证

执行ip a ,可以看到ip已经和容器内部的ip一致

4、此时就可以通过宿主机的各种命令去排查网络问题(ping、nc、telnet、nslookup)

注意如果通过nslookup去排查域名,需要指定k8s Coredns的地址,不然默认访问的是宿主机的dns,达不到排查的效果。

nslookup loki.log.svc.cluster.local 10.96.0.10

相关推荐
YIBO04082 分钟前
WSL2下Docker desktop的Cadvisor容器监控
运维·docker·容器·wsl·wsl2
weixin_428498494 分钟前
Docker inspect 命令介绍
docker·容器
weisian15134 分钟前
云原生--核心组件-容器篇-6-Docker核心之-镜像仓库(公共仓库,私有仓库,第三方仓库)
docker·云原生·容器
lml485643 分钟前
源码编译安装LAMP
网络
冼紫菜1 小时前
[特殊字符] Docker 从入门到实战:全流程教程 + 项目部署指南(含镜像加速)
运维·分布式·后端·docker·云原生·容器
WXDcsdn2 小时前
华为VRF技术基于三层交换机的应用实例
服务器·网络·华为
BLEACH-heiqiyihu2 小时前
k8s-Pod生命周期
云原生·容器·kubernetes
小马爱打代码2 小时前
Spring Boot × K8s 监控实战-集成 Prometheus 与 Grafana
spring boot·kubernetes·prometheus
会讲英语的码农3 小时前
[计算机网络]物理层
网络·计算机网络
christine-rr3 小时前
【25软考网工】第四章无线通信网(1)移动通信与4G/5G技术、CDMA计算
网络·5g·网络工程师·软考·考试