容器-汇总所有环境下的日志排查问题

​ 日常工作中经常需要排查问题,对于容器环境docker/containerd以及kubernetes环境都会有,所以这里汇总一下各种容器环境下的日志定位方便排查问题。

​ 日志分为控制台日志以及存储日志,存储日志那就看容器中的服务自身的读写哪个文件了,所以本文这里主要针对控制台的输出日志。

​ 容器引擎主要用到的是docker/containerd以及kubernetes,所以只整理这三种。

1. docker

查找容器

复制代码
#docker ps -a|grep myService

a. 查看容器标准输入输出控制台日志

复制代码
#docker logs myService

b. 查找控制台日志存储位置

复制代码
#docker inspect myService|grep LogPath
        "LogPath": "/data/docker/containers/479cb09a433fa67cc8c448b76cf731e3f4d986763bf16e5c47ea9590067723f5/479cb09a433fa67cc8c448b76cf731e3f4d986763bf16e5c47ea9590067723f5-json.log",
2. containerd

containerd的client工具主要使用的是 ctr和nerdctl,ctr 是containerd的官方client,nerdctl是containerd的类docker client,和使用docker一样

复制代码
#ctr container ls 
#ctr -n k8s.io container ls

#nerdctl ps -a
#nerdctl -n k8s.io ps -a

因为在ctr run的时候如果未指定 --log-uri的情况下默认没有控制台日志,所以没法像docker logs一样查看容器日志。当然如果指定了--log-uri则看容器LogPath即可。

3. kubernetes

因为日志是kubelet写的,所以和具体运行时无关,pod的日志在kubernetes源码中变量 podLogsRootDirectory 控制的,默认存储到了/var/log/pods下面,所以在该目录下查找即可

复制代码
#kubectl --kubeconfig /root/.kube/config-test -n my-ns logs agent-8rc8w 

# ll /var/log/pods/
total 92
drwxr-xr-x 3 root root 4096 Dec  4 20:52 cert-manager_cert-manager-webhook-59f9c4db6b-7m6hv_bc48d66a-8a34-48c7-bc58-8d964d744088
drwxr-xr-x 3 root root 4096 Dec  4 20:59 ingress-nginx_ingress-nginx-controller-fkgkd_6dd070cc-d072-4fd9-9b75-4b40d38115f2
drwxr-xr-x 3 root root 4096 Dec  4 21:01 kata-system_kata-deploy-mrkv4_82e51388-81ed-47a4-a300-5c25e583990e
相关推荐
IT大白鼠4 小时前
Ingress 与 Ingress-Controller:K8s 七层 HTTP 反向代理技术详解与实践
http·容器·kubernetes
徐小黑ACG5 小时前
nginx配置文件
linux·服务器·nginx
新时代牛马5 小时前
Linux VFS 完整篇:从path_openat、dentry/inode 到page cache 与挂载排障
linux·运维·服务器
java_logo5 小时前
Docker 部署 Rocky Linux:轻松搭建 RHEL 兼容企业级基础镜像平台
linux·docker·容器·rocky linux·基础镜像·轩辕镜像·rhel 兼容
拂拉氏5 小时前
【知识讲解】 Linux虚拟地址空间认识
linux·虚拟地址空间
新时代牛马7 小时前
Linux 驱动中断与定时完整篇:从 request_threaded_irq 到hrtimer 选型与排障
linux·运维·服务器
分支预测失败9 小时前
RISC-V 核间中断 IPI 实战:从 MSIP 寄存器到 IMSIC 消息投递
linux·后端
GeW10 小时前
RHCE考试避坑指南"90%考生容易忽略的细节
linux
IT大白鼠11 小时前
Istio 结合 K8s 实现流量管理:服务网格灰度、熔断、限流实战
云原生·kubernetes·istio
键盘会跳舞11 小时前
【C++多线程】死锁诊断工具实战:从 Windows 到 Linux 的全链路排查
linux·c++·windows·死锁