Docker Container 可观测性最佳实践

Docker Container 介绍

Docker Container( Docker 容器)是一种轻量级、可移植的、自给自足的软件运行环境,它在 Docker 引擎的宿主机上运行。容器在许多方面类似于虚拟机,但它们更轻量,因为它们不需要模拟整个操作系统。相反,容器共享宿主机的操作系统内核,并在用户空间中运行。

Docker 容器可观测对于确保容器化应用程序的性能、稳定性和可用性至关重要,本文主要以纯 Docker 环境下(非K8S ),构建 Container 的可观测性。

观测云

使用观测云可以轻松采集到容器的 cpu 、内存、网络、IO 等核心指标,并自动采集容器的标准输出日志,使用观测云可以有效地监控和管理容器化应用程序,一键实现容器可观测。

部署 DataKit

登录观测云,点击集成按钮,选择 DataKit,会自动生成安装 DataKit 命令。

DataKit 安装完成后,默认开启了 container 采集器,container 采集器主要采集 K8S 和 docker 容器的指标、日志等信息。执行命令 datakit monitor 可以数据查看采集情况,在 Inputs Info 中 logging/xxx 表明正在采集当前 xxx 容器的日志,container-mertic 表明正在采集容器的指标。

关键指标

  • docker_containers
Metric Description Type Unit
block_read_byte Total number of bytes read from the container file system (only supported docker). int B
block_write_byte Total number of bytes wrote to the container file system (only supported docker). int B
cpu_numbers The number of the CPU core. int count
cpu_usage The percentage usage of CPU on system host. float percent
cpu_usage_base100 The normalized cpu usage, with a maximum of 100%. float percent
mem_capacity The total memory in the host machine. int B
mem_limit The limit memory in the container. int B
mem_usage The usage of the memory. int B
mem_used_percent The percentage usage of the memory is calculated based on the capacity of host machine. float percent
mem_used_percent_base_limit The percentage usage of the memory is calculated based on the limit. float percent
network_bytes_rcvd Total number of bytes received from the network (only count the usage of the main process in the container, excluding loopback). int B
network_bytes_sent Total number of bytes send to the network (only count the usage of the main process in the container, excluding loopback). int B

视图

登录观测云控制台,点击「场景」 -「新建仪表板」,输入 "docker" , 选择 "Docker 监控视图",点击 "确定" 即可添加内置视图。

  • 概览
  • CPU & 内存
  • IO & Network
  • 日志

监控器(告警)

容器重启告警

容器启动时间小于5分钟,触发容器重启告警。

CPU 利用率告警

容器 cpu 使用率,基于宿主机总 cpu 百分比利用率进行判断触发告警。

内存利用率告警

容器内存使用率,基于容器内存限制(没有设置容器内存限制按照主机最大内存计算)进行判断触发告警。

监控效果

  • 重启告警
  • 监控自动恢复

总结

在观测云的助力下,一键部署 Agent,自动采集 Docker 相关的日志、指标等数据, 在平台一键开启监控 Dashboard 和监控器,实时观测容器运行情况,使容器可观测性变的方便、快捷、高效。

相关推荐
IT界的老黄牛1 天前
Jenkins 监控一条龙:接入、看板 9964、11 条告警规则直接抄走
jenkins·grafana·prometheus·监控·ci-cd·告警规则
SkyWalking中文站1 天前
SkyWalking 11 与 BanyanDB 0.11:在存储引擎内部实现 Trace 尾部采样
运维·监控·自动化运维
行百里er1 天前
BeanPostProcessor:包装 Feign Client
spring boot·后端·监控
行百里er2 天前
HandlerInterceptor 和 WebFilter:两套 HTTP 请求拦截
后端·架构·监控
utmhikari3 天前
【架构艺术】端到端监控告警和预案治理
架构·监控·告警·稳定性·sre·预案
盛世宏博智慧档案3 天前
把传感器变成控制器:DI采集 + DO联动的车间边缘自治方案
监控·以太网温湿度传感器·车间温湿度·工厂温湿度
刘某的Cloud6 天前
k8s部署prometheus架构规则
linux·运维·kubernetes·prometheus·监控
白鲸开源7 天前
DolphinScheduler 挂了你不知道?Prometheus + Grafana 监控兜底方案,亲测可用
开源·grafana·监控
杨浦老苏8 天前
群晖 Docker 部署 LAN-Sheriff:实时监控局域网设备对外连接
网络安全·docker·监控·群晖·网络监控
可观测性用观测云8 天前
技术实战:观测云告警到飞书群并精准@相关人
监控