Prometheus operator怎么添加targets和告警规则

使用 Prometheus Operator 管理 Prometheus 实例可以简化 Prometheus 配置和维护,包括添加 targets 和告警规则。以下是通过 Prometheus Operator 添加 targets 和告警规则的步骤:

添加 Targets

在 Prometheus Operator 中,targets 的管理主要通过 Kubernetes 的 ServiceMonitor 和 PodMonitor 资源来实现。以下是如何添加 targets 的步骤:

1. 使用 ServiceMonitor

ServiceMonitor 用于配置 Prometheus 如何发现和抓取服务(Service)的指标。以下是一个示例 ServiceMonitor 的配置:

yaml 复制代码
apiVersion: monitoring.coreos.com/v1
kind: ServiceMonitor
metadata:
  name: my-service-monitor
  namespace: default
  labels:
    release: prometheus
spec:
  selector:
    matchLabels:
      app: my-app
  endpoints:
  - port: http
    path: /metrics
    interval: 30s
  • selector.matchLabels: 指定要监控的服务的标签选择器。ServiceMonitor 会匹配具有这些标签的服务。
  • endpoints: 配置 Prometheus 抓取指标的端口和路径。
  • interval: 配置指标抓取的频率。

将上述配置文件应用到 Kubernetes 集群中:

shell 复制代码
kubectl apply -f service-monitor.yaml
2. 使用 PodMonitor

PodMonitor 用于直接从 Pod 中发现和抓取指标。以下是一个示例 PodMonitor 的配置:

yaml 复制代码
apiVersion: monitoring.coreos.com/v1
kind: PodMonitor
metadata:
  name: my-pod-monitor
  namespace: default
  labels:
    release: prometheus
spec:
  selector:
    matchLabels:
      app: my-app
  podMetricsEndpoints:
  - port: http
    path: /metrics
    interval: 30s
  • selector.matchLabels: 指定要监控的 Pod 的标签选择器。
  • podMetricsEndpoints: 配置 Prometheus 抓取指标的端口和路径。

将上述配置文件应用到 Kubernetes 集群中:

shell 复制代码
kubectl apply -f pod-monitor.yaml

添加告警规则

告警规则的管理通常通过 PrometheusRule 资源来完成。以下是如何添加告警规则的步骤:

1. 创建告警规则

编写一个 PrometheusRule 配置文件来定义告警规则。以下是一个示例配置:

yaml 复制代码
apiVersion: monitoring.coreos.com/v1
kind: PrometheusRule
metadata:
  name: my-prometheus-rules
  namespace: default
  labels:
    release: prometheus
spec:
  groups:
  - name: example
    rules:
    - alert: HighCpuUsage
      expr: sum(rate(container_cpu_usage_seconds_total[5m])) by (pod) > 0.8
      for: 5m
      labels:
        severity: critical
      annotations:
        summary: "Pod {{ $labels.pod }} is experiencing high CPU usage"
        description: "Pod {{ $labels.pod }} CPU usage is above 80% for the last 5 minutes."
    - alert: HighMemoryUsage
      expr: sum(container_memory_usage_bytes) by (pod) > 1e+08
      for: 5m
      labels:
        severity: warning
      annotations:
        summary: "Pod {{ $labels.pod }} is experiencing high memory usage"
        description: "Pod {{ $labels.pod }} memory usage is above 100MB for the last 5 minutes."
  • groups: 定义告警规则组。
  • rules: 包含具体的告警规则。每个规则定义了告警条件、持续时间、标签和注释。

将上述配置文件应用到 Kubernetes 集群中:

shell 复制代码
kubectl apply -f prometheus-rules.yaml

验证配置

1. **检查 ServiceMonitor 和 **PodMonitor

确认 Prometheus 是否正确发现了新的 targets。可以通过 Prometheus UI 的 Targets 页面查看。

2. 检查告警规则

在 Prometheus UI 的 Alerts 页面可以查看和管理告警规则。如果告警规则触发,应该能够看到对应的告警状态和通知信息。

总结

  • 添加 Targets :通过 ServiceMonitor 或 PodMonitor 资源定义服务或 Pod 的监控配置。
  • 添加告警规则 :通过 PrometheusRule 资源定义告警规则并应用到 Kubernetes 集群中。

使用 Prometheus Operator 管理 Prometheus 可以简化这些配置和维护任务,确保监控系统的高效和稳定。

运维干货分享

相关推荐
阿里云云原生17 分钟前
把主力模型用在刀刃上:一个月 300 亿 Token、31 万行 Rust 背后的 AI Coding 实践
云原生
飞奔的瓜牛34 分钟前
Wireshark 抓包实战:呼叫中心项目中的 SIP、DTMF 与 RTP 分析
运维·wireshark
对象存储与RustFS1 小时前
对象锁遇上版本化:删掉的对象还在,真删的又删不掉
后端·docker·云原生
Decay__1 小时前
SQLServer 监控体系构建 —— sql_exporter + Prometheus + Grafana 全栈实战
运维·数据库·sql·mysql·架构
遇雪长安2 小时前
wslc 来了:Docker Desktop 还要留着吗?
运维·docker·容器
装不满的克莱因瓶2 小时前
【AI时代必学】一篇文章教会你从零搭建Serverless架构
java·人工智能·ai·云原生·架构·serverless
csdn_aspnet3 小时前
【Docker 攻略】MySQL 安裝篇
运维·mysql·docker·容器
艺杯羹3 小时前
ufw 已 active,Docker 端口却仍对外开放的复盘
运维·docker·容器
阿里云云原生3 小时前
AgentCore 支持 DeepSeek Harness 托管,加速企业生产化验证
云原生
无奈笑天下4 小时前
银河麒麟桌面操作系统上磁盘无法自动挂载问题处理
linux·运维·服务器