Prometheus + alertmanager + n8n +接入钉钉告警自动化处理告警

一、登录n8n之后创建工作节点

测试webhook能否正常

在 n8n 工作流编辑器的顶部工具栏,点击 "Executions" (执行记录)按钮。在弹出的列表里,可以看到刚才那次 curl 请求的执行记录。

点击这条记录,就能看到 Webhook 收到的完整 JSON 数据,以及每个节点的输入输出。这能确认告警数据是否完整地传进来了。

二、用 HTTP Request 节点将告警消息推送到钉钉

第一步:添加 HTTP Request 节点

  1. Webhook 节点右侧的灰色小圆点,拖出一条线到空白处

  2. 松开鼠标,在搜索框里输入 HTTP Request

  3. 点击选择 HTTP Request 节点

第二步:配置 HTTP Request 节点

复制代码
{
  "msgtype": "text",
  "text": {
    "content": "🚨 Prometheus 告警\n告警名称:{{ $json.alerts[0].labels.alertname }}\n告警状态:{{ $json.status }}\n严重级别:{{ $json.alerts[0].labels.severity }}\n告警详情:{{ $json.alerts[0].annotations.summary }}"
  }
}

保存之后测试钉钉是否收到消息

复制代码
curl -X POST http://localhost:5678/webhook/alert   -H "Content-Type: application/json"   -d '{
    "status": "firing",
    "alerts": [{
      "labels": {
        "alertname": "CPU过载",
        "severity": "critical"
      },
      "annotations": {
        "summary": "CPU使用率超过95%"
      }
    }]
  }'

到了这一步测试发现可以收到消息

三、配置alertmanager告警规则

复制代码
route:
  # 默认接收人
  receiver: 'n8n-webhook'
  # 同组告警等待时间
  group_wait: 5s
  # 两组告警间隔时间
  group_interval: 10s
  # 重复告警间隔时间
  repeat_interval: 30s
  # 按告警名称分组
  group_by: [alertname]

receivers:
- name: 'n8n-webhook'
  webhook_configs:
  - url: 'http://192.168.158.134:31553/webhook/alert'
    send_resolved: true

重启一下alertmanager

在alertmanager服务器上测试触发告警

复制代码
curl -X POST http://192.168.158.134:31553/webhook/alert \
  -H "Content-Type: application/json" \
  -d '{
    "status": "firing",
    "alerts": [
      {
        "labels": {
          "alertname": "模拟告警",
          "severity": "warning",
          "instance": "test-server",
          "job": "test-job"
        },
        "annotations": {
          "summary": "这是一条模拟告警",
          "description": "用于测试 Alertmanager 到 n8n 的链路是否正常"
        },
        "startsAt": "2026-07-12T15:00:00Z"
      }
    ],
    "groupLabels": {
      "alertname": "模拟告警"
    },
    "commonLabels": {
      "alertname": "模拟告警"
    }
  }'

n8n是能看到成功的

但是钉钉发布的消息没有显示具体内容,所以还得要适配一下

四、添加 NoOp和Set节点优化JSON格式输出

NoOp节点不需要添加什么东西

Set节点添加以下内容Name value

复制代码
alertname	{{ $json.body.alerts[0].labels.alertname }}
status	{{ $json.body.status }}
severity	{{ $json.body.alerts[0].labels.severity }}
instance	{{ $json.body.alerts[0].labels.instance }}
summary	{{ $json.body.alerts[0].annotations.summary }}
current_value	{{ Number($json.body.alerts[0].annotations.value).toFixed(2) }}

编辑一下prometheus告警规则,能按照真实场景输出

然后重启一下prometheus,等一分钟重新观察钉钉输出

显示正常了,监控告警系统已经实现了

|------------------------------|-------|
| Prometheus 告警规则 | ✅ 已配置 |
| Alertmanager 转发到 n8n Webhook | ✅ 已配置 |
| n8n 工作流接收并解析告警数据 | ✅ 已配置 |
| Set 节点提取关键字段 | ✅ 已配置 |
| HTTP Request 发送到钉钉 | ✅ 已配置 |
| 消息格式化(保留两位小数) | ✅ 已完成 |

接下来继续实现自动化处理告警故障的功能,比如产生磁盘空间不足的告警之后自动处理等等。

相关推荐
小张成长计划..2 小时前
【Linux】10:冯·诺依曼体系结构和操作系统
linux·运维·服务器
悦儿遥遥雨15 小时前
PXE + Kickstart 无人值守批量部署系统
linux·javascript·nginx
Imagine Miracle5 小时前
【WSL】让WSL2后台持久运行不自动关闭的解决方案
linux·windows·wsl
兔C6 小时前
Linux 命令行入门学习资料 day_2
linux·运维·服务器
eggcode6 小时前
Linux命令基础与操作技巧
linux
二宝哥7 小时前
VMware Workstation 实战:CentOS 7.9 安装、桥接网络配置与克隆管理详解
linux·centos·vmware
AutumnWind04208 小时前
【4种打开Ubuntu(WSL)的方法】
linux·ubuntu
辞旧 lekkk9 小时前
【Qt系统相关】鼠标事件
linux·开发语言·qt·学习·计算机外设·萌新
是摆烂第一名呀9 小时前
【rk3506】U-Boot串口时钟未配置,导致串口彻底失效
linux·arm开发·驱动开发·嵌入式硬件
我叫洋洋9 小时前
VMware Workstation 16 桥接网络修复记录
linux·嵌入式硬件