基于 Prometheus+Alertmanager+Grafana 打造监控报警后台(四)-Grafana告警配置

前言

之前我们已经尝试了在 prometheus 上创建警报,并且使用 alertmanager 来发送通知了: 基于 Prometheus+Alertmanager+Grafana 打造监控报警后台(二)-Alertmanager部署与告警路由配置 - 使用 alertmanager 发送警报。

但是正常情况下,我们都是在 grafana 后台查看我们所创建的 dashboard 仪表盘。 同时 grafana 后台也可以显示我们在 prometheus 上创建的规则 (包含警报规则和记录规则)。今天我们在grafana上创建告警规则,使用grafana来进行告警通知。

一、创建联络点

在创建告警前需要配置邮件 smtp 服务
(基于 Prometheus+Alertmanager+Grafana 打造监控报警后台(三)-Grafana安装及介绍)/opt/grafana/config/grafana.ini

创建消息通知模版

模版内容:

yaml 复制代码
{{ define "server.offline.info" }}
{{ range .Alerts }}
> 告警名称:{{ index .Labels "alertname" }}
> 服务器IP: {{.Annotations.summary}}
> 触发时间:{{ index .StartsAt }}
> 采集任务:node_exporter
{{ end -}}

当前该服务器无法访问,`node_exporter` 指标中断。请立即检查网络、电源或主机状态!

{{ end }}

{{ template "server.offline.info" . }}


创建联络点

填写名称、选择通知方式、填写模版(以邮箱和企业微信为例)

二、创建报警规则



Pending period可设置报警时间,多长时间没有恢复是触发告警,防止误报

创建标签,这个标签非常重要需要在后期的通知策略中使用与联络人进行关联

设置消息体:模版中使用

三、设置通知策略

labels就是刚刚在创建规则时填写的标签

contact point是刚刚在联络点创建的通知

这样报警和通知就联系起来了。

相关推荐
guo_wen_qiang10 分钟前
mac中iTerm有没有类似xshell远程连接服务器的用户名密码方式,不用每次都要输入用户密码
运维·服务器·macos
ai小陈22 分钟前
PyTorch多GPU分布式训练实战:从单卡脚本迁移到DDP
服务器·人工智能·pytorch·分布式·深度学习·ai·gpu算力
沫璃染墨29 分钟前
《从零入门Linux系统篇(二十九):文件篇·二——深入文件描述符:从文件描述符表到重定向,再到Shell实现》
linux·运维·服务器·c++·驱动开发·系统架构
云上工程笔记1 小时前
2026 年 GPU 云服务器成本对比榜单:显存、算力、单小时价格和任务完成成本怎么算
运维·服务器
团子股股东峥哥1 小时前
day27-RHEL-访问Linux文件系统
linux·运维·服务器
佳児素花痴╮2 小时前
Linux IO模型详解:从阻塞到多路复用
linux·运维·服务器
tg_xianheyun2 小时前
2026BytePlus CDN加速应用场景全面解析
服务器·数据库·阿里云·云计算·cdn·全球访问优化·云直播
朝发如雪2 小时前
快速掌握Linux(4)(进程)
java·linux·服务器
啦啦啦啦啦zzzz2 小时前
共享内存的网络聊天室
linux·服务器·网络·c++·网络编程
蒲锘2 小时前
Devops项目阶段 10:Prometheus 监控与 Alertmanager 邮件告警
prometheus