[解决]Prometheus 与 Grafana进行组合,但是不显示数据与图像

问题场景描述

prometheus配合Grafana目前应该是最主流的配置了,今天接到需求,要求做一个监控的产品,除了主机基本指标的监控,还涉及到日志收集及分析预警展示及搜索。

对于这个需求还是原地爆炸,目前还是准备基础的监控,就是进行主机的基本属性监控,包含CPU,内存使用等监控,但是prometheus与Grafana用起来后,效果是这样的:

解决办法

经过百度,发现是服务器与浏览器时间不同步的原因,因为在prometheus的web界面报警了,报警内容如下:

Warning! Detected 254.70 seconds time difference between your browser and the server. Prometheus relies on accurate time and time drift might cause unexpected query results.

意思就是服务器与浏览器时间不同步,然后我进行了核实,确实相差这么多时间:

服务时间

浏览器时间

找到问题后就开始进行解决,解决办法:将服务器与浏览器同步

操作步骤

同步服务器时间,需要安装ntpd,yum -y install ntp

ps:因为我之前安装了NTP集群,因为配置CDH,所以进行时间同步的时候总是报错:

反正就是各种方式进行尝试,但是无一成功,最后想起来当时配置NTP集群的时候我进行的是本地时间配置,就是局域网内设置时间,然后可以同步到其他服务器,所以我现在直接修改服务器时间不就可以了?

这里我使用了脚本,直接同步修改三个服务器时间,dt.sh 脚本内容如下:

!/bin/bash

for i in hadoop101 hadoop102 hadoop103

do

echo "========== $i 时间修改成功 =========="

ssh -t i "sudo date -s 1"

done

命令:

sh dt.sh "2020-10-21"

先修改日期在修改时间,一起修改会报错

sh dt.sh "10:29:45""

再次查看时间:

时间调整完后,不用重启Prometheus ,Prometheus 的web端报警消失:

等了几分钟,grafana出现了数据,在此过程我重启了node_exporter,因为后台node_exporter总是会自动退出:

重启了全部node_exporter后:

相关推荐
xixingzhe215 小时前
Prometheus+Grafana监控服务器
grafana·prometheus
牛奶咖啡1318 小时前
Prometheus+Grafana构建云原生分布式监控系统(十六) _基于Alertmanager的告警机制(一)
云原生·prometheus·prometheus告警整合·prometheus告警配置·prometheus告警规则·prometheus触发告警·告警规则配置实践
南宫乘风2 天前
Loki 日志采集落地:从单机 Helm 部署到 Promtail 采集与 Grafana 查询
grafana
码农小卡拉3 天前
Prometheus 监控 SpringBoot 应用完整教程
spring boot·后端·grafana·prometheus
牛奶咖啡133 天前
Prometheus+Grafana构建云原生分布式监控系统(十五)_Prometheus中PromQL使用(二)
云原生·prometheus·集合运算·对查询结果排序·直方图原理·统计掉线的实例·检查节点或指标是否存在
咖啡啡不加糖4 天前
Grafana 监控服务指标使用指南:打造可视化监控体系
java·后端·grafana
牛奶咖啡134 天前
Prometheus+Grafana构建云原生分布式监控系统(十四)_Prometheus中PromQL使用(一)
云原生·prometheus·promql·计算一个时间范围内的平均值·将相同数据整合查看整体趋势·计算时间范围内的最大最小比率·向量标量的算术运算
世界尽头与你4 天前
(修复方案)CVE-2021-43798: Grafana路径遍历漏洞
安全·grafana
牛奶咖啡135 天前
Prometheus+Grafana构建云原生分布式监控系统(十三)_Prometheus数据模型及其PromQL
云原生·prometheus·prometheus数据类型·promql使用场景·promql表达式解析·promql数据类型·监控系统的方法论与指标
AC赳赳老秦6 天前
外文文献精读:DeepSeek翻译并解析顶会论文核心技术要点
前端·flutter·zookeeper·自动化·rabbitmq·prometheus·deepseek