Prometheus监控学习笔记之Prometheus查询无数据或者Grafana不显示数据的诡异问题

0x00 概述

Prometheus和Grafana部署完成后,网络正常,配置文件正常,抓取agent运行正常,使用curl命令获取监控端口数据正常,甚至Prometheus内的targets列表内都是全绿,Grafana数据源配置也是全绿;

但是Prometheus查询界面(在Windows的浏览器上)无法查询出数据,Grafan展示页面(在Windows的浏览器上)也不显示相关的监控曲线和数据。。。。。。

prometheus搜索指标显示No datapoints found。。。或者Grafana上显示都是N/A。。。

 

0x01 排查与异常

排查Prometheus agent运行状态, Prometheus Server运行状态, Grafana Sever运行状态,一切正常,网络正常,curl获取数据正常;

结果发现是用来打开Prometheus web界面和Grafana web界面的Windows机器上的时间是西五区,并不是东八区。。。。。。

将该Windows机器上的时间调整为东八区后,Prometheus web的查询和Grafana web展示一切恢复正常

 

0x02 总结

Prometheus监控各个节点对时间要求严格,在部署服务之前务必将所有机器的时间进行同步,包括用来展示和查询的windows机器。

相关请查看该issue  https://github.com/prometheus/prometheus/issues/1022

 

posted @   时光飞逝,逝者如斯  阅读(10326)  评论(0编辑  收藏  举报
编辑推荐:
· [杂谈]如何选择:Session 还是 JWT?
· 硬盘空间消失之谜:Linux 服务器存储排查与优化全过程
· JavaScript是按顺序执行的吗?聊聊JavaScript中的变量提升
· [杂谈]后台日志该怎么打印
· Pascal 架构 GPU 在 vllm下的模型推理优化
阅读排行:
· WinForm 通用权限框架,简单实用支持二次开发
· 如何为在线客服系统的 Web Api 后台主程序添加 Bootstrap 启动页面
· 硬盘空间消失之谜:Linux 服务器存储排查与优化全过程
· 面试官:DNS解析都整不明白,敢说你懂网络?我:嘤嘤嘤!
· Fleck:一个轻量级的C#开源WebSocket服务端库
点击右上角即可分享
微信分享提示