dremio 节点监控

dremio 的节点包含了执行以及协调,我们可以基于提供的prometheus metrics 进行监控,同时基于提供的jmx 也是一个
不错的选择

主要jmx 监控项

  • heap 内存以及gc 频率
  • 直接内存使用
  • 轻量级线程监控

指标说明

  • heap 内存以及gc
    heap: memory.heap.usage
    gc: gc.PS-MarkSweep.count, gc.PS-MarkSweep.time, gc.PS-Scavenge.count, gc.PS-Scavenge.
  • 直接内存
    总执行引擎可以使用的:dremio.memory.direct_current
    总jvm 使用的:dremio.memory.jvm_direct_current

轻量级线程

可以通过 dremio.exec.work.running_fragments 监控

开启jmx 指标

 
DREMIO_JAVA_SERVER_EXTRA_OPTS='
-Dcom.sun.management.jmxremote.port=<monitoring port>
-Dcom.sun.management.jmxremote.authenticate=false 
-Dcom.sun.management.jmxremote.ssl=false'

系统提供的jmx 指标

具体可以参考连接,还是比较全的

说明

jmx-exporter 以及jmxtrans 都是不错的监控集成工具,可以生产使用

参考资料

https://docs.dremio.com/advanced-administration/monitoring.html
https://github.com/prometheus/jmx_exporter
https://github.com/jmxtrans/jmxtrans
https://github.com/rongfengliang/jmx-exporter-jmxtrans-nexus-docker-compose
https://github.com/dremio-hub/dremio-prometheus-exporter
https://docs.dremio.com/advanced-administration/telemetry.html
https://docs.oracle.com/javase/7/docs/technotes/guides/management/agent.html#gdevf

posted on 2021-02-20 22:47  荣锋亮  阅读(207)  评论(0编辑  收藏  举报

导航