Centos8.X 搭建Grafana+Jmeter+Influxdb 性能实时监控平台
前言
- 本篇文章引用了小菠萝测试笔记，大部分内容非原创，基于自身实操过程中，完善了部分。
- 本篇随笔是在Linux上搭建的，后面会补充在docker以及k8s上如何部署安装
工具介绍
|
工具 |
介绍 |
|
Jmeter |
压测工具 |
|
InfluxDB |
Go 语言开发的一个开源分布式时序数据库，非常适合存储指标、事件、分析等数据 |
|
Grafana |
Javascript 开发的前端工具，用于访问 InfluxDB，自定义报表、显示图表等，支持二次开发 |
Centos8安装InfluxDB
InfluxDB 官网下载路径：https://portal.influxdata.com/downloads/
安装InfluxDB
wget https://dl.influxdata.com/influxdb/releases/influxdb-1.6.3.x86_64.rpm sudo yum localinstall influxdb-1.6.3.x86_64.rpm
修改配置文件
vim /etc/influxdb/influxdb.conf
【http】模块
- 8086端口：Grafana访问Influxdb数据库的端口
enabled = true bind-address = ":8086"
【graphite】模块
- database = “jmeter” ：写入到Influxdb哪个数据库，此处配置了jmeter，相当于jmeter压测工具写入数据到Influxdb的jmeter数据库中（配置文件配置了，但是库还没有，需要自己创建）
- 2003端口：Jmeter连接数据库，写入数据的端口
enabled = true database = "jmeter" retention-policy = "" bind-address = ":2003" protocol = "tcp" consistency-level = "one"
启动InfluxDB
- 启动命令： systemctl start influxdb.service
- 查看状态命令： systemctl status influxdb.service
- 备注：如果启动后，配置文件未生效（jmeter压测工具写入数据到Influxdb的jmeter数据库报错），执行命令
cd /etc/influxdb/
influxd -config influxdb.conf
创建InfluxDB的jmeter数据库
进入influxdb数据库命令行：influx -precision rfc3339 查看当前有哪些数据库：show databases 创建【graphite】模块配置的database:create database jmeter
退出influxdb数据库命令行：exit
Influxdb数据库部分操作已全部完成
Centos8安装Grafana
安装Grafana
wget https://dl.grafana.com/oss/release/grafana-6.5.2-1.x86_64.rpm sudo yum localinstall grafana-6.5.2-1.x86_64.rpm
sudo yum localinstall grafana-6.5.2-1.x86_64.rpm
启动Grafana
启动命令： systemctl start grafana-server.service
查看状态命令： systemctl status grafana-server.service
访问Grafana
- 访问Grafana的端口为3000，由于端口未配置进出站规则，所以暂时无法访问（当然如果你防火墙没开，就没有这个问题），需要配置Linux防火墙相关参数
开放3000端口：firewall-cmd --zone=public --add-port=3000/tcp --permanent 更新进出站规则：firewall-cmd --reload
- 访问Grafana，当前Linux系统IP地址（ifconfig）加3000端口号
- 用户名密码均是admin
Jmeter压测工具
往Influxdb数据库写入数据，通过监听器的后端监听器实现
后端监听器配置
运行Jmeter脚本，查看数据库数据是否写入
命令行进入Influxdb数据库，发现数据成功写入
influx -precision rfc3339
show databases
use jmeter
show measurements
Jmeter压测工具写入Influxdb数据含义
Influxdb生成的表前缀含义
- jmeter.all ：代表了所有请求；当后端监听器选项summaryOnly=true时，只有samplerName=all的表
- jmeter.get ：使用get方法的HTTP请求
- jmeter.post ：使用post方法的HTTP请求
Influxdb生成的表数据含义
- 跟Jmeter线程组设置相关的表
- jmeter.：是后端监听器rootMetricsPrefix选项配置
| 指标 | 含义 |
| jmeter.test.minAT | 最小活跃线程数 |
| jmeter.test.maxAT | 最大活跃线程数 |
| jmeter.test.meanAT | 平均活跃线程数 |
| jmeter.test.startedT | 启动线程数 |
| jmeter.test.endedT | 结束线程数 |
请求响应时间指标的表
- 重点：每个sampler都包含了所有响应时间指标，每个sampler的每个指标都会有单独的一个表存储结果数据
- jmeter.get/post.:后端监听器rootMetricsPrefix选项配置+实际请求的方法
- <percentileValue>：后端监听器percentiles选项配置，展示百分之多少的数据
| 指标 | 含义 |
| jmeter.get/post.ok.count | sampler的成功响应数 |
| jmeter.get/post.h.count | 服务器每秒命中次数(每秒点击数，即TPS） |
| jmeter.get/post.ok.min | sampler响应成功的最短响应时间 |
| jmeter.get/post.ok.max | sampler响应成功的最长响应时间 |
| jmeter.get/post.ok.avg | sampler响应成功的平均响应时间 |
| jmeter.get/post.ok.pct<percentileValue> | sampler响应成功的所占百分比 |
| jmeter.get/post.ko.count | sampler的失败响应数 |
| jmeter.get/post.ko.min | sampler响应失败的最短响应时间 |
| jmeter.get/post.ko.max | sampler响应失败的最长响应时间 |
| jmeter.get/post.ko.avg | sampler响应失败的平均响应时间 |
| jmeter.get/post.ko.pct<percentileValue> | sampler响应失败的所占百分比 |
| jmeter.get/post.a.count | sampler响应数(ok.count+ko.count) |
| jmeter.get/post.sb.bytes | 已发送字节 |
| jmeter.get/post.rb.bytes | 已接收字节 |
| jmeter.get/post.a.min |
sampler响应的最短响应时间 (ok.count和ko.count的最小值) |
| jmeter.get/post.a.max |
sampler响应的最长响应时间 (ok.count和ko.count的最大值) |
| jmeter.get/post.a.avg |
sampler响应的平均响应时间 (ok.count和ko.count的平均值) |
| jmeter.get/post.a.pct<percentileValue> |
sampler响应的百分比 （根据成功和失败的总数来计算） |
配置Grafana
首先进入Grafana的首页，可以看到官方画了个流程：先创建数据源，再创建数据面板
创建数据源
一共有两个入口哈，可以在首页直接点击 Create your first data source ，也可以看第二张图按步骤进入创建页面
然后，选择InfluxDB作为我们的数据源
到此为止，数据源就配置成功啦！！
配置数据看板
Grafana&InfluxDB集成，展示测试结果数据
panel基础使用
按上面的步骤创建好DashBoard后，再通过panel展示具体数据，先介绍下panel的入口
一般选 Add Query 先，当然选 Choose Visualization 也可以，进去后可以相互切换的
Convert to row 就是生成一行，可以将展示差不多一致类型数据的panel放到里面，统一管理，收起or展开；
如下图，我将描述线程数和响应数的panel放在同一个Row了
数据绑定
查看总线程数、成功响应数、失败响应数
可以先点Add Query，进入到下面的界面
若想看成功响应数和失败响应数，只需要切换表名即可；
可以发现跟我一开始只展示数字不太一样，因为图表类型还没设置；当我们只想看数据而不想看数据趋势图的话，可以改变它的类型；
在同一个界面，点击左侧列表选中第二个icon，然后选择Singlestat即可
查看所有请求、get请求、post请求的TPS
如果想在同一个panel里展示多个指标数据的话，可以通过在Panel里Add Query
基本的数据绑定已经教会大家啦，自己想要展示什么数据直接改变表名就行了
顺带附上官方提供的一个数据看板图，大家也可以照搬照抄用它的panel，手动添加每个指标
至此，初级版的Grafana+Jmeter+Influxdb 性能实时监控平台初步搭好啦！
当然博主是不建议Jmeter使用 GraphiteBackendListenerClient 来采集数据的，因为请求多起来的时候会有非常多的表，维护成本也会增加；后面将会介绍如何通过 InfluxDBBackendListenerClient 来采集数据
配置Backend Listener之InfluxDBBackendListenerClient
配置项含义
首先来看看每个配置项的含义
- influxdbUrl：安装influxdb的路径；主要格式：http://主机地址:8086/write?db=数据库名
- application：应用名称；在 events 表中对应的字段是 application
- measurement：表名；数据存储到哪个表，默认是jmeter，不用改即可
- summaryOnly：同GraphiteBackendListenerClient
- samplersRegex：同GraphiteBackendListenerClient
- percentiles：同GraphiteBackendListenerClient
- testTitle：测试名称；在 events 表中对应的字段是 text ，JMeter在测试的开始和结束时自动生成注释，该注释的值以'start'和'end'结尾
- eventTags：Grafana允许为每个注释显示标签；在 events 表中对应的字段是 tags
不懂application和testTitle的小伙伴可以看看下面的图，可以看到同一个testTitle的两条记录的时间差就是执行测试计划的总时长
建议：只需修改application和testTitle即可，可以相同也可以不相同，其他配置跟着图片走就好了；当然安装路径还是要改的哈
查看InfluxDB
使用InfluxDBBackendListenerClient好处就是，再多的请求也只会生成两张表：
events ：主要拿存事件的
jmeter ：存测试结果数据的，Grafana也是从这个表获取数据再展示
再次Grafana&InfluxDB集成，展示测试结果数据
这次就不再需要自己去创建DashBoard和Panel了，因为在官方模板库，已经有一个非常完美的模板了，当然前提是你要用 InfluxDBBackendListenerClient 采集数据才能有效的哈
首先，进入官方模板库： https://grafana.com/dashboards ，然后跟着图片导入模板并初始化即可
只要你的数据源，表名配的没有错，Jmeter再执行一下测试计划，DashBoard中筛选下时间，就可以成功看到数据啦！
模板自带了三个下拉筛选框
data_source：数据源，在Grafana配置了多少个就显示多少个
application：在Jmeter配置好的application，如果每次测试计划执行时的application都不一样，你就可以通过这个筛选出对应测试时机的结果数据了
transaction：在Jmeter配置好的sampleList，譬如我只发了get、post请求，这里就只会给你选get、post；可以滑到页面下面看到针对某个请求的数据展示
