pt-heatbeat 监控 mysql 主从延迟

pt-heartbeat 监控 MySQL主从延迟

mysql 在进行主从同步时，从库需要拉取主库的 binlog 进行 sql 回放，因此理论上只要主库存在数据更新，就一定存在主从延迟。mysql 提供了Seconds_Behind_Master 参数来计算主从延迟。但是Seconds_Behind_Master参数是精确到秒的。如果存在毫秒级延迟该参数并不能准确获取到。关于Seconds_Behind_Master参数是怎样计算出来的请参考博客：MySQL主从延迟Seconds_Behind_Master的计算方式。如果期望更精确的获取到主从延迟，Percona Toolkit工具箱提供了 pt-heartbeat 工具可以用来监控主从延迟。

 

背景：

在某次生产环境中，MySQL采用了读写分离。业务反馈一个事务在主库写入数据后，随后读取数据读不到，但是手动登录到从库查看数据已经存在了。因此怀疑主从延迟造成了从库读不到数据。查看了报错时间点的 zabbix 监控，对MySQL 主从延迟的采集周期是30秒一次。且监控显示主从延迟均为0， zabbix 正是获取的Seconds_Behind_Master参数。因 zabbxi 采集周期较长，且Seconds_Behind_Master参数监测主从延迟并不准确。故无法判断事发时刻主从延迟为多少。所以想到了使用 pt-hearttbeat 来检测主从延迟。

 

原理：

pt工具在主库上面创建一张测试表heartbeat

以一秒的频率去更新这个的记录并把当前时间写入到heartbeat表中，因为主从的关系，从库也会有这个表，从库也会不停的更新字段，通过从库的ts字段减去主库的ts字段，就得出了主从延迟的实时时间。

 

安装与使用：

从官方下载安装包，建议下载源码自己编译。percona-toolkit官方下载。

perl Makefile.PL  PREFIX=/home/mysql/pt    # 如果不写路径，默认安装到/usr/local/bin
make
make test
make install

如何使用：

1）、在主库创建 heartbeat 表每秒更新这个时间戳

./pt-heartbeat --user=root --password=123456  --host=127.0.0.1 --port=3006 --create-table -D heartbeat --interval=1 --update --replace --daemonize

--daemonize：意思是后台运行，可以先不用这个变量，看一下这个命令执行是否正确

--user=root --password=123456 --host=127.0.0.1 -D test 主库的mysql连接信息和heartbeat表存放的数据库

--update 更新主的heartbeat表，这个参数是后台进程必须的参数也可以用--replace替代

--replace 使用replace替换--UPDATE操作

2）、监控与从库的延迟

./pt-heartbeat -D heartbeat --table=heartbeat --master-server-id=1 --monitor -h127.0.0.1 -uroot -p123456 -P3006 --interval=1

--master-server-id=129 是主库的server-id，不写这个参数也是可以的

-h 192.168.88.130 -uroot -p123456 从机的信息

--monitor 监控从服务器的参数选项

监控结果如下图所示：

第一列是实时延迟，第二列是1分钟延迟，第三列是5分钟延迟，第四列是15分钟延迟 。因为笔者测试的环境没有搭建主从，测单机 mysql 到他自身的延迟，所以都是0

其他参数：

Usage: pt-heartbeat [OPTIONS] [DSN] --update|--monitor|--check|--stop
其中--update, --moniter,--check,--stop都是单独使用的，并且--update, --monitor, and --check are mutually exclusive
--daemonize and --check are mutually exclusive.他们之间还是存在互斥。
Options:
  --ask-pass                  使用密码进行mysql连接时给予提示
  --charset=s             -A  默认的字符选项
  --check                     执行一次从库的监控就结束
  --check-read-only           如果是只读的服务器那么使用该选项会保持插入
  --config=A                  使用逗号分隔，如果指定了，那么该参数作为命令行的第一个选项
  --create-table              如果表不存在创建表heartbeat
  --daemonize                 创建后台的更新shell
  --database=s            -D  指定连接的数据库
  --dbi-driver=s              Specify a driver for the connection; mysql and Pg
                              are supported (default mysql)
  --defaults-file=s       -F  通过提供的文件进行mysql连接
  --file=s                    输出最新的  --monitor监控信息到指定的文件
  --frames=s                  设置时间周期(default 1m,5m,15m)
  --help                      显示帮助信息
  --host=s                -h  指定连接的host
  --[no]insert-heartbeat-row  在使用--tables的时候默认是插入一条记录到表heartbeat前提是表中不存在该记录行 
  --interval=f                指定更新和监控heartbeat表的频率默认是1S
  --log=s                     当使用daemonized进行后台更新操作时输出所有的信息到指定的该文件
  --master-server-id=s        指定主的server-id
  --monitor                   监控从服务器的参数选项
  --password=s            -p  指定密码
  --pid=s                     创建pid文件
  --port=i                -P  指定连接时使用的端口
  --print-master-server-id    打印输出master-server-id
  --recurse=i                 Check slaves recursively to this depth in --check
                              mode
  --recursion-method=a        Preferred recursion method used to find slaves (
                              default processlist,hosts)
  --replace                   使用replace替换--UPDATE操作
  --run-time=m                指定监控的时长，单位有： s=seconds, m=minutes, h=hours, d=days; 如果比指定默认是以秒为单位一直监控下去
  --sentinel=s                Exit if this file exists (default /tmp/pt-
                              heartbeat-sentinel)
  --set-vars=A                Set the MySQL variables in this comma-separated
                              list of variable=value pairs
  --skew=f                    指定执行从库检查的延时时长默认是0.5
  --socket=s              -S  指定连接时使用的socket文件
  --stop                      停止后台更新进程并生成--sentinel指定的文件                              
  --table=s                   指定更新的表(默认是heartbeat)
  --update                    更新主的heartbeat表，这个参数是后台进程必须的参数也可以用--replace替代
  --user=s                -u  指定用户名
  --utc                       忽略系统时间仅使用UTC
  --version                   显示版本信息
  --[no]version-check         Check for the latest version of Percona Toolkit,
                              MySQL, and other programs (default yes)

 官方手册：https://www.percona.com/doc/percona-toolkit/LATEST/pt-heartbeat.html