pt-heartbeat 监控 MySQL主从延迟
mysql 在进行主从同步时，从库需要拉取主库的 binlog 进行 sql 回放，因此理论上只要主库存在数据更新，就一定存在主从延迟。mysql 提供了Seconds_Behind_Master 参数来计算主从延迟。但是Seconds_Behind_Master参数是精确到秒的。如果存在毫秒级延迟该参数并不能准确获取到。关于Seconds_Behind_Master参数是怎样计算出来的请参考博客：MySQL主从延迟Seconds_Behind_Master的计算方式。如果期望更精确的获取到主从延迟，Percona Toolkit工具箱提供了 pt-heartbeat 工具可以用来监控主从延迟。
背景：
在某次生产环境中，MySQL采用了读写分离。业务反馈一个事务在主库写入数据后，随后读取数据读不到，但是手动登录到从库查看数据已经存在了。因此怀疑主从延迟造成了从库读不到数据。查看了报错时间点的 zabbix 监控，对MySQL 主从延迟的采集周期是30秒一次。且监控显示主从延迟均为0， zabbix 正是获取的Seconds_Behind_Master参数。因 zabbxi 采集周期较长，且Seconds_Behind_Master参数监测主从延迟并不准确。故无法判断事发时刻主从延迟为多少。所以想到了使用 pt-hearttbeat 来检测主从延迟。
原理：
pt工具在主库上面创建一张测试表heartbeat
以一秒的频率去更新这个的记录并把当前时间写入到heartbeat表中，因为主从的关系，从库也会有这个表，从库也会不停的更新字段，通过从库的ts字段减去主库的ts字段，就得出了主从延迟的实时时间。
安装与使用：
从官方下载安装包，建议下载源码自己编译。percona-toolkit官方下载。
perl Makefile.PL PREFIX=/home/mysql/pt # 如果不写路径，默认安装到/usr/local/bin make make test make install
如何使用：
1）、在主库创建 heartbeat 表每秒更新这个时间戳
./pt-heartbeat --user=root --password=123456 --host=127.0.0.1 --port=3006 --create-table -D heartbeat --interval=1 --update --replace --daemonize
--daemonize：意思是后台运行，可以先不用这个变量，看一下这个命令执行是否正确
--user=root --password=123456 --host=127.0.0.1 -D test 主库的mysql连接信息和heartbeat表存放的数据库
--update 更新主的heartbeat表，这个参数是后台进程必须的参数也可以用--replace替代
--replace 使用replace替换--UPDATE操作
2）、监控与从库的延迟
./pt-heartbeat -D heartbeat --table=heartbeat --master-server-id=1 --monitor -h127.0.0.1 -uroot -p123456 -P3006 --interval=1
--master-server-id=129 是主库的server-id，不写这个参数也是可以的
-h 192.168.88.130 -uroot -p123456 从机的信息
--monitor 监控从服务器的参数选项
监控结果如下图所示：
第一列是实时延迟，第二列是1分钟延迟，第三列是5分钟延迟，第四列是15分钟延迟 。因为笔者测试的环境没有搭建主从，测单机 mysql 到他自身的延迟，所以都是0
其他参数：
Usage: pt-heartbeat [OPTIONS] [DSN] --update|--monitor|--check|--stop 其中--update, --moniter,--check,--stop都是单独使用的，并且--update, --monitor, and --check are mutually exclusive --daemonize and --check are mutually exclusive.他们之间还是存在互斥。 Options: --ask-pass 使用密码进行mysql连接时给予提示 --charset=s -A 默认的字符选项 --check 执行一次从库的监控就结束 --check-read-only 如果是只读的服务器那么使用该选项会保持插入 --config=A 使用逗号分隔，如果指定了，那么该参数作为命令行的第一个选项 --create-table 如果表不存在创建表heartbeat --daemonize 创建后台的更新shell --database=s -D 指定连接的数据库 --dbi-driver=s Specify a driver for the connection; mysql and Pg are supported (default mysql) --defaults-file=s -F 通过提供的文件进行mysql连接 --file=s 输出最新的 --monitor监控信息到指定的文件 --frames=s 设置时间周期(default 1m,5m,15m) --help 显示帮助信息 --host=s -h 指定连接的host --[no]insert-heartbeat-row 在使用--tables的时候默认是插入一条记录到表heartbeat前提是表中不存在该记录行 --interval=f 指定更新和监控heartbeat表的频率默认是1S --log=s 当使用daemonized进行后台更新操作时输出所有的信息到指定的该文件 --master-server-id=s 指定主的server-id --monitor 监控从服务器的参数选项 --password=s -p 指定密码 --pid=s 创建pid文件 --port=i -P 指定连接时使用的端口 --print-master-server-id 打印输出master-server-id --recurse=i Check slaves recursively to this depth in --check mode --recursion-method=a Preferred recursion method used to find slaves ( default processlist,hosts) --replace 使用replace替换--UPDATE操作 --run-time=m 指定监控的时长，单位有： s=seconds, m=minutes, h=hours, d=days; 如果比指定默认是以秒为单位一直监控下去 --sentinel=s Exit if this file exists (default /tmp/pt- heartbeat-sentinel) --set-vars=A Set the MySQL variables in this comma-separated list of variable=value pairs --skew=f 指定执行从库检查的延时时长默认是0.5 --socket=s -S 指定连接时使用的socket文件 --stop 停止后台更新进程并生成--sentinel指定的文件 --table=s 指定更新的表(默认是heartbeat) --update 更新主的heartbeat表，这个参数是后台进程必须的参数也可以用--replace替代 --user=s -u 指定用户名 --utc 忽略系统时间仅使用UTC --version 显示版本信息 --[no]version-check Check for the latest version of Percona Toolkit, MySQL, and other programs (default yes)
官方手册：https://www.percona.com/doc/percona-toolkit/LATEST/pt-heartbeat.html
