MySQL 主从延迟监控脚本(pt-heartbeat)

ゝ一世哀愁。 2022-08-06 01:05 255阅读 0赞

对于MySQL数据库主从复制延迟的监控，我们可以借助percona的有力武器pt-heartbeat来实现。pt-heartbeat通过使用时间戳方式在主库上更新特定表，然后在从库上读取被更新的时间戳然后与本地系统时间对比来得出其延迟。本文主要是通过脚本来定期检查从库与主库复制的延迟度并发送邮件，供大家参考。

有关pt-heartbeat工具的安装可以参考：[percona-toolkit的安装及简介  
][percona-toolkit_]    有关pt-heartbeat工具的介绍可以参考：[使用pt-heartbeat监控主从复制延迟][pt-heartbeat]

1、脚本概述  
   a、脚本定期使用--check方式单次检查当前的延迟性(定期的方式可以使用cron job比如每1分钟或5分钟)  
   b、通过设定指定的延迟阀值来判断当时的延迟性是否在可控范围  
   c、一旦当前的延迟大于指定阀值，则马上使用--monitor方式不停的监控其延迟性并写入到日志文件  
   d、对于--monitor方式，其进程运行超过30分钟，自kill其进程，以避免无限期运行导致日志过大，空间不够用

2、脚本内容

[mysql@SZDB run]$ more ck_slave_lag.sh 
    #!/bin/bash
    #set -x
    if [ $# -ne 3 ];then
          echo "usage:"
          echo "ck_slave_lag.sh <Servier-id> <MaxLag> <LogDir>"
          exit 0;
    fi
    
    # Author : Leshami
    # Blog   : http://blog.csdn.net/leshami
    
    ServerID=$1
    MaxLag=$2
    LogDir=$3
    Timestamp=`date +%Y%m%d_%H%M%S`
    Rentition=7
    LogFile=$LogDir/slave_lag_$Timestamp.log
    LagDetail=$LogDir/slave_lag_Detail_$Timestamp.log
    mailadd=leshami@12306.cn
    
    echo $ServerID
    echo $MaxLag
    echo $LogDir
    echo $LogFile
    echo $LagDetail
    echo $mailadd
    
    if [ ! -d $LogDir ];then
        mkdir -p $LogDir
    fi
    
    Lag=`/usr/bin/pt-heartbeat --user=monitor --password=xxx -S /tmp/mysql.sock -D test --master-server-id=$ServerID --check`
    Lag=`echo ${Lag%.*}`
    #Lag=3
    echo $Lag
    ptStatus=`ps -ef|grep pt-heart|grep daemonize`
    echo $ptStatus
    
    if [ $Lag -gt $MaxLag ]; then
        echo "The current date is `date` at `hostname`."          >>$LogFile 
        echo "The current lag log file is $LogFile."              >>$LogFile
        echo "The current replication lag is $Lag."               >>$LogFile
        echo "The replication lag is larger than max lag $MaxLag." >>$LogFile
       
        if [ -z "$ptStatus" ] ; then
            echo "Start a monitor daemon with below command: "        >>$LogFile 
            echo "pt-heartbeat --user=monitor --password=xxx -S /tmp/mysql.sock -D test " >>$LogFile
            echo " --master-server-id=11 --monitor --print-master-server-id --daemonize --log=$LagDetail" >>$LogFile
            /usr/bin/pt-heartbeat --user=monitor --password=xxx -S /tmp/mysql.sock -D test \
            --master-server-id=$ServerID --monitor --print-master-server-id --daemonize --log=$LagDetail
            echo "More detail please check lag log from $LagDetail." >>$LogFile
            cat $LogFile | mutt -s "Found slave lag on `hostname`." $mailadd
        fi
    fi
    
    if [ -n "$ptStatus" ] ; then
        STime=`ps -ef|grep pt-heart|grep daemonize |gawk '{print $5}'`
        Pid=`ps -ef|grep pt-heart|grep daemonize |gawk '{print $2}'`
        STime=`date '+%Y%m%d'`" "$STime
        s_STime=`date -d "$STime" '+%s'`
        s_ETime=`date +%s`
        DiffSec=`expr $s_ETime - $s_STime`
    
        echo $STime
        echo $s_STime
        echo $s_ETime
        echo $DiffSec
    
        if [ "$DiffSec" -gt 1800 ]; then
           echo "kill -9 $Pid"
           kill -9 $Pid
        fi
    fi
    
    # Remove history slave lag log.
    find $LogDir -name "*slave_lag*" -ctime +$Rentition -delete 
    exit

3、部署参考

[mysql@SZDB run]$ crontab -l
    
    #check slave lag
    */1 * * * * /run/ck_slave_lag.sh 11 3 /log/SlaveLag

[percona-toolkit_]: http://blog.csdn.net/leshami/article/details/41315139
[pt-heartbeat]: http://blog.csdn.net/leshami/article/details/41645493