前言:
在我们的Mysql生产环境中,无论是数据库的高可用容灾还是读写分离等经典架构都离不开主从复制这一主流配置。这里提供一个SHELL脚本实现批量并可动态配置我们的生产环境中的MYSQL实例并利用微信公众号实现延迟以及连接数过高的告警。
------------------------------MonitorScriptStart-----------------------------------------------------------
#!/bin/bash
#日志模块
curdate=$(date +"%Y%m%d")
curtime=$(date +'%Y-%m-%d %H:%M:%S')
logname="repl_check_"$curdate".log"
logfile=/mysqldata/repl_check_log/$logname
## 两种方式获取需要检测从库主从关系,推荐第二种方式(将DB信息存入元数据表,方便管理)
# 1. 从库实例巡检列表,硬编码列表
#Slave_list=("10.10.10.10:3306 10.10.10.100:3306")
# 主库列表
#MainDB_list=("101.101.101.101:3306 101.101.101.100:3306")
# 2. 从元数据信息中获取实例列表
Slave_list=$(/usr/bin/mysql -h127.0.0.1 -P3306 -uroot --default-character-set=utf8 cmdb -Ne'select concat(slave_ip,":",port) from cmdb_mysql_info where slave_inst in ();')
MainDB_list=$(/usr/bin/mysql -h127.0.0.1 -P3306 -uroot --default-character-set=utf8 cmdb -Ne'select concat(slave_ip,":",port) from cmdb_mysql_info where msater_inst in ();')
# RO实例复制状态巡检
function slv_check() {
local ip_port=($1)
local wechat_url=($2)
for i in ${ip_port[@]}
do
send_flag="init"
ProcCnt=0
ip=$(echo $i|awk -F":" '{print $1}')
port=$(echo $i|awk -F":" '{print $2}')
io_thread=$(mysql -uroot -h$ip -P$port -e"show slave statusG" |grep Slave_IO_Running: |awk '{print $2}')
sql_thread=$(mysql -uroot -h$ip -P$port -e"show slave statusG" |grep Slave_SQL_Running: |awk '{print $2}')
slv_delay=$(mysql -uroot -h$ip -P$port -e"show slave statusG" |grep Seconds_Behind_Master: |awk '{print $2}')
ProcCnt=$(mysql -uroot -h$ip -P$port -Ne"select count(*) from information_schema.processlist;")
TotalProc=$(mysql -uroot -h$ip -P$port -Ne"show variables like 'max_connections';" |awk '{print $2}')
ProcPct=$(printf "%d" $((ProcCnt*100/TotalProc)))
echo $TotalProc $ProcCnt $ProcPct
if [ ! -n "$io_thread" ] && [ ! -n "$sql_thread" ];then
msg="实例"$ip":"$port":主从配置为空,请及时查看!"
else
if [ x"$io_thread" == x'Yes' ] && [ x"$sql_thread" == x'Yes' ];then
if [ $slv_delay -gt 10 ];then
msg="实例"$ip":"$port":延迟"$slv_delay"秒"
echo $curtime" "$msg >>$logfile
else
send_flag="replication_ok"
msg="实例"$ip":"$port":replication_ok"
echo $curtime" "$msg >>$logfile
fi
else
msg="实例"$ip":"$port",io_thread或者sql_thread断开,请及时查看"
echo $curtime" "$msg >>$logfile
fi
fi
if [ $ProcPct -gt 75 ] && [ $ProcPct -le 90 ];then
msg="实例"$ip":"$port"连接数百分比达到"$ProcPct"%,请注意!"
echo $curtime" "$msg >>$logfile
elif [ $ProcPct -gt 90 ];then
msg="实例"$ip":"$port"连接数百分比达到"$ProcPct"%,请立即查看!"
echo $curtime" "$msg >>$logfile
else
msg="实例"$ip":"$port"连接数百分比达到"$ProcPct"%,正常"
echo $curtime" "$msg >>$logfile
fi
done
}
function MasterLoadMon() {
local ip_port=($1)
for i in ${ip_port[@]}
do
ip=$(echo $i|awk -F":" '{print $1}')
port=$(echo $i|awk -F":" '{print $2}')
ProcCnt=$(mysql -uroot -h$ip -P$port -Ne"select count(*) from information_schema.processlist;")
TotalProc=$(mysql -uroot -h$ip -P$port -Ne"show variables like 'max_connections';" |awk '{print $2}')
ProcPct=$(printf "%d" $((ProcCnt*100/TotalProc)))
if [ $ProcPct -gt 75 ] && [ $ProcPct -le 90 ];then
msg="实例"$ip":"$port"连接数百分比达到"$ProcPct"%,请注意!"
echo $curtime" "$msg >>$logfile
elif [ $ProcPct -gt 90 ];then
msg="实例"$ip":"$port"连接数百分比达到"$ProcPct"%,请立即查看!"
echo $curtime" "$msg >>$logfile
else
msg="实例"$ip":"$port"连接数百分比达到"$ProcPct"%,正常"
echo $curtime" "$msg >>$logfile
fi
done
}
## 微信公众号发送告警
function wechat_send(){
local w_url=$1
local w_msg=$2
echo "starting send msg to "$w_url
curl "$1"
-H 'Content-Type: application/json'
-d '
{
"message": {
"content": "'$w_msg'"
}
}'
}
# 主函数
function main(){
slv_check "${slave_list[@]}" "$prod_url"
MasterLoadMon "${MainDB_list[@]}" "$prod_url"
}
## Start Running...
main
------------------------------MonitorScriptEnd-----------------------------------------------------------
脚本运行时的日志效果(图中IP与端口做了脱敏)
![2aed1401fe3a356c591121dfb2fed138.png](https://i-blog.csdnimg.cn/blog_migrate/2293130ae10e7c035014403133b3a66a.jpeg)
脚本运行时如若检测到有超过阈值的主从延迟或者高连接数时的微信告警效果
![28d6a50bbca6ddc4d41836c5723f81f9.png](https://i-blog.csdnimg.cn/blog_migrate/055c752e95dbc1cc4954f61f8af43930.jpeg)