自定义监控进程、日志、mysql主从状态、mysql主从延迟

最新推荐文章于 2024-05-19 21:09:47 发布
最新推荐文章于 2024-05-19 21:09:47 发布
阅读量56 收藏
点赞数
文章标签： mysql adb android
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/m0_69852463/article/details/133631278
版权

自定义监控进程、日志、mysql主从状态、mysql主从延迟

1.自定义监控进程

2.自定义监控日志

3.自定义监控MySQL主从状态

  1. 自定义监控MySQL主从延迟

主机说明

主机ip
zabbixserver.example.com(zabbix服务端)192.168.10.131
slave.example.com(zabbix客户端，MySQL主从 从机)192.168.10.132
node2.example.com(MySQL主从 主机)192.168.10.133

1.自定义监控进程

打开自定义监控功能

#在服务端进入zabbix_agentd.conf配置文件
[root@slave ~]# cd /usr/local/etc/
[root@slave etc]# ls
zabbix_agentd.conf  zabbix_agentd.conf.d
[root@slave etc]# vim zabbix_agentd.conf

#找到UnsafeUserParameters
## Option: UnsafeUserParameters
#       Allow all characters to be passed in arguments to user-defined parameters.
#       The following characters are not allowed:
#       \ ' " ` * ? [ ] { } ~ $ ! & ; ( ) < > | # @
#       Additionally, newline characters are not allowed.
#       0 - do not allow
#       1 - allow
#
# Mandatory: no
# Range: 0-1
# Default:
# UnsafeUserParameters=0
UnsafeUserParameters=1  #在下面加这一行

下面这行命令可以查看进程存在的个数

[root@slave srcipt]# ps -ef | grep "agentd" | grep -Ev "grep" | wc -l  #名字带有agentd的进程个数有6个
6
[root@slave srcipt]# ps -ef | grep "httpd" | grep -Ev "grep" | wc -l   #名字带有httpd的进程个数有0个
0

通过这条命令我们可以在脚本里面判断经常存不存在

创建一个/scripts/目录存放脚本，所有的监控脚本以后都放在这里

[root@slave ~]# mkdir /script
[root@slave ~]# cd /script
[root@slave srcipt]# vim showprocess.sh 
[root@slave srcipt]# cat showprocess.sh 
#!/bin/bash

process=$(ps -ef | grep "$1" | grep -Ev "grep|$0" | wc -l)    #$1位置变量，$0脚本本身

if [ $process -eq 0 ];then  #当值等于0时 打印1
    echo "1"
else                         #其他情况打印0
    echo "0"
fi

在zabbix_agentd主配置文件中编写(这里直接写到配置文件最后一行)

[root@slave srcipt]# vim /usr/local/etc/zabbix_agentd.conf
......
# ListenBacklog=
UserParameter=show_process[*],/bin/bash /srcipt/showprocess.sh $1

修改配置文件后重启zabbix_agent服务

[root@slave srcipt]# systemctl restart zabbix_agentd 
[root@slave srcipt]# systemctl status zabbix_agentd 
● zabbix_agentd.service - zabbix agentd
   Loaded: loaded (/usr/lib/systemd/system/zabbix_agentd.service; enabled; vendor preset: disabled)
   Active: active (running) since Wed 2023-09-27 22:39:21 CST; 13s ago
  Process: 35328 ExecStop=/usr/bin/pkill zabbix_agentd (code=exited, status=0/SUCCESS)
  Process: 35330 ExecStart=/usr/local/sbin/zabbix_agentd (code=exited, status=0/SUCCESS)
 Main PID: 35332 (zabbix_agentd)
    Tasks: 6 (limit: 24687)
   Memory: 2.1M
   CGroup: /system.slice/zabbix_agentd.service
           ├─35332 /usr/local/sbin/zabbix_agentd
           ├─35333 /usr/local/sbin/zabbix_agentd: collector [idle 1 sec]
           ├─35334 /usr/local/sbin/zabbix_agentd: listener #1 [waiting for connection]
           ├─35335 /usr/local/sbin/zabbix_agentd: listener #2 [waiting for connection]
           ├─35336 /usr/local/sbin/zabbix_agentd: listener #3 [waiting for connection]
           └─35337 /usr/local/sbin/zabbix_agentd: active checks #1 [idle 1 sec]

Sep 27 22:39:21 slave.example.com systemd[1]: Stopped zabbix agentd.
Sep 27 22:39:21 slave.example.com systemd[1]: Starting zabbix agentd...
Sep 27 22:39:21 slave.example.com systemd[1]: Started zabbix agentd.

接下来在服务端操作

配置监控项

在这里插入图片描述

配置触发器

在这里插入图片描述

在这里插入图片描述

配置完成后提示报错并收到了邮件

在这里插入图片描述

在这里插入图片描述

2.自定义监控日志

进入https://github.com/chendao2015/pyscripts这个网站下载log.py到/script目录下面

#这是一个python脚本，可以用来查看windows和linux中的进程
作用：检查日志文件中是否有指定的关键字
第一个参数为日志文件名（必须有，相对路径、绝对路径均可）
第二个参数为seek position文件的路径（可选项，若不设置则默认为/tmp/logseek文件。相对路径、绝对路径均可）
第三个参数为搜索关键字，默认为 Error
[root@slave script]# ls
log.py  showprocess.sh

log.py脚本使用方法

#安装一个python3
[root@slave script]# yum -y install python3
#
[root@slave script]# echo -e "hehe\nxixi\njjyy" >> test.log 
[root@slave script]# cat test.log 
skhgdkjasgbdjgasdhjgsflo;iugioer
hehe
xixi
jjyy                         #只没有指定关键字默认Error为关键字，显示为0表示没有关键字
[root@slave script]# python3 /script/log.py /script/test.log  
0
[root@slave script]# cat /tmp/logseek     #查看脚本读取的位置
48[root@slave script]
[root@slave script]# echo "Error" >> test.log  #把Error写进文件
[root@slave script]# python3 /script/log.py /script/test.log   #执行脚本，发现关键字
1
[root@slave script]# python3 /script/log.py /script/test.log   #再次执行脚本
# 这个脚本的好处就是从上次检查的最后开始检查，这样就不会将日志文件中原有的Error重复检查
0
[root@slave script]# cat /tmp/logseek  #再次查看脚本读取的位置
54[root@slave script]# 
[root@slave script]# python3 /script/log.py /script/test.log /tmp/xxx  #指定两个参数，seek position文件的路径
1
[root@slave script]# cat /tmp/xxx 
54[root@slave script]# rm -rf /tmp/xxx 
[root@slave script]# touch /tmp/xxx   #创建一个新的xxx文件
[root@slave script]# python3 /script/log.py /script/test.log /tmp/xxx failed #指定三个参数，指定关键字为failed
0
[root@slave script]# echo "failed" >> /script/test.log    #给文件中添加failed
[root@slave script]# python3 /script/log.py /script/test.log /tmp/xxx failed   #执行脚本，发现关键字
1
[root@slave script]#

log.py脚本在配置文件中的用法

进入zabbix_agentd配置文件

[root@slave script]# vim /usr/local/etc/zabbix_agentd.conf
......
# ListenBacklog=
UserParameter=show_process[*],/bin/bash /srcipt/showprocess.sh $1
UserParameter=check_logs[*],python3 /script/log.py $1 $2 $3  
# 格式: #UserParameter=<key>,<shell command> 自定义键名加上脚本名三个位置变量对应log.py的三个值

配置文件改为后重启zabbix_agentd

[root@slave script]# systemctl restart zabbix_agentd

服务端查看手动触发

# 在服务端查看效果
# 需要先将服务端的/tmp/logseek文件删除，因为其属主不为服务端用户zabbix，无法查看
[root@zabbixserver ~]# zabbix_get -s 192.168.10.132 -k check_logs['/tmp/test.log']
0
手动触发告警，向监控文件中添加Error
[root@c82 scripts]# echo "Error" >> /tmp/test.log 
[root@zabbixserver ~]# zabbix_get -s 192.168.10.132 -k check_logs['/tmp/test.log']
1
[root@zabbixserver ~]# zabbix_get -s 192.168.10.132 -k check_logs['/tmp/test.log']
0
# 第二次查看又没有Error了

配置监控项

在这里插入图片描述

添加触发器

在这里插入图片描述

在这里插入图片描述

此时仪表盘没有报警，因为文件中没有Error

在这里插入图片描述

手动触发告警，向监控文件中添加Error

[root@slave tmp]# echo "Error" >> test.log 
[root@slave tmp]#

添加后30s受到告警信息

在这里插入图片描述

下一个30s后，因为检测文件没有Error，告警自动消除

在这里插入图片描述

3.自定义监控MySQL主从状态

在服务端主机和客户端主机上部署MySQL主从

1、#在两台主机上选择mariadn
2、#启动mariadb服务，无密码登录mysql并设置密码
[root@slave ~]# mysql
Welcome to the MariaDB monitor.  Commands end with ; or \g.
Your MariaDB connection id is 19558
Server version: 10.5.9-MariaDB MariaDB Server

Copyright (c) 2000, 2018, Oracle, MariaDB Corporation Ab and others.

Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.

MariaDB [(none)]> set password = password("Hte_666");
Query OK, 0 rows affected (0.002 sec)

MariaDB [(none)]> exit

由于此时刚刚安装mariadb，所以两台主机上的数据库一定是相同的，因次可以直接配置主从

主数据库操作

# 首先在主数据库里创建一个同步账号授权给从数据库使用
MariaDB [(none)]> grant replication slave on *.* to 'repl'@'192.168.10.132' identified by 'Hte_666';
Query OK, 0 rows affected (0.002 sec)

MariaDB [(none)]> flush privileges;
Query OK, 0 rows affected (0.001 sec)

设置主数据库的配置文件

[root@slave ~]# vim /etc/my.cnf.d/mariadb-server.cnf 
//找到这个地方
[mysqld]
datadir=/var/lib/mysql
socket=/var/lib/mysql/mysql.sock
log-error=/var/log/mariadb/mariadb.log
pid-file=/run/mariadb/mariadb.pid
//添加这两行
server-id = 10        //数据库服务器唯一标识符，从库的server-id值必须比主库的大，因为方便以后添加新的数据库
log-bin = mysql_bin   //启用mysql_bin日志

重启mariadb

[root@zabbixserver ~]# systemctl restart mariadb

查看日志文件mysql_bin存不存在

[root@localhost ~]# ls /var/lib/mysql/           #这个mysql_bin.000001就是日志文件
aria_log.00000001  ibdata1      ibtmp1             mysql_bin.000001  mysql_upgrade_info
aria_log_control   ib_logfile0  multi-master.info  mysql_bin.index   performance_schema
ib_buffer_pool     ib_logfile1  mysql              mysql.sock

查看主库状态

MariaDB [(none)]> show master status;
+------------------+----------+--------------+------------------+
| File             | Position | Binlog_Do_DB | Binlog_Ignore_DB |
+------------------+----------+--------------+------------------+
| mysql_bin.000001 |      328 |              |                  |
+------------------+----------+--------------+------------------+
1 row in set (0.000 sec)

在从库上的操作

进入配置文件
[root@slave ~]# vim /etc/my.cnf.d/mariadb-server.cnf 
......
[mysqld]
datadir=/var/lib/mysql
socket=/var/lib/mysql/mysql.sock
log-error=/var/log/mariadb/mariadb.log
pid-file=/run/mariadb/mariadb.pid
//添加这两行
server-id = 20        //数据库服务器唯一标识符，从库的server-id值必须比主库的大，因为方便以后添加新的数据库
log-bin = myrelay_bin //启用log_bin日志

重启mariadb

[root@slave ~]# systemctl restart mariadb
查看从库状态
MariaDB [(none)]> show master status;
+--------------------+----------+--------------+------------------+
| File               | Position | Binlog_Do_DB | Binlog_Ignore_DB |
+--------------------+----------+--------------+------------------+
| myrelay_bin.000001 |      330 |              |                  |
+--------------------+----------+--------------+------------------+
1 row in set (0.000 sec)

配置并启动主从复制（认主过程）

MariaDB [(none)]> change master to
    -> master_host='192.168.10.131',
    -> master_user='repl',
    -> master_password='Hte_666',
    -> master_log_file='mysql_bin.000001',
    -> master_log_pos=328;
Query OK, 0 rows affected (0.003 sec)

开启主从模式

MariaDB [(none)]> start slave;
Query OK, 0 rows affected (0.001 sec)

查看从服务器状态

MariaDB [(none)]> show slave status\G
*************************** 1. row ***************************
                Slave_IO_State: Connecting to master
                   Master_Host: 192.168.10.132
                   Master_User: repl
                   Master_Port: 3306
                 Connect_Retry: 60
               Master_Log_File: mysql_bin.000001
           Read_Master_Log_Pos: 328
                Relay_Log_File: mariadb-relay-bin.000002
                 Relay_Log_Pos: 4
         Relay_Master_Log_File: mysql_bin.000001
              Slave_IO_Running: Yes
             Slave_SQL_Running: Yes
......

验证：

在主库上创建一个数据库看看有没有同步到从库上

主库
MariaDB [(none)]> show databases;
+--------------------+
| Database           |
+--------------------+
| information_schema |
| mysql              |
| performance_schema |
+--------------------+
3 rows in set (0.000 sec)

MariaDB [(none)]> create database huangtianen;
Query OK, 1 row affected (0.000 sec)

MariaDB [(none)]> show databases;
+--------------------+
| Database           |
+--------------------+
| huangtianen        |
| information_schema |
| mysql              |
| performance_schema |
+--------------------+
4 rows in set (0.000 sec)

从库
MariaDB [(none)]> show databases;
+--------------------+
| Database           |
+--------------------+
| information_schema |
| mysql              |
| performance_schema |
+--------------------+
3 rows in set (0.001 sec)

MariaDB [(none)]> show databases;
+--------------------+
| Database           |
+--------------------+
| huangtianen        |
| information_schema |
| mysql              |
| performance_schema |
+--------------------+
4 rows in set (0.000 sec)

mysql主从配置完成

编写脚本，过滤出查看从机状态中有几个Yes,当Yes出现的次数不等于二时打印1否则就打印2

#以下操作在从库上进行

[root@slave script]# vim mysql_state.sh 
#! /bin/bash
mysql_state=$(mysql -uroot -pHte_666 -e"show slave status\G;" | grep "Running:" | grep -c "Yes")
 
if [ $mysql_state != 2 ];then
        echo "1"
else
        echo "0"
fi

编写zabbix_agentd配置文件

[root@slave script]# cd /usr/local/etc/
[root@slave etc]# vim zabbix_agentd.conf
......
# ListenBacklog=
UserParameter=show_process[*],/bin/bash /srcipt/showprocess.sh $1
UserParameter=check_logs[*],python3 /script/log.py $1 $2 $3
UserParameter=mysql_state,/bin/bash /script/mysql_state.sh     #添加这一行

重启zabbix_agentd服务

[root@slave etc]# systemctl restart zabbix_agentd

配置监控项

在这里插入图片描述

配置触发项

在这里插入图片描述

在这里插入图片描述

手动触发，打开主库机防火墙

30s后，显示告警信息

[root@slave ~]# systemctl start firewalld

在这里插入图片描述

4. 自定义监控MySQL主从延迟

编写脚本过滤出延迟信息数据

[root@slave script]# cat mysql_state.sh 
#! /bin/bash
mysql_state=$(mysql -uroot -phuangtianen -e"show slave status\G;" | grep "Running:" | grep -c "Yes")

if [ $mysql_state != 2 ];then
        echo "1"
else
        echo "0"
fi
[root@slave script]# chmod +x mysql_delay.sh

修改配置文件

[root@slave script]# vim /usr/local/etc/zabbix_agentd.conf
......

# ListenBacklog=

UserParameter=show_process[*],/bin/bash /srcipt/showprocess.sh $1
UserParameter=check_logs[*],python3 /script/log.py $1 $2 $3
UserParameter=mysql_state,/bin/bash /script/mysql_state.sh
UserParameter=mysql_delay,/bin/bash /scripts/mysql_delay.sh
[root@slave script]# systemctl restart zabbix_agentd    #添加这一行

配置监控项

在这里插入图片描述

配置触发项名

在这里插入图片描述

主从复制负担超过200，显示报警

修改配置文件

[root@slave script]# vim /usr/local/etc/zabbix_agentd.conf
......

# ListenBacklog=

UserParameter=show_process[*],/bin/bash /srcipt/showprocess.sh $1
UserParameter=check_logs[*],python3 /script/log.py $1 $2 $3
UserParameter=mysql_state,/bin/bash /script/mysql_state.sh
UserParameter=mysql_delay,/bin/bash /scripts/mysql_delay.sh
[root@slave script]# systemctl restart zabbix_agentd    #添加这一行

配置监控项

[外链图片转存中…(img-rubUdbB4-1696628290322)]

配置触发项名

[外链图片转存中…(img-PWvMcyCy-1696628290322)]

主从复制负担超过200，显示报警

在这里插入图片描述

嗝~壁老黄
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
zabbix监控MySQL主从状态的方法详解
09-09
主要介绍了zabbix--监控MySQL主从状态的方法，本文图文并茂给大家介绍的非常详细，具有一定的参考借鉴价值 ,需要的朋友可以参考下
zabbix监控mysql主从状态及延迟
RAB
10-09 1998
zabbix监控mysql主从状态及延迟。
zabbix监控-mysql主从复制以及延迟＜八＞
小蔡的博客
10-10 1624
文章目录一：zabbix监控-mysql主从复制1.准备环境2.安装需求3.搭建mysql主从复制4.mysql从库上部署zabbix-agent5.web界面配置mysql主机6.配置脚本7.从库上配置agentd文件8.zabbix添加监控项添加用户媒介，添加触发器行动略9.触发报警二：zabbix监控-mysql主从延迟1.从库配置脚本2.从库配置agentd文件3.zabbix主机进行脚本测试4.添加监控项5.添加触发器6.告警验证 一：zabbix监控-mysql主从复制 zabbix监控软件可以
MySQL主从状态监测方案
最新发布
qq_42108331的博客
05-19 724
MySQL主从状态监测方案
MySQL 8 主从延迟监控（复制可观测性）
JiekeXu的博客
09-25 631
作者 | Frederic Descamps来源 |https://dev.mysql.com/blog-archive/mysql-8-and-replication-observability/大家好，我是 JiekeXu,很高兴又和大家见面了,今天和大家一起来看看 MySQL 8 主从延迟监控（复制可观测性），欢迎点击上方蓝字“JiekeXu DBA之路”关注我的公众号，标星或置顶，更多干货...
prometheus监控mysql主从
y1701的博客
10-28 1602
prometheus监控mysql主从
zabbix监控MySQL主从状态和延迟
ZJunWhite的博客
09-07 459
zabbix监控MySQL主从状态和延迟
shell脚本监控mysql主从状态
09-10
主要介绍了shell脚本监控mysql主从状态,如果异常则邮件警告,需要的朋友可以参考下
深入mysql主从复制延迟问题的详解
09-10
首先，MySQL主从复制的核心在于三个关键进程：主服务器上的IO进程和从服务器上的SQL进程与IO进程。当从服务器需要复制主服务器的数据时，IO进程会连接到主服务器并请求特定日志文件和位置之后的日志内容。这个位置...
Shell脚本实现监控MySQL主从同步
09-10
主要介绍了Shell脚本实现监控MySQL主从同步,此脚本应该能适应各种各样不同的内外网环境,并同时监控MySQL运行状态,需要的朋友可以参考下
自定义监控mysql主从状态与主从延迟
qq_58328312的博客
07-12 670
环境部署：server：ip——192.168.80.128——服务器agent：ip——192.168.80.130——客户端，从库master：ip——192.168.80.129——主库前提：server主机安装 zabbix_server zabbix_agentd agent主机安装zabbix_agent 在master和agent安装mysql 1.搭建mysql主从 配置主库 配置主库文件 配置从库 测试在主库创建一个数据库到从库查看，是否同步 从库查看
zabbix详解（十二）——zabbix监控MySQL主从状态实战
永远是少年
03-27 3267
今天继续给大家介绍Linux运维相关知识，本文主要内容是zabbix监控MySQL主从同步状态。 一、MySQL主从状态配置 二、zabbix客户端监控脚本和监控项配置 三、zabbix web配置 四、效果检验
zabbix详解——zabbix监控MySQL主从状态——自动告警
lxx18202213468的博客
08-10 508
在zabbix-server端使用：zabbix_get -s “agent端ip” -k "mysql_pre" 检测是否获取成功，返回1，则表示成功。3. 检测—最新数据—选择刚添加的监控项主机—应用：等一分钟左右就会出现1或者0，1表示成功配置。3.点击操作—添加步骤—添加操作—添加用户组—添加用户—add—添加。1.配置—模板—选择配置好监控项的模板—点击触发器—创建触发器。2.填写触发器名称 —选择严重性—添加表达式和恢复表达式—添加。1.配置—模板—监控项—创建监控项。
Zabbix分布式监控，nginx监控，mysql主从监控，电话告警
kkdnmd的博客
01-21 705
分布式监控，nginx监控，mysql主从监控，电话告警
搭建 canal 监控mysql数据到RabbitMQ
yhl18931306541的博客
03-25 1404
搭建 canal 监控mysql数据到RabbitMQ
Zabbix监控mysql主从
cxyxt的博客
09-07 1311
主从复制数据监测
MySQL_主从延迟的解决方案详解
chuige2013的博客
01-05 1046
mysql主从延迟解决方案
监控mysql主从同步状态
eagle89的专栏
08-21 1701
在高并发网站架构中，MySQL数据库主从同步是不可或缺的，不过经常会发生由于网络原因或者操作错误，MySQL主从经常会出现不同步的情况，那么如何监控MySQL主从同步，也变成网站正常运行的重要环节。 MySQL同步功能由3个线程(master上1个，slave上2个)来实现，简单的说就是：master发送日志一个，slave接收日志一个，slave运行日志一个。 首先，我们解释一下show slave status中重要的几个参数:Slave_IO_Running： I/O线程是否被启动并...
自定义Metricbeat采集器：MySQL主从状态监控
在Elasticsearch中，你可以使用Kibana的数据可视化工具来查看和分析这些采集到的MySQL主从状态数据，例如监控复制延迟、主从心跳等关键指标，从而帮助你管理和优化MySQL的复制性能。 总结来说，这个教程提供了在...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值