搭建MySQL高可用集群架构 MHA 及故障切换

一. MHA架构的意义

1.1 MHA概述

• 一套优秀的MySQL高可用环境下故障切换和主从复制的软件
• MySQL故障过程中，MHA能做到0-30秒内自动完成故障切换

1.2 MHA的组成

• MHA Manager (管理节点)
• MHA Node (数据节点)

1.3 MHA特点

• 自动故障切换过程中，MHA视图从宕机的主服务器上保存二进制文件，最大程度的保证数据不丢失
• 使用半同步复制，可以大大降低数据丢失的风险
• 目前MHA支持一主多从架构，最少三台服务，即一主两从

1.4 MHA工作原理

MySQL在做主从同步和读写分离的时候，从服务器都是已经可以做到多副本机制，当其中一个从服务器宕机时不会导致业务的中断，消除了单点故障。但是主服务器依然是存在单点故障的，当主服务器宕机后整个架构都会因此而宕机。必须消除这个严重的故障出现，用MHA对master做到多机冗余机制。线网一般是做三副本，一主两主/备的架构。
在MHA之前企业经常用的架构是MMM群集技术解决master的单点故障。

二. MHA软件的配置

软件包的选择：mysql-5.7.20
mha4mysql-node-0.57.tar.gz
mha4mysql-node-0.57.tar.gz
需要软件包的可以私聊作者
服务器的设计如下：
12.0.0.12 mysql1
12.0.0. 22 mysql2
12.0.0.1 mysql3
12.0.0.28 MHA（managerj节点）

2.1 配置MySQL节点的主从同步

MHA高可用配置及故障的切换是基于数据库的主从同步进行设置的，就是因为主从同步的时候master会出现单点故障，所以需要配置MHA来避免master 的单点故障。

mysql的主从同步（一主两从）的配置方法可以参考：https://blog.csdn.net/weixin_48192495/article/details/108577753

注意点：这里的从服务器需要设置成：主/备服务器，设置主/备数据库的方法是把你想要设置成主备服务器的主配置文件里开启二进制文件功能

2.11 三个节点数据库设置的注意点

前置配置

1.master数据库的主配置文件

vim /etc/my.cnf

log_bin = master-bin                                             //开启二进制文件
log-slave-updates = ture                                       //允许同步

2.两个从数据库的配置：slaves 配置文件的修改

vim /etc/my.cnf

log_bin = master-bin
relay-log = relay-log-bin
relay-log-index = slave-relay-bin.index

注意:因为数据库选择的是5.7的版本，必须要注释掉/etc/my.cny 文件下的 [client] 下的#default-character-set=utf8否则健康检查时会因为这个报错。三台服务器的 server-id 不能一样。理论上从服务器是不需要开启二进制文件的，但是建议都开启二进制文件，因为二进制文件是不会影响中继日志的

3.Mysql1、Mysql2、Mysql3 分别做两个软链接

使节点数据库的命令便于系统所能识别

[root@Mysql1 ~]# ln -s /usr/local/mysql/bin/mysql /usr/sbin/
[root@Mysql1 ~]# ln -s /usr/local/mysql/bin/mysqlbinlog /usr/sbin/

3.Mysql1、Mysql2、Mysql3 启动 MySQL

[root@Mysql1 ~]# systemctl start mysqld
[root@Mysql1 ~]#systemctl enable mysqld

4.在所有数据库节点上授权两个用户，一个是从库同步使用，另外一个是 manager 使用

mysql> grant replication slave on *.* to 'myslave'@'12.0.0.%' identified by '123';
mysql> grant all privileges on *.* to 'mha'@'12.0.0.%' identified by 'manager';
mysql> flush privileges;

注意：主从同步需要在三个数据库节点都授权的原因是，当数据库

5.接下来在 Mysql2 和 Mysql3 分别执行同步

change master to master_host='12.0.0.12',master_user='myslave',master_password='123',master_log_file='master-bin.000003',master_log_pos=1053; 
flush privileges;
 start slave;

6.查看 IO 和 SQL 线程都是 yes 代表同步是否正常

mysql> show slave status\G;
Slave_IO_Running: Yes
Slave_SQL_Running: Yes

7.必须设置两个从库为只读模式：

mysql> set global read_only=1;

注意：设置完成直接验证主从复制功能

2.2 安装MHA软件

2.21 安装MHA依赖的环境（需要联网）

首先安装epel源

[root@MHA-manager ~]# yum install epel-release --nogpgcheck -y

安装依赖环境

yum install -y perl-DBD-MySQL \
perl-Config-Tiny \
perl-Log-Dispatch \
perl-Parallel-ForkManager \
perl-ExtUtils-CBuilder \
perl-ExtUtils-MakeMaker \
perl-CPAN

注意：MHA是基于perl语言开发的，所以依赖包都是perl类型的依赖包

2.22 安装MHA的node组件

在<注意：所有服务器>上必须先安装 node 组件，最后在 MHA-manager 节点上安装 manager 组件，因为 manager 依赖 node 组件

[root@Mysql1 ~]# tar zxvf mha4mysql-node-0.57.tar.gz
[root@Mysql1 ~]# cd mha4mysql-node-0.57
[root@Mysql1 mha4mysql-node-0.57]# perl Makefile.PL
[root@Mysql1 mha4mysql-node-0.57]# make
[root@Mysql1 mha4mysql-node-0.57]# make install

node安装后也会在/usr/local/bin 下面会生成几个脚本 （这些工具通常由MHA Manager 的脚本触发，无需人为操作）主要如下：

save_binary_logs  保存和复制master的二进制日志
apply_diff_relay_logs  识别差异的中继日志事件并将其差异的事件应用于其他的 slave
filter_mysqlbinlig        去除不必要的ROLLBACK事件（MHA已不再使用这个工具）
purge_relay_logs       清除中继日志（不会阻塞SQL线程）

2.23 在MHA-manager 的服务器上安装manager组件

再次强调：manager组件是依赖node组件工作的，所以在MHA-manager 服务器上需要先安装node组件，然后再安装manager组件

[root@MHA-manager ~]# tar zxvf mha4MHA-manager-0.57.tar.gz 
[root@MHA-manager ~]# cd mha4MHA-manager-0.57
[root@MHA-manager mha4MHA-manager-0.57]# perl Makefile.PL
[root@MHA-manager mha4MHA-manager-0.57]# make
[root@MHA-manager mha4MHA-manager-0.57]# make install

注意：manager-0.57 只支持linux7.0版本
manager-0.56 只支持linux6.0版本，7.0版本不支持

manager 安装后在/usr/local/bin 下面会生成几个工具，主要包括以下几个：

masterha_check_ssh      检查MHA的SSH配置状况
masterha_check_repl     检查MySQL复制状况
masterha_manger          启动manager的脚本
masterha_check_status   检查当前MHA运行状态
masterha_master_monitor   检测 master 是否宕机
masterha_master_swith       控制故障转移（自动或者手动）
masterha_conf_host            添加或删除配置的server信息
masterha_stop                    关闭manager

2.24 配置免密码登录，让mananger免交互过来数据库

1. 在 manager 上配置到所有数据库节点的无密码认证

[root@MHA-manager ~]# ssh-keygen -t rsa //一路按回车键
[root@MHA-manager ~]# ssh-copy-id 192.168.195.129
[root@MHA-manager ~]# ssh-copy-id 192.168.195.130
[root@MHA-manager ~]# ssh-copy-id 192.168.195.131

2. 在 Mysql1 上配置到数据库节点Mysql2和Mysql3的无密码认证

[root@Mysql1 ~]# ssh-keygen -t rsa
[root@Mysql1 ~]# ssh-copy-id 192.168.195.130
[root@Mysql1 ~]# ssh-copy-id 192.168.195.131

3. 在 Mysql2 上配置到数据库节点Mysql1和Mysql3的无密码认证

[root@Mysql2 ~]# ssh-keygen -t rsa
[root@Mysql2 ~]# ssh-copy-id 192.168.195.129
[root@Mysql2 ~]# ssh-copy-id 192.168.195.131

4. 在 Mysql3 上配置到数据库节点Mysql1和Mysql2的无密码认证

[root@Mysql3 ~]# ssh-keygen -t rsa
[root@Mysql3 ~]# ssh-copy-id 192.168.195.129
[root@Mysql3 ~]# ssh-copy-id 192.168.195.130

2.25 MHA-manager 节点的配置

1. 在 manager 节点上复制相关脚本到/usr/local/bin 目录

[root@MHA-manager ~]# cp -ra /root/mha4mysql-manager-0.57/samples/scripts /usr/local/bin
//拷贝后会有四个执行文件
[root@atlas ~]# ll /usr/local/bin/scripts/
总用量 32
-rwxr-xr-x 1 mysql mysql 3648 5 月 31 2015 master_ip_failover  #自动切换时 VIP 管理的脚本
-rwxr-xr-x 1 mysql mysql 9872 5 月 25 09:07 master_ip_online_change #在线切换时 vip 的管理
-rwxr-xr-x 1 mysql mysql 11867 5 月 31 2015 power_manager #故障发生后关闭主机的脚本
-rwxr-xr-x 1 mysql mysql 1360 5 月 31 2015 send_report #因故障切换后发送报警的脚本

2. 复制上述的自动切换时 VIP 管理的脚本到/usr/local/bin 目录，这里使用脚本管理 VIP

[root@MHA-manager ~]# cp /usr/local/bin/scripts/master_ip_failover /usr/local/bin
[root@MHA-manager ~]#vim /usr/local/bin/master_ip_failover

#!/usr/bin/env perl
use strict;
use warnings FATAL => 'all';

use Getopt::Long;

my (
$command, $ssh_user, $orig_master_host, $orig_master_ip,
$orig_master_port, $new_master_host, $new_master_ip, $new_master_port
);
#############################添加内容部分######################################
my $vip = '12.0.0.200';
my $brdc = '12.0.0.255';
my $ifdev = 'ens33';
my $key = '1';
my $ssh_start_vip = "/sbin/ifconfig ens33:$key $vip";
my $ssh_stop_vip = "/sbin/ifconfig ens33:$key down";
my $exit_code = 0;
#my $ssh_start_vip = "/usr/sbin/ip addr add $vip/24 brd $brdc dev $ifdev label $ifdev:$key;/usr/sbin/arping -q -A -c 1 -I $ifdev $vip;iptables -F;";
#my $ssh_stop_vip = "/usr/sbin/ip addr del $vip/24 dev $ifdev label $ifdev:$key";
#########################后面的不修改省略##########

3. 创建 MHA 软件目录并拷贝配置文件

[root@MHA-manager ~]# mkdir /etc/masterha
[root@MHA-manager ~]# cp /root/mha4mysql-manager-0.57/samples/conf/app1.cnf /etc/masterha/
[root@MHA-manager ~]# vim /etc/masterha/app1.cnf

[server default]
manager_workdir=/var/log/masterha/app1.log　　　　　　　　　　　　　　 ##manager工作目录
manager_log=/var/log/masterha/app1/manager.log　　　　　　　　　　　　#manager日志
master_binlog_dir=/usr/local/mysql/data/　　　　　　　　　　　　　　　　#master保存binlog的位置，这里的路径要与master里配置的binlog的路径一致，以便mha能找到
#master_ip_failover_script= /usr/local/bin/master_ip_failover　　　　#设置自动failover时候的切换脚本，也就是上边的哪个脚本
master_ip_online_change_script= /usr/local/bin/master_ip_online_change　　#设置手动切换时候的切换脚本
password=manager　　　　　　#设置mysql中root用户的密码，这个密码是前文中创建监控用户的那个密码
user=mha　　　　　　　　#设置监控用户root
ping_interval=1　　　　　　#设置监控主库，发送ping包的时间间隔，默认是3秒，尝试三次没有回应的时候自动进行railover
remote_workdir=/tmp　　　　#设置远端mysql在发生切换时binlog的保存位置
repl_password=123　　　　　　　　#设置复制用户的密码
repl_user=myslave　　　　　　 　　　　#设置复制用户的用户
report_script=/usr/local/send_report　　　　　　//设置发生切换后发送的报警的脚本
secondary_check_script=/usr/local/bin/masterha_secondary_check -s 12.0.0.12 -s 12.0.0.1
shutdown_script=""　　#设置故障发生后关闭故障主机脚本（该脚本的主要作用是关闭主机放在发生脑裂,这里没有使用）
ssh_user=root　　　　　　#设置ssh的登录用户名

[server1]
hostname=12.0.0.22
port=3306

[server2]
hostname=12.0.0.12
port=3306
candidate_master=1　　　　#//设置为候选master，如果设置该参数以后，发生主从切换以后将会将此从库提升为主库，即使这个主库不是集群中事件最新的slave
check_repl_delay=0　　　　#默认情况下如果一个slave落后master 100M的relay logs的话，MHA将不会选择该slave作为一个新的master，因为对于这个slave的恢复需要花费很长时间，通过设置check_repl_delay=0,MHA触发切换在选择一个新的master的时候将会忽略复制延时，这个参数对于设置了candidate_master=1的主机非常有用，因为这个候选主在切换的过程中一定是新的master

[server3]
hostname=12.0.0.1
port=3306

4. 测试 ssh 无密码认证，如果正常最后会输出 successfully，如下所示

---

[root@MHA-manager ~]# masterha_check_ssh -conf=/etc/masterha/app1.cnf
 .....省略
Tue Nov 26 23:09:47 2019 - [info] All SSH connection tests passed successfully.****

5.健康检查，检查主从复制

[root@MHA-manager ~]# masterha_check_repl -conf=/etc/masterha/app1.cnf

........省略

Replication Health is OK.

6.第一次配置需要去master上手动开启虚拟IP

[root@Mysql1 ~]# /sbin/ifconfig ens33:1 12.0.0.200/24

7. 启动 MHA

[root@MHA-manager ~]# nohup masterha_manager --conf=/etc/masterha/app1.cnf --remove_dead_master_conf --ignore_last_failover < /dev/null > /var/log/masterha/app1/manager.log 2>&1 &
[1] 129929

8. 查看 MHA 状态，可以看到当前的 master 是 Mysql1 节点。

[root@MHA-manager ~]# masterha_check_status --conf=/etc/masterha/app1.cnf
app1 (pid:7763) is running(0:PING_OK), master:12.0.0.22

9. 查看 MHA 日志，也以看到当前的 master 是 12.0.0.22

[root@MHA-manager ~]# cat /var/log/masterha/app1/manager.log

10. 查看 Mysql1 的 VIP 地址 192.168.8.200 是否存在？,这个 VIP 地址不会因为
manager 节点停止 MHA 服务而消失

[root@Mysql1 ~]# ifconfig

11.验证

[root@MHA-manager ~]#tailf /var/log/masterha/app1/manager.log     //启用监控观察日志记录

[root@Mysql1 ~]# pkill -9 mysql         //查看master变化

可以发现vip地址飘到了mysql2,同时主配置文件/etc/masterha/app1.cnf会被masterha_conf_host脚本所修改，原master的配置会被删除掉