MHA高可用配置及故障切换

一、什么是MHA

MHA（MasterHigh Availability）是一套优秀的MySQL高可用环境下故障切换和主从复制的软件。
MHA 的出现就是解决MySQL 单点的问题。
MySQL故障切换过程中，MHA能做到0-30秒内自动完成故障切换操作。
MHA能在故障切换的过程中最大程度上保证数据的一致性，以达到真正意义上的高可用。

二、MHA的组成

MHA Node（数据节点）

MHA Node 运行在每台 MySQL 服务器上

三、mha的集群原理

1、从宕机崩溃的master 保存二进制日志事件（binlog  events）；
2、识别含有最新的更新 slave 日志
3、应用差异的中继日志（relay log）到其他的slave
4、应用从master保存的二进制日志事件
5、提升一个 salve 为新的master
6、使其他的slave连接行的master 进行复制。

1.同步方式

1.1异步复制

只要master完成 客户端的提交事务，就会返回给客户端信息，并不关心是否同步到数据

1.2同步复制

同步复制：主库在接收到写请求后，会等待所有的从服务器同步完毕之后，才会返回给客户端

1.3半同步复制

至少有一个从库接收到并执行完写操作后，主库才返回成功，提高了数据一致性

四、实现MHA

准备环境

1.搭建时间同步

在构建MySQL主从复制架构时，确保主从服务器之间的系统时间同步是非常重要的。这是因为MySQL在处理事务和记录二进制日志时依赖于系统时间戳，时间不一致可能会导致主从复制出现问题，如数据不一致或复制中断

##主服务器设置##
yum install ntp -y
#下载ntp服务
 
vim /etc/ntp.conf
--末尾添加--
server 127.127.10.0                            #设置本地是时钟源，注意修改网段
fudge 127.127.10.0 stratum 8                #设置时间层级为8（限制在15内）
 
systemctl start ntpd
#启动服务
 
 
##从服务器设置##
yum install ntp ntpdate -y
 
systemctl start ntpd
#启动服务
 
/usr/sbin/ntpdate 192.168.21.10
#进行时间同步,192.168.83.20为master服务器ip地址
 
crontab -e
*/30 * * * * /usr/sbin/ntpdate 192.168.21.10

master服务器：

slave1：

slave2：

2.配置master服务器

在主服务器/etc/my.cnf中修改配置文件

 
server-id = 1
#这个参数是为MySQL服务器分配的一个唯一标识号。在主从复制环境中，无论是主服务器还
#是从服务器,都必须设置一个唯一的server-id。
 
log-bin=master-bin
#log-bin用于开启二进制日志，这是实现MySQL主从复制的关键特性。这里的master-bin是指定
#二进制日志的前缀名称，二进制日志文件将以master-bin.000001,master-bin.000002等格式生成。
 
binlog_format = MIXED
#binlog_format 参数用于设置二进制日志记录格式。可能的值包括 STATEMENT、ROW 和 MIXED。
#MIXED 是一种混合模式，根据实际情况自动在STATEMENT和ROW模式之间切换。
 
log-slave-updates=true
#当设置 log-slave-updates参数为true时,从服务器在执行主服务器传过来的更新时，也会把这些
#更新记录到自己的二进制日志中。这样一来，如果从服务器又被其他从服务器复制，那么这个从服务
#器也可以成为新的主服务器，形成级联复制链。

修改完毕之后重新启动服务：systemctl restart mysqld

接下来给用户授权

grant #SQL命令，用于授予用户特定的权限。
 
replication slave #指定要授予的权限类型，这里是与主从复制相关的权限
 
on *.* #指定了授权范围,*分别代表所有数据库和所有表即此用户在任何数据库的所有表上都有复制权限。
 
'myslave'@'192.168.83.%'
#定义了用户名及其允许连接的IP地址范围。这里创建了一个名为 'myslave' 的用户，并且允许来自
#192.168.83.0/24网段内的任何IP地址连接。百分号 % 表示任意主机名或IP地址。
 
IDENTIFIED BY '123456' 
#设置用户的密码为'123456',当从服务器尝试连接主服务器进行同步时，需要使用该密码进行身份验证。

使用：show master status; 指令查询主服务器二进制日志状态的命令

配置从服务器

在/etc/my.cnf文件中添加以下字段

server-id = 2
#该从服务器唯一标识符2
 
log_bin = master-bin
#开启二进制日志文件，作为从服务器，同时为备用主服务器，当主服务器宕机时，本服务器替代为
#主服务器，生成二进制日志文件，供其它从服务器同步
 
relay-log=relay-log-bin
#relay-log用于设置中继日志（Relay Log）的文件名前缀。
#接收到主服务器的二进制日志事件后，这些事件会先写入到中继日志中，然后再从中继日志中读取并执行
#这里设置为relay-log-bin，那么生成的中继日志文件会是类似于relay-log-bin.000001这样的格式。
 
relay-log-index=slave-relay-bin.index
#relay-log-index用于设置中继日志索引文件的名称。中继日志索引文件记录了每个中继日志文件及其
#对应的第一条和最后一条事件的位置信息，便于从服务器快速定位到需要执行的事件。
 
relay_log_recovery = 1
#relay_log_recovery用于决定在从服务器启动时是否自动从最后一个完整的事务处恢复中继日志的执行。
#当设置为1时，从服务器在启动时如果检测到中继日志中有未完成的事务，它会尝试从最后一个完成的事务
#开始继续执行，以保证数据的一致性和完整性。

修改完毕之后重新启动服务：systemctl restart mysqld

另一台从服务器同样操作

slave2配置

注意server-id的值不能与其它MySQL服务器相同，且本服务器不需要开启二进制日志

[root@slave2 ~]#vim  /etc/my.cnf
[root@slave2 ~]#sed -n '18,21p' /etc/my.cnf
server-id = 3
relay-log=relay-log-bin
relay-log-index=slave-relay-bin.index
relay_log_recovery = 1
[root@slave2 ~]#systemctl restart mysqld

3.创建软连接

将/usr/local/mysql/bin/下的mysql命令与mysqlbinlog命令创建软链接到/usr/sbin目录下，

4.用户授权

登录MySQL主服务器，给用户授权

5.连接主服务器

两台从服务器连接主服务器

通过执行SQL语句，连接到主服务器

Slave1:

slave2:

master_host='192.168.21.10'
#指定主服务器的IP地址或主机名，这里设置为主服务器的IP地址192.168.83.20。
 
master_user='myslave'
#设置主服务器上用于复制的用户账号名称，这里使用的是名为'myslave'的账户。
 
master_password='123456'
#提供主服务器上的复制用户对应的密码，此处仅为示例，实际环境中请使用安全强度更高的密码。
 
master_log_file='master-bin.000001'
#指定主服务器上从哪里开始复制二进制日志，这里的值'master-bin.000001'是主服务器的一个具
#体的二进制日志文件名。
 
master_log_pos=603
#与master_log_file配合使用，指定从主服务器二进制日志文件的哪个位置开始读取和执行事件，
#这里的值603代表从该文件的第603个字节位置开始。

查看状态时需要确认 IO 和 SQL 线程都是 Yes，代表同步正常

Slave_IO_Running: Yes                   #负责与主机的I/O通信
Slave_SQL_Running: Yes                #负责自己的slave mysql进程

6.设置MHA用户权限

在主服务器上给mha用户授权，使mha节点服务器能够检测到主从服务器

7.设置只读模式

将两台从服务器设置为只读模式：set global read_only=1

8.安装MHA依赖源

所有服务器上都安装 MHA 依赖的环境，首先安装 epel 源，而后安装依赖环境

yum  install epel-release.noarch -y 
#下载epel源
 
yum install -y perl-DBD-MySQL perl-Config-Tiny perl-Log-Dispatch perl-Parallel
-ForkManager perl-ExtUtils-CBuilder perl-ExtUtils-MakeMaker perl-CPAN
 
#下载MHA依赖环境

9.安装node软件包

先在所有服务器上必须先安装 node 组件，最后在 MHA-manager 节点上安装manager组件，因为 manager依赖node组件

#主服务器
[root@master opt]#ls
mha4mysql-node-0.57.tar.gz  rh
[root@master opt]#tar xf mha4mysql-node-0.57.tar.gz 
[root@master opt]#ls
mha4mysql-node-0.57  mha4mysql-node-0.57.tar.gz  rh
[root@master opt]#cd  mha4mysql-node-0.57/
[root@master mha4mysql-node-0.57]#perl Makefile.PL
*** Module::AutoInstall version 1.06
*** Checking for Perl dependencies...
[Core Features]
- DBI        ...loaded. (1.627)
- DBD::mysql ...loaded. (4.023)
*** Module::AutoInstall configuration finished.
Checking if your kit is complete...
Looks good
Writing Makefile for mha4mysql::node
[root@master mha4mysql-node-0.57]#make && make install
 
#从服务器1
[root@slave1 opt]#ls
mha4mysql-node-0.57.tar.gz  rh
[root@slave1 opt]#tar xf mha4mysql-node-0.57.tar.gz 
[root@slave1 opt]#ls
mha4mysql-node-0.57  mha4mysql-node-0.57.tar.gz  rh
[root@slave1 opt]#cd  mha4mysql-node-0.57/
[root@slave1 mha4mysql-node-0.57]#perl Makefile.PL
*** Module::AutoInstall version 1.06
*** Checking for Perl dependencies...
[Core Features]
- DBI        ...loaded. (1.627)
- DBD::mysql ...loaded. (4.023)
*** Module::AutoInstall configuration finished.
Checking if your kit is complete...
Looks good
Writing Makefile for mha4mysql::node
[root@slave1 mha4mysql-node-0.57]#make -j 4 && make install
 
#从服务器2
[root@slave1 opt]#ls
mha4mysql-node-0.57.tar.gz  rh
[root@slave2 opt]#tar xf mha4mysql-node-0.57.tar.gz 
[root@slave2 opt]#ls
mha4mysql-node-0.57  mha4mysql-node-0.57.tar.gz  rh
[root@slave2 opt]#cd  mha4mysql-node-0.57/
[root@slave2 mha4mysql-node-0.57]#ls
AUTHORS  bin  COPYING  debian  inc  lib  Makefile.PL  MANIFEST  META.yml  README  rpm  t
[root@slave2 mha4mysql-node-0.57]#perl Makefile.PL
*** Module::AutoInstall version 1.06
*** Checking for Perl dependencies...
[Core Features]
- DBI        ...loaded. (1.627)
- DBD::mysql ...loaded. (4.023)
*** Module::AutoInstall configuration finished.
Checking if your kit is complete...
Looks good
Writing Makefile for mha4mysql::node
[root@slave2 mha4mysql-node-0.57]#make -j 4 && make install
 
#MHA manager节点服务器
[root@mha opt]#ls
mha4mysql-manager-0.57.tar.gz  mha4mysql-node-0.57.tar.gz  rh
[root@mha opt]#tar xf mha4mysql-node-0.57.tar.gz 
[root@mha opt]#cd  mha4mysql-node-0.57/
[root@mha mha4mysql-node-0.57]#perl Makefile.PL 
*** Module::AutoInstall version 1.06
*** Checking for Perl dependencies...
[Core Features]
- DBI        ...loaded. (1.627)
- DBD::mysql ...loaded. (4.023)
*** Module::AutoInstall configuration finished.
Checking if your kit is complete...
Looks good
Writing Makefile for mha4mysql::node
[root@mha mha4mysql-node-0.57]#make -j 4 &&make install
 
 

10.安装manager组件

在 MHA manage 节点服务器上安装 manager 组件，操作方法与安装node节点一样

[root@mha opt]#ls
mha4mysql-manager-0.57.tar.gz  mha4mysql-node-0.57  mha4mysql-node-0.57.tar.gz  rh
[root@mha opt]#tar xf  mha4mysql-manager-0.57.tar.gz 
[root@mha opt]#cd  mha4mysql-manager-0.57/
[root@mha mha4mysql-manager-0.57]#ls
AUTHORS  bin  COPYING  debian  inc  lib  Makefile.PL  MANIFEST  META.yml  README  rpm  samples  t  tests
[root@mha mha4mysql-manager-0.57]#perl Makefile.PL 
*** Module::AutoInstall version 1.06
*** Checking for Perl dependencies...
[Core Features]
- DBI                   ...loaded. (1.627)
- DBD::mysql            ...loaded. (4.023)
- Time::HiRes           ...loaded. (1.9725)
- Config::Tiny          ...loaded. (2.14)
- Log::Dispatch         ...loaded. (2.41)
- Parallel::ForkManager ...loaded. (1.18)
- MHA::NodeConst        ...loaded. (0.57)
*** Module::AutoInstall configuration finished.
Checking if your kit is complete...
Looks good
Writing Makefile for mha4mysql::manager
[root@mha mha4mysql-manager-0.57]#make  -j 4 && make install

#manager 组件安装后在/usr/local/bin 下面会生成几个工具，主要包括以下几个：
masterha_check_ssh 检查 MHA 的 SSH 配置状况
masterha_check_repl 检查 MySQL 复制状况
masterha_manger 启动 manager的脚本
masterha_check_status 检测当前 MHA 运行状态
masterha_master_monitor 检测 master 是否宕机
masterha_master_switch 控制故障转移（自动或者 手动）
masterha_conf_host 添加或删除配置的 server 信息
masterha_stop  关闭manager

11.配置ssh免密登录

在 manager 节点上配置到所有数据库节点的无密码认证

10.1 配置master服务器

在master服务器上配置到salve1服务器、salve2服务器的无密码认证

[root@mha ~]#ssh-keygen -t rsa
#生成密钥文件
[root@mha ~]#ssh-copy-id 192.168.21.30
#向slave1服务器传输密钥，达到免密效果
[root@mha ~]#ssh-copy-id 192.168.21.40
#向slave2服务器传输密钥，达到免密效果

10.2配置slave1服务器

在salve1服务器上配置到master服务器、salve2服务器的无密码认证

[root@mha ~]#ssh-keygen -t rsa
#生成密钥文件
[root@mha ~]#ssh-copy-id 192.168.21.10
#向master服务器传输密钥，达到免密效果
[root@mha ~]#ssh-copy-id 192.168.21.40
#向slave2服务器传输密钥，达到免密效果

10.3配置slave2服务器

在salve2服务器上配置到master服务器、salve1服务器的无密码认证

[root@mha ~]#ssh-keygen -t rsa
#生成密钥文件
[root@mha ~]#ssh-copy-id 192.168.21.10
#向master服务器传输密钥，达到免密效果
[root@mha ~]#ssh-copy-id 192.168.21.30
#向slave1服务器传输密钥，达到免密效果

12.在manager节点上配置MHA

在manager节点上复制相关脚本到/usr/local/bin 目录

master_ip_failover  		#自动切换时 VIP 管理的脚本
master_ip_online_change 	#在线切换时 vip 的管理
power_manager 				#故障发生后关闭主机的脚本
send_report 				#因故障切换后发送报警的脚本

复制master_ip_failover脚本到/usr/local/bin 目录

修改该脚本文件

#!/usr/bin/env perl
use strict;
use warnings FATAL => 'all';

use Getopt::Long;

my (
$command, $ssh_user, $orig_master_host, $orig_master_ip,
$orig_master_port, $new_master_host, $new_master_ip, $new_master_port
);
#############################添加内容部分#########################################
my $vip = '192.168.21.200';									#指定vip的地址
my $brdc = '192.168.10.255';								#指定vip的广播地址
my $ifdev = 'ens33';										#指定vip绑定的网卡
my $key = '1';												#指定vip绑定的虚拟网卡序列号
my $ssh_start_vip = "/sbin/ifconfig ens33:$key $vip";		#代表此变量值为ifconfig ens33:1 192.168.10.200
my $ssh_stop_vip = "/sbin/ifconfig ens33:$key down";		#代表此变量值为ifconfig ens33:1 192.168.10.200 down
my $exit_code = 0;											#指定退出状态码为0
#my $ssh_start_vip = "/usr/sbin/ip addr add $vip/24 brd $brdc dev $ifdev label $ifdev:$key;/usr/sbin/arping -q -A -c 1 -I $ifdev $vip;iptables -F;";
#my $ssh_stop_vip = "/usr/sbin/ip addr del $vip/24 dev $ifdev label $ifdev:$key";
##################################################################################
GetOptions(
'command=s' => \$command,
'ssh_user=s' => \$ssh_user,
'orig_master_host=s' => \$orig_master_host,
'orig_master_ip=s' => \$orig_master_ip,
'orig_master_port=i' => \$orig_master_port,
'new_master_host=s' => \$new_master_host,
'new_master_ip=s' => \$new_master_ip,
'new_master_port=i' => \$new_master_port,
);

exit &main();

sub main {

print "\n\nIN SCRIPT TEST====$ssh_stop_vip==$ssh_start_vip===\n\n";

if ( $command eq "stop" || $command eq "stopssh" ) {

my $exit_code = 1;
eval {
print "Disabling the VIP on old master: $orig_master_host \n";
&stop_vip();
$exit_code = 0;
};
if ($@) {
warn "Got Error: $@\n";
exit $exit_code;
}
exit $exit_code;
}
elsif ( $command eq "start" ) {

my $exit_code = 10;
eval {
print "Enabling the VIP - $vip on the new master - $new_master_host \n";
&start_vip();
$exit_code = 0;
};
if ($@) {
warn $@;
exit $exit_code;
}
exit $exit_code;
}
elsif ( $command eq "status" ) {
print "Checking the Status of the script.. OK \n";
exit 0;
}
else {
&usage();
exit 1;
}
}
sub start_vip() {
`ssh $ssh_user\@$new_master_host \" $ssh_start_vip \"`;
}
## A simple system call that disable the VIP on the old_master
sub stop_vip() {
`ssh $ssh_user\@$orig_master_host \" $ssh_stop_vip \"`;
}

sub usage {
print
"Usage: master_ip_failover --command=start|stop|stopssh|status --orig_master_host=host --orig_master_ip=ip --orig_master_port=port --new_master_host=host --new_master_ip=ip --new_master_port=port\n";
}

13.创建MHA软件目录