架构MHA高可用及故障切换

架构MHA高可用及故障切换

（一）实验拓扑图

（二）具体流程

2.1、实验需求

MHA 监控 MySQL数据库健康状态，在主服务器故障时进行自动切换，不影响业务。

2.2、实验思路

2.2.1架构

1）数据库安装
2）一主两从
3）MHA搭建

2.2.2故障模拟

1）主库失效
2）备选主库成为主库
3）从库2将备选主库指向为主库

2.2.3故障修复

1）坏库修复，启动
2)在修复好的库上建立新主从关系
3）修改manager配置文件，添加修好的库的记录
4)重启mha

2.3、实验环境

主服务器（master）：20.0.0.10
从服务器1（slave1）：20.0.0.11
从服务器2（slave2）：20.0.0.13
mha（manger）：20.0.0.14

（三）架构步骤

3.1配置主从同步

在三台 MySQL 节点上分别安装数据库，MySQL 版本请使用 5.6.36，cmake 版本请使
用 2.8.6。

3.1.1 安装编译依赖的环境

3.1.2 安装 gmake 编译软件

3.1.3 安装 MySQL 数据库

[root@Master ~]# tar zxvf mysql-5.6.36.tar.gz
[root@Master ~]# cd mysql-5.6.36
[root@Master mysql-5.6.36]# cmake -DCMAKE_INSTALL_PREFIX=/usr/local/mysql -DDEFAULT_CHARSET=utf8 -DDEFAULT_COLLATION=utf8_general_ci -DWITH_EXTRA_CHARSETS=all -DSYSCONFDIR=/etc
[root@Master mysql-5.6.36]# make && make install

[root@Master mysql-5.6.36]# cp support-files/my-default.cnf /etc/my.cnf
[root@Master mysql-5.6.36]# cp support-files/mysql.server /etc/rc.d/init.d/mysqld
[root@Master ~]# chmod +x /etc/rc.d/init.d/mysqld
[root@Master ~]# chkconfig --add mysqld
[root@Master ~]# echo “PATH=$PATH:/usr/local/mysql/bin” >> /etc/profile
[root@Master ~]# source /etc/profile

[root@Master ~]# groupadd mysql
[root@Master ~]# useradd -M -s /sbin/nologin mysql -g mysql

[root@Master ~]# chown -R mysql.mysql /usr/local/mysql

[root@Master ~]# mkdir -p /data/mysql
[root@Master ~]# /usr/local/mysql/scripts/mysql_install_db --basedir=/usr/local/mysql --datadir=/usr/local/mysql/data --user=mysql

3.1.4 修改mysql 的主配置文件/etc/my.cnf 文件，三台服务器的 server-id 不能一样，删除字符集utf8的语句

主：

从1：
从2：

3.2 每个MySQL做两个软链接，为HMA服务

3.3 启动MySQL服务

3.4 配置MySQL一主两从

主：

从：

3.4.1 设置两个从库为只读模式

3.4.2 在 Mysql1 主库插入两条数据，测试是否同步

主：

从：

3.2 安装MHA

3.2.1、所有服务器上都安装 MHA 依赖的环境，首先安装 epel 源

MHA软件包对于每个操作系统版本不一样，这里Centos7.6必须选择0.57版本，在所有服务器上必须先安装 node 组件，最后在 MHA-manager 节点上安装 manager 组件，因为 manager 依赖 node 组件。
注意：所有服务器上必须安装node组件，最后在MHA-manager节点上安装manager组件

manager 安装后在/usr/local/bin 下面会生成几个工具，主要包括以下几个：

masterha_check_ssh 检查 MHA 的 SSH 配置状况
masterha_check_repl 检查 MySQL 复制状况
masterha_manger 启动 manager的脚本
masterha_check_status 检测当前 MHA 运行状态
masterha_master_monitor 检测 master 是否宕机
masterha_master_switch 控制故障转移（自动或者手动）
masterha_conf_host 添加或删除配置的 server 信息
masterha_stop 关闭manager
node 安装后也会在/usr/local/bin 下面会生成几个脚本（这些工具通常由 MHA

Manager 的脚本触发，无需人为操作）主要如下：

save_binary_logs 保存和复制 master 的二进制日志
apply_diff_relay_logs 识别差异的中继日志事件并将其差异的事件应用于其他的 slave
filter_mysqlbinlog 去除不必要的 ROLLBACK 事件（MHA 已不再使用这个工具）
purge_relay_logs 清除中继日志（不会阻塞 SQL 线程）

3.3 无密码认证

主：
从1：
从2：

mha:

3.4、配置 MHA

脚本

#!/usr/bin/env perl
use strict;
use warnings FATAL => ‘all’;

use Getopt::Long;

my (
$command, $ssh_user, $orig_master_host, $orig_master_ip,
$orig_master_port, $new_master_host, $new_master_ip, $new_master_port
);
#############################添加内容部分#########################################
my $vip = ‘192.168.73.200’;
my $brdc = ‘192.168.73.255’;
my $ifdev = ‘ens33’;
my $key = ‘1’;
my $ss{h}_{s}tar{t}_{v}ip="/sbin/ifconfigens33:$key $vip";
my $ss{h}_{s}to{p}_{v}ip="/sbin/ifconfigens33:$key down";
my $exit_code = 0;
#my $ssh_start_vip = “/usr/sbin/ip addr add $vip/24 brd $brdc dev $ifdev label $ifdev:$key;/usr/sbin/arping -q -A -c 1 -I $ifdev $vip;iptables -F;”;
#my $ssh_stop_vip = “/usr/sbin/ip addr del $vip/24 dev $ifdev label $ifdev:$key”;
##################################################################################
GetOptions(
‘command=s’ => $command,
‘ssh_user=s’ => $ssh_user,
‘orig_master_host=s’ => $orig_master_host,
‘orig_master_ip=s’ => $orig_master_ip,
‘orig_master_port=i’ => $orig_master_port,
‘new_master_host=s’ => $new_master_host,
‘new_master_ip=s’ => $new_master_ip,
‘new_master_port=i’ => $new_master_port,
);

exit &main();

sub main {

print “\n\nIN SCRIPT TEST====$ss{h}_{s}to{p}_{v}ip==$ssh_start_vip===\n\n”;

if ( $command eq “stop” || $command eq “stopssh” ) {

my $exit_code = 1;
eval {
print “Disabling the VIP on old master: $orig_master_host \n”;
&stop_vip();
KaTeX parse error: Expected 'EOF', got '}' at position 16: exit_code = 0; }̲; if (@) {
warn “Got Error: $@\n”;
exit $exit_code;
}
exit $exit_code;
}
elsif ( $command eq “start” ) {

my $exit_code = 10;
eval {
print “Enabling the VIP - $vip on the new master - $new_master_host \n”;
&start_vip();
KaTeX parse error: Expected 'EOF', got '}' at position 16: exit_code = 0; }̲; if (@) {
warn $@;
exit $exit_code;
}
exit $exit_code;
}
elsif ( $command eq “status” ) {
print “Checking the Status of the script… OK \n”;
exit 0;
}
else {
&usage();
exit 1;
}
}
sub start_vip() {
ssh $ssh_user\@$new_master_host \" $ssh_start_vip \";
}
A simple system call that disable the VIP on the old_master 开头有个#号
sub stop_vip() {
ssh $ssh_user\@$orig_master_host \" $ssh_stop_vip \";
}

sub usage {
print
“Usage: master_ip_failover --command=start|stop|stopssh|status --orig_master_host=host --orig_master_ip=ip --orig_master_port=port --new_master_host=host --new_master_ip=ip --new_master_port=port\n”;
}

3.5、创建MHA软件目录并拷贝配置文件

配置文件解读

[server default]
manager_log=/var/log/masterha/app1/manager.log #manager日志
manager_workdir=/var/log/masterha/app1 #manager工作目录
master_binlog_dir=/usr/local/mysql/data #master保存binlog的位置
master_ip_failover_script=/usr/local/bin/master_ip_failover #设置自动failover时候的切换脚本
master_ip_online_change_script=/usr/local/bin/master_ip_online_change #设置手动切换时的切换脚本
password=manager #设置mysql中root用户的密码，这个密码是前面创建监控用户的密码
ping_interval=1 #设置监控主库，发送ping包的时间间隔，默认是3秒，尝试三次没有回应的时候自动进行failover
remote_workdir=/tmp #设置远端mysql在发生切换时binlog的保存位置
repl_password=abc123 #设置复制用户的密码
repl_user=myslave #设置复制用户的账户
report_script=/usr/local/send_report #设置发生切换后发送的报警的脚本
secondary_check_script=/usr/local/bin/masterha_secondary_check -s 14.0.0.30 -s 14.0.0.40
shutdown_script="" #设置故障发生后关闭故障主机脚本（该脚本的主要作用是关闭主机防止发生脑裂）
ssh_user=root #设置ssh的登录用户名
user=mha #设置监控用户

3.6、测试ssh无密码认证，如果正常最后会输出successfully，如下所示

3.7、测试mha健康状态，如果正常最后会输出OK，如下所示

3.8、注意：第一次配置需要去master上手动开启虚拟IP

3.9、启动MHA

3.10、查看MHA状态，可以看到当前master是Slave1节点

（四）实验验证

（4.1) 模拟宕机：

查看从库：

(4.2) 修复主从

原主服务器：

(4.3) 测试主从同步是否正常：

1、健康检查
[root@Manager ~]# masterha_check_repl -conf=/etc/masterha/app1.cnf
…省略内容
MySQL Replication Health is OK.

2、启动服务
[root@Manager ~]# nohup masterha_manager --conf=/etc/masterha/app1.cnf --remove_dead_master_conf --ignore_last_failover < /dev/null > /var/log/masterha/app1/manager.log 2>&1 &