MySQL 主从复制集群高可用

当天不总结完不回家

已于 2024-07-05 10:06:25 修改

阅读量925

点赞数 18

分类专栏： MySQL 文章标签： mysql 数据库

于 2024-06-25 16:09:43 首次发布

本文链接：https://blog.csdn.net/2401_83786744/article/details/139960902

版权

MySQL 专栏收录该内容

8 篇文章 0 订阅

订阅专栏

什么事MHA

MHA的组成

MHA的特点

实验案例配置

什么是MHA

MHA（MasterHigh Availability）是一套优秀的MySQL高可用环境下故障切换和主从复制的软件。
MHA的出现就是解决MySQL 单点的问题。
MySQL故障切换过程中，MHA能做到0-30秒内自动完成故障切换操作。
MHA能在故障切换的过程中最大程度上保证数据的一致性，以达到真正意义上的高可用

MHA的组成

MHA Node（数据节点）

MHA Node运行在每台MySQL服务器上。

MHA Manager（管理节点）

MHA Manager可以单独部署在一台独立的机器上，管理多个master-slave集群；也可以部署在一台slave节点上。
MHA Manager会定时探测集群中的master节点。当master出现故障时，它可以自动将最新数据的slave提升为新的master，然后将所有其他的slave重新指向新的master。整个故障转移过程对应用程序完全透明。

MHA 的工作原理

MHA Node 部署在每台MySQL服务器上，MHA Manager 可以单独部署在一台独立服务器上或者某个从库服务器上。

MHA Manager 会定时探测 MySQL 集群中master主库的状态，当主库出现故障，MHA Manager 会自动将一台拥有最新数据的slave从库提升为新的主库，也会在新的主库上生成写入VIP，然后还会将其它的从库重新指向新的主库做主从复制，从而保证MySQL集群的高可用。整个故障转移过程对客户端应用来说是完全透明的。

案例实施：搭建MySQL MHA高可用及故障切换

实验思路：

MHA架构

（1）数据库安装
（2）一主两从
（3）MHA搭建

故障模拟

（1）主库失效
（2）备选主库成为主库
（3）原故障主库恢复重新加入到MHA成为从库

主服务器配置

初始化服务器

###关闭和禁止防火墙开机自启功能
systemctl stop firewalld
systemctl disable firewalld
setenforce 0
vim /etc/selinux/config
SELINUX=disabled

设置主从时间同步

vim /etc/ntp.conf
restrict default nomodify
server ntp.aliyun.com

ntpdate ntp.aliyun.com  #查看aliyun时间同步服务器
systemctl restart ntpd   #重启ntp时间服务
ntpq -p

安装依赖包

修改主机名

hostnamectl set-hostname mysql1

修改配置文件，开启二进制日志和中继日志

vim /etc/my.cnf
server-id = 1 
log-bin=mysql-bin
binlog_format=mixed
relay-log=relay-log-bin    
relay-log-index=relay-log-bin.index
log-slave-updates = 1   

systemctl restart mysqld

创建mysql和mysqlbinlog软连接

ln -s /usr/local/mysql/bin/mysql /usr/sbin/
ln -s /usr/local/mysql/bin/mysqlbinlog /usr/sbin/

创建并授权主从用户

mysql -uroot -p123
grant replication slave on *.* to 'myslave'@'192.168.80.%' identified by '123';
grant all privileges on *.* to 'myhua'@'192.168.80.%' identified by '123';
grant all privileges on *.* to 'myhua'@'mysql1' identified by '123';
grant all privileges on *.* to 'myhua'@'mysql2' identified by '123';
grant all privileges on *.* to 'myhua'@'mysql3' identified by '123';
flush privileges;
show master status;

验证数据库主从复制

###主库中创建数据表gzy.clr，并插入数据记录
create database gzy;
use gzy;
create table clr (id int,name varchar(20),age int,hobby varchar(50));
insert into clr values(1,'小张',49,'打球');
insert into clr values(2,'小红',34,'学习');

###分别在主库和从库中执行select命令
select * from clr;

安装MHA依赖环境

cd /etc/yum.repos.d
mv repo.bak/* ./
yum install epel-release --nogpgcheck -y
yum install -y perl-DBD-MySQL \
perl-Config-Tiny \
perl-Log-Dispatch \
perl-Parallel-ForkManager \
perl-ExtUtils-CBuilder \
perl-ExtUtils-MakeMaker \
perl-CPAN

安装node组件

cd /opt
rz -E
#mha4mysql-node-0.57.tar.gz
tar xf mha4mysql-node-0.57.tar.gz
cd mha4mysql-node-0.57/
perl Makefile.PL
make && make install

配置免交互无密码验证

vim /etc/hosts
192.168.80.50 mysql1
192.168.80.60 mysql2
192.168.80.70 mysql3

###创建无密码登录配置
ssh-keygen -t rsa
vim /etc/ssh/ssh_config
StrictHostKeyChecking no    #修改第35行的密码验证参数
yum install -y sshpass

sshpass -p '123' ssh-copy-id mysql2
sshpass -p '123' ssh-copy-id mysql3

添加脚本复制到指定位置

cd /opt/mha4mysql-manager-0.57/samples
cp -a scripts/ /usr/local/bin/
cd /usr/local/bin
rz -E
#master_ip_failover

vim master_ip_failover 
###修改14行的IP地址
#!/usr/bin/env perl
use strict;
use warnings FATAL => 'all';

use Getopt::Long;

my (
    $command, $orig_master_host, $orig_master_ip,$ssh_user,
    $orig_master_port, $new_master_host, $new_master_ip,$new_master_port,
    $orig_master_ssh_port,$new_master_ssh_port,$new_master_user,$new_master_password
);

# 这里定义的虚拟IP配置要注意，这个ip必须要与你自己的集群在同一个网段，否则无效
my $vip = '192.168.80.188/24';
my $key = '1';
# 这里的网卡名称 “ens33” 需要根据你机器的网卡名称进行修改
# 如果多台机器直接的网卡名称不统一，有两种方式，一个是改脚本，二是把网卡名称修改成统一
# 我这边实际情况是修改成统一的网卡名称
my $ssh_start_vip = "sudo /sbin/ifconfig ens33:$key $vip";
my $ssh_stop_vip = "sudo /sbin/ifconfig ens33:$key down";
my $ssh_Bcast_arp= "sudo /sbin/arping -I ens33 -c 3 -A $vip";

GetOptions(
    'command=s'          => \$command,
    'ssh_user=s'         => \$ssh_user,
    'orig_master_host=s' => \$orig_master_host,
    'orig_master_ip=s'   => \$orig_master_ip,
    'orig_master_port=i' => \$orig_master_port,
    'orig_master_ssh_port=i' => \$orig_master_ssh_port,
    'new_master_host=s'  => \$new_master_host,
    'new_master_ip=s'    => \$new_master_ip,
    'new_master_port=i'  => \$new_master_port,
    'new_master_ssh_port' => \$new_master_ssh_port,
    'new_master_user' => \$new_master_user,
    'new_master_password' => \$new_master_password

);

exit &main();

sub main {
    $ssh_user = defined $ssh_user ? $ssh_user : 'root';
    print "\n\nIN SCRIPT TEST====$ssh_user|$ssh_stop_vip==$ssh_user|$ssh_start_vip===\n\n";

    if ( $command eq "stop" || $command eq "stopssh" ) {

        my $exit_code = 1;
        eval {
            print "Disabling the VIP on old master: $orig_master_host \n";
            &stop_vip();
            $exit_code = 0;
        };
        if ($@) {
            warn "Got Error: $@\n";
            exit $exit_code;
        }
        exit $exit_code;
    }
    elsif ( $command eq "start" ) {
        eval {
            print "Enabling the VIP - $vip on the new master - $new_master_host \n";
            &start_vip();
        &start_arp();
            $exit_code = 0;
            &start_vip();
        &start_arp();
            $exit_code = 0;
        };
        if ($@) {
            warn $@;
            exit $exit_code;
        }
        exit $exit_code;
    }
    elsif ( $command eq "status" ) {
        print "Checking the Status of the script.. OK \n";
        exit 0;
    }
    else {
        &usage();
        exit 1;
    }
}

sub start_vip() {
    `ssh $ssh_user\@$new_master_host \" $ssh_start_vip \"`;
}
sub stop_vip() {
    `ssh $ssh_user\@$orig_master_host \" $ssh_stop_vip \"`;
}

sub start_arp() {
    `ssh $ssh_user\@$new_master_host \" $ssh_Bcast_arp \"`;
}
sub usage {
    print
    "Usage: master_ip_failover --command=start|stop|stopssh|status --ssh_user=user --orig_master_host=host --orig_master_ip=ip --orig_master_port=port --new_master_host=host --new_master_ip=ip --new_master_port=port\n";
}

chmod 777 /usr/local/bin/master_ip_failover

添加虚拟网卡配置VIP地址

 /sbin/ifconfig ens33:1 192.168.80.188/24
 ifconfig

节点服务器配置

设置周期性时间同步

ntpdate 192.168.80.50    #连接主服务器的IP地址
crontab -e   #在从服务器上执行计划性任务，每30分钟向主服务器进行一次时间同步
*/30 * * * * /usr/sbin/ntpdate 192.168.80.50

systemctl restart crond   #重启计划性服务
crontab -l   #查看计划性任务

节点服务器的操作和之前几乎完全相同，只需要更改部分地方，所以不做重复。

模拟故障恢复

tail -f /opt/mysql-mha/manager.log

停止mysql做实验

重新做主从配置

#在原主库服务器mysql1上，重新执行主从复制同步操作（CentOS 7-5）
mysql -uroot -p123
change master to master_host='192.168.80.60',master_user='myslave',master_password='123',master_log_file='m'mysql-bin.000002',master_log_pos=2696;

start slave;

在manager节点上修改配置文件mysql_mha.cnf（再把这个记录添加进去，因为它检测掉失效时候会自动消失）

vim /opt/mysql-mha/mysql_mha.cnf
###G该配置文件中需要修改以下内容

secondary_check_script=/usr/local/bin/masterha_secondary_check -s 192.168.80.50 -s 192.168.80.70

[server2]
hostname=192.168.80.60
port=3306

[server1]
candidate_master=1
check_repl_delay=0
hostname=192.168.80.50
port=3306

[server3]
hostname=192.168.80.70
port=3306

在manager节点上启动MHA

nohup masterha_manager \
--conf=/opt/mysql-mha/mysql_mha.cnf \
--remove_dead_master_conf \
--ignore_last_failover < /dev/null > /var/log/mha_manager.log 2>&1 &

###关闭原先的备选数据库mysql2（CentOS 7-6）
systemctl stop mysqld

MHA 部署步骤总结

1）在所有MySQL服务器都做主从复制授权，还要给 MHA manager 访问数据库的授权
2）做时间同步和主从复制配置，并设置从服务器为只读模式
3）所有MySQL服务器和 manager 服务器都安装 mha node 组件，manager 服务器还要安装 mha manager 组件
4）所有MySQL服务器都要相互设置SSH免交互登录
5）在 manager 服务器准备好 VIP故障切换脚本和 MHA 配置文件
6）在 master主库服务器上创建 VIP
7）在 manager 服务器用 masterha_check_ssh 和 masterha_check_repl 做 MHA 启动前检测，再使用 masterha_manager 启动 MHA 进程
8）做master故障转移测试（VIP会漂移到新master节点上，其它的从库会自动指向新的主库做主从复制，故障转移完成后MHA进程也会自动退出，MHA配置文件会自动删除原master的配置信息）