MHA实现MySQL主从高可用

最新推荐文章于 2023-06-28 13:42:14 发布

年轻真好，倒头就睡！

最新推荐文章于 2023-06-28 13:42:14 发布

阅读量322

点赞数

分类专栏： MySQL数据库文章标签： mysql centos linux 数据库分布式

本文链接：https://blog.csdn.net/Wang_tr/article/details/109309051

版权

MySQL数据库专栏收录该内容

2 篇文章 0 订阅

订阅专栏

MHA实现MySQL主从高可用

一，MHA简介

MHA（Master High Availability）目前在MySQL高可用方面是一个相对成熟的解决方案，它由日本DeNA公司的youshimaton（现就职于Facebook公司）开发，是一套优秀的作为MySQL高可用性环境下故障切换和主从提升的高可用软件。在MySQL故障切换过程中，MHA能做到在0~30秒之内自动完成数据库的故障切换操作，并且在进行故障切换的过程中，MHA能在最大程度上保证数据的一致性，以达到真正意义上的高可用。
该软件由两部分组成：MHA Manager（管理节点）和MHA Node（数据节点）。MHA Manager可以单独部署在一台独立的机器上管理多个master-slave集群，也可以部署在一台slave节点上。MHA Node运行在每台MySQL服务器上，MHA Manager会定时探测集群中的master节点，当master出现故障时，它可以自动将最新数据的slave提升为新的master，然后将所有其他的slave重新指向新的master。整个故障转移过程对应用程序完全透明。
在MHA自动故障切换过程中，MHA试图从宕机的主服务器上保存二进制日志，最大程度的保证数据的不丢失，但这并不总是可行的。例如，如果主服务器硬件故障或无法通过ssh访问，MHA没法保存二进制日志，只进行故障转移而丢失了最新的数据。使用MySQL 5.5的半同步复制，可以大大降低数据丢失的风险。MHA可以与半同步复制结合起来。如果只有一个slave已经收到了最新的二进制日志，MHA可以将最新的二进制日志应用于其他所有的slave服务器上，因此可以保证所有节点的数据一致性。

二，工作原理

从宕机崩溃的 Master 保存二进制日志事件（binlog event）；
识别含有最新更新的 Slave；
应用差异的中继日志（relay log）到其他 Slave；
应用从 Master 保存的二进制日志事件；
提升一个 Slave 为新的 Master；
使其他的 Slave 连接新的 Master 进行复制；

三，架构

1.基本环境

-操作系统版本：CentOS 7
-MySQL版本：mysql-boost-5.7.28
-服务器信息：

主机名	IP	角色	网卡	安装软件
cq13	10.50.10.13	master主	ens33	mysql5.7.28，mha4mysql-node
cq14	10.50.10.14	slave	ens33	mysql5.7.28， mha4mysql-manager，mha4mysql-node

2.环境准备

两台主机同时操作
（1）.时间的同步
时间的不同步可能导致日志之间的问题

echo "*/5 * * * * /usr/sbin/ntpdate ntp1.aliyun.com >/dev/null 2>&1" >>/var/spool/cron/root

（2）.hosts解析
编辑添加vim /etc/hosts
cq13 10.50.10.13
cq14 10.50.10.14

(3).两台服务互相ssh免密登陆
脚本：

#!/bin/bash
yum -y install sshpass
UserName=admin
IP="10.50.0."
#创建密钥
ssh-keygen -t dsa -f ~/.ssh/id_dsa -P "" &>/dev/null
#分发公钥
for i in 13 14 #遍历所有主机IP
  do
    sshpass -p "Cq20200831*" ssh-copy-id -i ~/.ssh/id_dsa.pub -p 1022 -o StrictHostKeyChecking=no $UserName@$IP$i &>/dev/null
done

测试链接

ssh web01 ###如果有提示输入yes，没有提示直接连接成功
ssh web02 ###如果有提示输入yes，没有提示直接连接成功

修改mysql默认密码为：123456 mysql集群都要修改，这里只有两台，主从两台mysql数据库操作以下命令修改密码

##### mysql-5.7以下由password字段，5.7以上为authentication_string=PASSWORD('密码')字段

mysql> update mysql.user set password=password('123456') where user='root' and host='localhost';
#### 如果报错：ERROR 1054 (42S22): Unknown column 'PASSWORD' in 'field list'
#### 用以下命令
mysql> update mysql.user set authentication_string=PASSWORD('123456') where user='root' and host='localhost';
 
mysql> flush privileges;
Query OK, 0 rows affected (0.00 sec)

#####改完密码后在登陆就得使用用过户密码登录了
mysql -uroot -p
密码：自己设置的密码（我这里设置的123456）

3.配置主从

cq14 主服务器操作

vim /etc/my.cnf (更改为下面内容)

[root@cq13 admin]# cat /etc/my.cnf 
[client]
port = 3349
socket = /usr/local/mysql/tmp/mysql.sock
default-character-set = utf8mb4

[mysqld]
user = mysql
port = 3349
basedir = /usr/local/mysql
datadir = /home/mysqldata
tmpdir = /usr/local/mysql/tmp
socket = /usr/local/mysql/tmp/mysql.sock
pid-file = /usr/local/mysql/tmp/mysql.pid
character_set_server = utf8mb4
collation_server = utf8mb4_bin
default-time-zone = system
#开启binlog日志
log-bin = /home/mysqldata/logs/mysql-bin.log
server-id = 13
#日志的保存时间
expire_logs_days = 10
#日志的最大大小
max_binlog_size = 500M

relay_log_purge = 0         #禁止mysql自动删除relalog功能
gtid_mode = on              #mysql5.6以上的特性，数据库开启半同步状态，开启gtid，必须主从全开
enforce_gtid_consistency = 1
log_slave_updates = 1

[mysqld_safe]
log-error = /home/mysqldata/logs/mysql.err

[mysqldump]
user = root
password = ****** ##密码自己设置

重启mysql

systemctl restart mysql

创建同步的用户

mysql> grant replication slave on *.* to 'rep'@'10.50.10.%' identified by '123456';
Query OK, 0 rows affected (0.00 sec)
 
mysql> flush privileges;
Query OK, 0 rows affected (0.00 sec)

查看mysql主库的master状态

mysql> show master status\G
*************************** 1. row ***************************
             File: mysql-bin.000001
         Position: 530
     Binlog_Do_DB:
 Binlog_Ignore_DB:
Executed_Gtid_Set: cb1dab19-4e66-11ea-a76e-000c2959c010:1-2
1 row in set (0.00 sec)

查看GTID状态

mysql> show global variables like '%gtid%';
+---------------------------------+------------------------------------------+
| Variable_name                   | Value                                    |
+---------------------------------+------------------------------------------+
| binlog_gtid_simple_recovery     | OFF                                      |
| enforce_gtid_consistency        | ON                                       |
| gtid_executed                   | cb1dab19-4e66-11ea-a76e-000c2959c010:1-2 |
| gtid_mode                       | ON                                       |
| gtid_owned                      |                                          |
| gtid_purged                     |                                          |
| simplified_binlog_gtid_recovery | OFF                                      |
+---------------------------------+------------------------------------------+

cq14 从服务器操作

vim /etc/my.cnf (更改为下面内容)

[root@cq14 admin]# cat /etc/my.cnf 
[client]
port = 3349
socket = /usr/local/mysql/tmp/mysql.sock
default-character-set = utf8mb4

[mysqld]
user = mysql
port = 3349
basedir = /usr/local/mysql
datadir = /home/mysqldata
tmpdir = /usr/local/mysql/tmp
socket = /usr/local/mysql/tmp/mysql.sock
pid-file = /usr/local/mysql/tmp/mysql.pid
character_set_server = utf8mb4
collation_server = utf8mb4_bin
default-time-zone = system
server-id = 14
expire_logs_days = 10
max_binlog_size = 500M

relay_log_purge = 0    #禁止mysql自动删除relalog功能
gtid_mode = on	       #mysql5.6以上的特性，数据库开启半同步状态，开启gtid，必须主从全开
enforce_gtid_consistency = 1
log_slave_updates = 1


[mysqld_safe]
log-error = /home/mysqldata/logs/mysql.err

重启mysql

systemctl restart mysql

创建同步的用户

mysql> grant replication slave on *.* to 'rep'@'10.50.10.%' identified by '123456';
Query OK, 0 rows affected (0.00 sec)
 
mysql> flush privileges;
Query OK, 0 rows affected (0.00 sec)

关闭从服务器的复制功能

mysql> stop slave;
Query OK, 0 rows affected, 1 warning (0.00 sec)

配置从服务器指向master
根据自己查询的主库信息 #指向的是主的show master status\G 输入以下内容，这只是我的演示

mysql> change master to master_host='10.50.10.13',master_port=3349,master_user='rep',master_password='123456',master_log_file='mysql-bin.000001',master_log_pos=530;
Query OK, 0 rows affected, 2 warnings (0.00 sec)

开启从服务器的复制功能

mysql> start slave;
Query OK, 0 rows affected (0.00 sec)

检查从服务器的复制功能状态
在这里插入图片描述

主要关注上图标记几点，ip为自己主从主库ip地址，这里是我自己的，

常见错误
mysq1> show sTave status\G ;
ERROR :No query specified
解决办法:
去掉分号
; \g \G三者选其- -即可。

四，MHA

GTID的新特性

支持多线程复制：事实上是针对每个数据库开启相应的独立线程，即每个库有一个单独的（sql thread）
支持启用GTID，在配置主从复制，传统的方式里，你需要找到binlog和POS点，然后将master改为指向。在mysql5.6里，无须再知道binlog和POS点，只需要知道master的IP /端口/账号密码即可，因为同步复制是自动的，MySQL的通过内部机制GTID自动找点同步。
基于行复制只保存改变的列，大大节省磁盘空间，网络，内存等
支持把主站和从站的相关信息记录在表中;原来是记录在文件里，现在则记录在表里，增强可用性
支持延迟复制

1.安装MHA

所有节点服务器操作

1.1安装依赖

yum install -y perl-*

1.2授权MHA管理用户

mysql> grant all privileges on *.* to mha@'10.50.10.%' identified by 'mha';
Query OK, 0 rows affected (0.00 sec)
 
mysql> flush privileges;
Query OK, 0 rows affected (0.00 sec)

1.3安装MHA node节点

上传安装包
cq13作为管理节点上传manager和node两个包
cq14只上传一个node就行了
在这里插入图片描述

下载地址：
链接：https://pan.baidu.com/s/1b0hNzO86y3qkhByIirT57w 
提取码：d2tp

1.4安装MHA

管理节点装在web01上(可装载其它服务器上)

进入安装包所在目录

######   web01执行下面两条命令安装manager和node两个rpm包
rpm -ivh mha4mysql-node-0.58-0.el7.centos.noarch.rpm
rpm -ivh mha4mysql-manager-0.58-0.el7.centos.noarch.rpm

######   web02执行下面一条命令安装node rmp包
rpm -ivh mha4mysql-node-0.58-0.el7.centos.noarch.rpm

1.5配置MHA(web01)

mkdir -p /etc/mha
mkdir -p /var/log/mha/app1

vim /etc/mha/app1.cnf
[server default]
manager_log=/var/log/mha/app1/manager.log
manager_workdir=/var/log/mha/app1
master_binlog_dir=/home/mysqldata/logs/
user=mha
password=mha
ping_interval=2
repl_password=123456
repl_user=rep
ssh_user=admin
 
[server1]
hostname=10.50.10.13
port=3306
 
[server2]
hostname=10.50.10.14
port=3306

1.6启动测试

ssh检查检测

masterha_check_ssh --conf=/etc/mha/app1.cnf

在这里插入图片描述
上图为测试安装图，请以自己安装ip地址为准

主从复制检测

 masterha_check_repl --conf=/etc/mha/app1.cnf

如遇到如下报错：
在这里插入图片描述
解决在每一个服务 /etc/my.cnf里添加
skip-name-resolve

再次重启mysql并测试
（请以自己安装ip地址为准）
在这里插入图片描述

1.7启动MHA

nohup masterha_manager --conf=/etc/mha/app1.cnf  --remove_dead_master_conf --ignore_last_failover < /dev/null >  /var/log/mha/app1/manager.log  2>&1 &

查看MHA状态

masterha_check_status --conf=/etc/mha/app1.cnf

[root@cq13 logs]# masterha_check_status --conf=/etc/mha/app1.cnf
app1 (pid:8062) is running(0:PING_OK), master:10.50.10.13 ###这里的ip为主库ip

在这里插入图片描述
查看cq14的slave状态是没有的，所以查看master状态可以看见Master状态可以在10.50.10.14上查到

查看MHA的配置文件（10.50.10.13）

总结：（MHA会自己结束自己的进程,还会将/etc/mha/app1.cnf配置文件中,坏掉的那台机器剔除。）当作为主库的Mysql宕机以后，MHA通过检测发现主库的mysql宕掉，那么会将binlog日志最全的从库立即提升为主库，而其他的从库会指向主库再次进行同步。一切的都是MHA自动完成的，没有手动介入。

1.8 MHA故障还原

刚才宕机的数据库重新加入MHA的集群里面
①在MHA查看宕机的日志

[root@cq13 ~]# grep "CHANGE MASTER TO MASTER"  /var/log/mha/app1/manager.log | tail -1
Mon Oct 19 18:27:36 2020 - [info]  All other slaves should start replication from here. Statement should be: CHANGE MASTER TO MASTER_HOST='192.168.144.134', MASTER_PORT=3349, MASTER_AUTO_POSITION=1, MASTER_USER='rep', MASTER_PASSWORD='xxx';
######
MASTER_PASSWORD='xxx'这里是密文显示的，手动改一下自己的密码就行了

返回宕机的数据库重新“change master to”主库为10.50.10.13的数据库

##先启动数据库
systemctl  restart mysqld
[root@cq13 ~]# mysql -uroot -p123456 -e "CHANGE MASTER TO MASTER_HOST='192.168.144.134', MASTER_PORT=3349, MASTER_AUTO_POSITION=1, MASTER_USER='rep', MASTER_PASSWORD='123456';"
[root@cq13 ~]# mysql -uroot -p123456 -e "start slave;" ###开启slave线程
[root@cq13 ~]# mysql -uroot -p123456 -e "show slave status;"查看slave状态

②重新将[server1]标签添加到MHA配置文件中

[root@ c703 ~]# sed -i -e '/server2/i  \
[server1] \
hostname=10.50.10.13 \
port=3306 \
' /etc/mha/app1.cnf
cat /etc/mha/app1.cnf

③启动MHA

nohup masterha_manager --conf=/etc/mha/app1.cnf  --remove_dead_master_conf --ignore_last_failover < /dev/null >  /var/log/mha/app1/manager.log2>&1 &

[root@cq13 ~]# cat /usr/bin/master_ip_failover 
#!/usr/bin/env perl
 
use strict;
use warnings FATAL => 'all';
 
use Getopt::Long;
 
my (
    $command,          $ssh_user,        $orig_master_host, $orig_master_ip,
    $orig_master_port, $new_master_host, $new_master_ip,    $new_master_port
);
 
my $vip = '10.50.10.111/24';
my $key = '1';
my $ssh_start_vip = "/sbin/ifconfig eth0:$key $vip"; ###ifconfig查看本机网卡信息，根据网卡名称修改eth0还是ens33
my $ssh_stop_vip = "/sbin/ifconfig eth0:$key down";
 
GetOptions(
    'command=s'          => \$command,
    'ssh_user=s'         => \$ssh_user,
    'orig_master_host=s' => \$orig_master_host,
    'orig_master_ip=s'   => \$orig_master_ip,
    'orig_master_port=i' => \$orig_master_port,
    'new_master_host=s'  => \$new_master_host,
    'new_master_ip=s'    => \$new_master_ip,
    'new_master_port=i'  => \$new_master_port,
);
 
exit &main();
 
sub main {
 
    print "\n\nIN SCRIPT TEST====$ssh_stop_vip==$ssh_start_vip===\n\n";
 
    if ( $command eq "stop" || $command eq "stopssh" ) {
 
        my $exit_code = 1;
        eval {
            print "Disabling the VIP on old master: $orig_master_host \n";
            &stop_vip();
            $exit_code = 0;
        };
        if ($@) {
            warn "Got Error: $@\n";
            exit $exit_code;
        }
        exit $exit_code;
    }
    elsif ( $command eq "start" ) {
 
        my $exit_code = 10;
        eval {
            print "Enabling the VIP - $vip on the new master - $new_master_host \n";
            &start_vip();
            $exit_code = 0;
        };
        if ($@) {
            warn $@;
            exit $exit_code;
        }
        exit $exit_code;
    }
    elsif ( $command eq "status" ) {
        print "Checking the Status of the script.. OK \n";
        exit 0;
    }
    else {
        &usage();
        exit 1;
    }
}
 
sub start_vip() {
    `ssh $ssh_user\@$new_master_host \" $ssh_start_vip \"`;
}
sub stop_vip() {
     return 0  unless  ($ssh_user);
    `ssh $ssh_user\@$orig_master_host \" $ssh_stop_vip \"`;
}
 
sub usage {
    print
    "Usage: master_ip_failover --command=start|stop|stopssh|status --orig_master_host=host --orig_master_ip=ip --orig_master_port=port --new_master_host=host --new_master_ip=ip --new_master_port=port\n";
}

加执行权限

chmod +x /usr/bin/master_ip_failover

1.9手动绑定vip

在新的master（10.50.10.14）机器上添加vip

[root@cq14 ~]# ifconfig ens33:1 10.50.10.111/24 
#### 说明：
#查看自己网卡名称如果是eth0就写eth0，如果是ens33就写ens33，根据实际网卡名称来
ip a

在这里插入图片描述

2.0重启MHA

[root@cq13 ~]# masterha_stop --conf=/etc/mha/app1.cnf 
Stopped app1 successfully.

[root@cq13 ~]# nohup masterha_manager --conf=/etc/mha/app1.cnf  --remove_dead_master_conf --ignore_last_failover < /dev/null >  /var/log/mha/app1/manager.log2>&1 &
[root@cq13 ~]# ps -ef |grep mha

当前主库状态：
根据自己ip实际配置来查看

[root@cq13 ~]# masterha_check_status --conf=/etc/mha/app1.cnf 
app1 (pid:13296) is running(0:PING_OK), master:10.50.10.14
[root@cq13 ~]#

2.1模拟主库宕机vip漂移

在这里插入图片描述

[root@cq14 ~]# service mysqld stop
Shutting down MySQL............ SUCCESS! 

[root@cq14 ~]# ip a
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN 
    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
    inet 127.0.0.1/8 scope host lo
       valid_lft forever preferred_lft forever
    inet6 ::1/128 scope host 
       valid_lft forever preferred_lft forever
2: ens33: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000
    link/ether 00:0c:29:76:46:e5 brd ff:ff:ff:ff:ff:ff
    inet 10.50.10.14/24 brd 192.168.144.255 scope global dynamic ens33
       valid_lft 1665sec preferred_lft 1665sec
    inet6 fe80::20c:29ff:fe76:46e5/64 scope link 
       valid_lft forever preferred_lft forever

从上面可以看出ens33192.168.144.111被移除了

现在查看（cq13）vip状态和mysql的master状态

[root@cq13 ~]# ip a show ens33
2: ens33: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000
    link/ether 00:0c:29:e7:0f:b1 brd ff:ff:ff:ff:ff:ff
    inet 10.50.10.13/24 brd 10.50.10.255 scope global dynamic ens33
       valid_lft 1170sec preferred_lft 1170sec
    inet 10.50.10.111/24 brd 10.50.10.255 scope global secondary ens33:1
       valid_lft forever preferred_lft forever
    inet6 fe80::20c:29ff:fee7:fb1/64 scope link 
       valid_lft forever preferred_lft forever

cq13登录数据库查看master状态

mysql> show master status \G
*************************** 1. row ***************************
             File: mysql-bin.000010
         Position: 194
     Binlog_Do_DB: 
 Binlog_Ignore_DB: 
Executed_Gtid_Set: da4acfc7-0e84-11eb-abc6-000c29e70fb1:1-17
1 row in set (0.00 sec)

mysql>

此时10.50.10.14成为宕机状态，我的ip（192.168.144.134）成为宕机状态，恢复在上面有写到，按照上面步骤恢复就行了

年轻真好，倒头就睡！

关注

0
点赞
踩
2

收藏

觉得还不错? 一键收藏
1
评论
MHA实现MySQL主从高可用

MySQL高可用主从搭建MHA实现MySQL主从高可用一，MHA简介二，工作原理三，架构1.基本环境2.环境准备3.配置主从web01 主服务器操作web02 从服务器操作四，MHA1.安装MHA1.1安装依赖1.2授权MHA管理用户1.3安装MHA node节点1.4安装MHA1.5配置MHA(web01)1.6启动测试1.7启动MHAMHA实现MySQL主从高可用一，MHA简介MHA（Master High Availability）目前在MySQL高可用方面是一个相对成熟的解决方案，它由日本D
复制链接

扫一扫