MySQL高可用之MHA
搭建环境
准备工作
三台已经实现gtid异步复制的虚拟机
一台虚拟机安装MHA
三个数据库节点的配置文件都进行修改,添加如下参数,然后重启,安装mha节点软件
vim /etc/my.cnf
server_id=3
gtid_mode=ON
enforce_gtid_consistency=ON
log_slave_updates=ON
log_bin=binlog
yum install -y mha4mysql-node-0.58-0.el7.centos.noarch.rpm
MHA节点配置
yum install -y mha4mysql-manager-0.58-0.el7.centos.noarch.rpm perl-* mha4mysql-node-0.58-0.el7.centos.noarch.rpm 安装MHA软件
配置免密访问
ssh-keygen 生成密钥
发送密钥
ssh-copy-id server1
ssh-copy-id server2
ssh-copy-id server3
并且数据库互相之间也要免密
拷贝server4上的密钥给server1 2 3
scp -r .ssh server1:
scp -r .ssh server2:
scp -r .ssh server3:
配置mha工作目录及配置文件
参考https://www.cnblogs.com/gomysql/p/3675429.html
mkdir /etc/masterha
vim /etc/masterha/app1.cnf
[server default]
manager_workdir=/etc/masterha
manager_log=/var/log/masterha.log
master_binlog_dir=/etc/masterha
#master_ip_failover_script= /usr/local/bin/master_ip_failover
#master_ip_online_change_script= /usr/local/bin/master_ip_online_change
password=Wsp+123ld #MySQL管理帐号和密码
user=root
ping_interval=1
remote_workdir=/tmp
repl_password=Wsp+123ld
repl_user=repl
#report_script=/usr/local/send_report
#secondary_check_script= /usr/local/bin/masterha_secondary_check -s server03 -s server02
#shutdown_script=""
ssh_user=root
[server1]
hostname=172.25.136.1
port=3306
[server2]
hostname=172.25.136.2
port=3306
candidate_master=1
check_repl_delay=0
[server3]
hostname=172.25.136.3
port=3306
no_master=1
其中
manager_log=/var/log/masterha.log manager 日志文件
password=Wsp+123ld MySQL管理帐号和密码
ssh_user=root # 系统ssh用户
candidate_master=1 备选master
no_master=1 表示这个节点不能作为master
数据库主从节点配置
master节点需要授权root用户访问,是因为server4调度器默认是用root远程连接数据库,
但是在配置数据库是已经禁用了root的远程连接
在主库上授权用户
mysql> grant all on *.* to root@'%' identified by 'Wsp+123ld';
两个slave节点设置只读(不写在配置文件里,因为slave随时可能切换为master)
set global read_only = 1
测试
检测连接功能
masterha_check_ssh --conf=/etc/masterha/app1.cnf
免密后就可以成功
如果数据库之间不是互相免密,就会出现如下报错
检测复制功能
masterha_check_repl --conf=/etc/masterha/app1.cnf
出现下图的报错,是因为server4调度器默认是用root远程连接数据库,
但是在配置数据库是已经禁用了root的远程连接
在主库上授权用户
mysql> grant all on *.* to root@'%' identified by 'Wsp+123ld';
测试manager能否开启
nohup masterha_manager --conf=/etc/masterha/app1.cnf --remove_dead_master_conf --ignore_last_failover < /dev/null > /var/log/masterha.log 2>&1 &
测试手动failover切换
先关闭manager,不关的话切不了,manager就是自动切换的工具
[root@server4 masterha]# masterha_stop --conf=/etc/masterha/app1.cnf
masterha_master_switch --master_state=dead --conf=/etc/masterha/app1.cnf --dead_master_host=172.25.0.1 --dead_master_ip=172.25.0.1 --dead_master_port=3306 --new_master_host=172.25.0.2 --new_master_port=3306
手动切换之前,需要保证主从同步正常,repl复制用户能够远程连接
中间都选yes
将server3重启,并设置成从库
[root@server1 ~]# systemctl start mysqld
mysql> CHANGE MASTER TO MASTER_HOST = '172.25.70.14', MASTER_USER = 'repl', MASTER_PASSWORD = 'Wsp+123ld', MASTER_AUTO_POSITION = 1;
mysql> start slave;
mysql> show slave status\G
查看server1主从配置,主库改为server4
设置server3的主库,查看主从配置
这时会在/etc/masterha目录下生成一个app1.failover.complete文件,是来记录failover情况的,再进行failover时必须先把这个文件删除,不然不会failover
测试半自动failover
在server2(MHA节点)上
首先清理app1.failover.complete
开启mha manager
nohup masterha_manager --conf=/etc/masterha/app1.cnf &>/dev/null &
mha manager自带守护进程
在server3(主库)上可以看到mha进程,即使关闭也会自动开启
ps ax | grep mysql
然后关闭数据库
systemctl stop mysqld
在server2(MHA节点)上查看
cat /var/log/masterha.log
发现已经切换,同时manager进程退出,所以全自动需要脚本
把server1加回集群
mysql> CHANGE MASTER TO MASTER_HOST = '172.25.0.2', MASTER_USER = 'repl', MASTER_PASSWORD = 'Wsp+123ld', MASTER_AUTO_POSITION = 1;
mysql> start slave;
配置脚本和vip漂移
因为用户访问入口只能有一个,所以需要配置vip
编辑master_ip_failover 和 master_ip_online_change 两个脚本,配置自动添加和删除vip
修改内容:
my $ssh_start_vip = "/sbin/ip addr add $vip dev eth0";
my $ssh_stop_vip = "/sbin/ip addr del $vip dev eth0";
cp master_ip_failover master_ip_online_change /usr/local/bin
cd /usr/local/
cd bin/
chmod +x master_ip_failover master_ip_online_change
###注意在server4的配置文件种 这两行的注释要打开
master_ip_failover_script= /usr/local/bin/master_ip_failover
master_ip_online_change_script= /usr/local/bin/master_ip_online_change
#目前server4是master,所以先给server4添加vip
ip addr add 172.25.70.110/24 dev eth0
MHA调度器上,可以看到切换vip
masterha_master_switch --conf=/etc/masterha/app1.cnf --master_state=alive --new_master_host=172.25.70.13 --new_master_port=3306 --orig_master_is_new_slave --running_updates_limit=10000
测试全自动切换
在server4上先删除app1.failover.complete
开启manager
nohup masterha_manager --conf=/etc/masterha/app1.cnf &>/dev/null &
然后在master(server1)上关闭mysql,模拟故障
再在server4上查看日志
cat /var/log/masterha.log
可以看到切换成功,vip也成功漂移
小结
从库无法同步
可能是主库有数据,但是二进制日志缺被清除,从库无法进行复制
解决:
1.主库备份数据
mysqldump --all-databases --single-transaction --triggers --routines --events --host=127.0.0.1 --port=3306 --user=root --password=Wsp+123ld > wsp.sql
2.从库先关闭slave,导入数据后再开启。
登录数据库,清除原来数据
mysql> stop slave;
mysql> reset master;
重新导入
进入数据库,重新配置复制
mysql> CHANGE MASTER TO MASTER_HOST = '172.25.0.1', MASTER_USER = 'repl', MASTER_PASSWORD = 'Wsp+123ld', MASTER_AUTO_POSITION = 1;
mysql> start slave;
下图是从库没有关闭slave,所以就报错
MHA节点测试报错
如果之前有用MHA进行测试过,会在/etc/masterha目录下生成一个app1.failover.complete文件,是来记录failover情况的,再进行failover时必须先把这个文件删除,不然不会failover