MHA高可用-mysql

mysql高可用

1.环境准备

1. 三台虚拟机（db01,db02,db03），装好MySQL5.7单实例，并且启动
2. 在三台机器安装perl的软件包
3. db03上安装MHA-Manager，db01,db02,db03都安装MHA-Node软件

2.需要搭建1主2从GTID复制关系

1. 10.0.0.51主节点：
grant replication slave on . to repl@'10.0.0.%' identified by '123';
2. 52和53构建主从
CHANGE MASTER TO
MASTER_HOST='10.0.0.51',
MASTER_PORT=3306,
MASTER_AUTO_POSITION=1,
MASTER_USER='repl',
MASTER_PASSWORD='123';
start slave;

3.多节点互信配置

db01：

[root@db01 ~]# \rm -rf .ssh
[root@db01 ~]# ssh-keygen
[root@db01 ~]# cd .ssh
[root@db01 .ssh]# ls
id_rsa id_rsa.pub
[root@db01 .ssh]# mv id_rsa.pub authorized_keys
[root@db01 ~]# scp -r /root/.ssh 10.0.0.52:/root
[root@db01 ~]# scp -r /root/.ssh 10.0.0.53:/root

多节点验证

[root@db01 ~]# ssh 10.0.0.51 date
[root@db01 ~]# ssh 10.0.0.52 date
[root@db01 ~]# ssh 10.0.0.53 date

4. 安装软件

4.1下载mha软件

mha官网：https://code.google.com/archive/p/mysql-master-ha/
github下载地址：https://github.com/yoshinorim/mha4mysql-manager/wiki/Downloads 

4.2 安装Node软件依赖包（所有节点）

yum install perl-DBD-MySQL -y
rpm -ivh mha4mysql-node-0.56-0.el6.noarch.rpm

4.3 Manager软件安装（db03）

yum install -y perl-Config-Tiny epel-release perl-Log-Dispatch perl-Parallel-ForkManager perl-Time-HiRes
rpm -ivh mha4mysql-manager-0.56-0.el6.noarch.rpm

5.MHA专用用户创建（db01）

grant all privileges on . to mha@'10.0.0.%' identified by 'mha';

6.MHA-Manager配置文件准备

1.创建配置文件目录：

mkdir -p /etc/mha

2.编辑mha配置文件

vim /etc/mha/app1.cnf

[server default]
manager_log=/var/log/mha/app1/manager
manager_workdir=/var/log/mha/app1
master_binlog_dir=/data/binlog
user=mha
password=mha
ping_interval=2
repl_password=123
repl_user=repl
ssh_user=root
[server1]
hostname=10.0.0.51
port=3306
[server2]
hostname=10.0.0.52
port=3306
[server3]
hostname=10.0.0.53
port=3306

7.状态检查

1.互信检查

masterha_check_ssh --conf=/etc/mha/app1.cnf

2.主从状态

masterha_check_repl --conf=/etc/mha/app1.cnf

8.生成软链接

ln -s /application/mysql/bin/mysqlbinlog /usr/bin/mysqlbinlog
ln -s /application/mysql/bin/mysql /usr/bin/mysql

9.开启MHA

nohup masterha_manager --conf=/etc/mha/app1.cnf --remove_dead_master_conf --ignore_last_failover < /dev/null> /var/log/mha/app1/manager.log 2>&1 

10.查看MHA状态

masterha_check_status --conf=/etc/mha/app1.cnf

mysql -umha -pmha -h 10.0.0.51 -e "show variables like 'server_id'"
mysql -umha -pmha -h 10.0.0.52 -e "show variables like 'server_id'"
mysql -umha -pmha -h 10.0.0.53 -e "show variables like 'server_id'"

11.MHA的工作过程

1.MHA架构分为了两大部分

Manager:
Manager：生产中一般是一般是有专门的机器安装
Manager工具包主要包括以下几个工具：
masterha_manger 启动MHA
masterha_check_ssh 检查MHA的SSH配置状况
masterha_check_repl 检查MySQL复制状况
masterha_master_monitor 检测master是否宕机
masterha_check_status 检测当前MHA运行状态
masterha_master_switch 控制故障转移（自动或者手动）
masterha_conf_host 添加或删除配置的server信息

Node
Node ：所有的主从节点都是Node
save_binary_logs 保存和复制master的二进制日志
apply_diff_relay_logs 识别差异的中继日志事件并将其差异的事件应用于其他的
purge_relay_logs 清除中继日志（不会阻塞SQL线程）

12.故障模拟及处理

1.db01
停主库：

/etc/init.d/mysqld stop

观察manager 日志 tail -f /var/log/mha/app1/manager
末尾必须显示successfully，才算正常切换成功。
2.修复主库
[root@db01 ~]# /etc/init.d/mysqld start
3.恢复主从结构

CHANGE MASTER TO
MASTER_HOST='10.0.0.52',
MASTER_PORT=3306,
MASTER_AUTO_POSITION=1,
MASTER_USER='repl',
MASTER_PASSWORD='123';

start slave ;

4.修改配置文件

[server1]
hostname=10.0.0.51
port=3306

5.启动MHA

nohup masterha_manager --conf=/etc/mha/app1.cnf --remove_dead_master_conf --ignore_last_failover < /dev/null> /var/log/mha/app1/manager.log 2>&1 &

13.配置文件内容

[server default]

manager_log=/var/log/mha/app1/manager
manager_workdir=/var/log/mha/app1
master_binlog_dir=/data/mysql
user=mha
password=mha
ping_interval=2
repl_password=123
repl_user=repl
ssh_user=root

[server1]
hostname=10.0.0.51
port=3306
candidate_master=1

[server2]
hostname=10.0.0.52
port=3306

[server3]
hostname=10.0.0.53
port=3306

Manager额外参数介绍

(1) ping_interval=1
设置监控主库，发送ping包的时间间隔，尝试三次没有回应的时候自动进行failover
(2) candidate_master=1
设置为候选master，如果设置该参数以后，发生主从切换以后将会将此从库提升为主库，
即使这个主库不是集群中事件最新的slave
(3)check_repl_delay=0

默认情况下如果一个slave落后master 100M的relay logs的话，
MHA将不会选择该slave作为一个新的master，因为对于这个slave的恢复需要花费很长时间，
通过设置check_repl_delay=0,MHA触发切换在选择一个新的master的时候将会忽略复制延时，
这个参数对于设置了candidate_master=1的主机非常有用，因为这个候选主在切换的过程中一定是新的master

14.MHA的VIP功能

外部的脚本的调用接口
1.参数：
master_ip_failover_script=/usr/local/bin/master_ip_failover
2. 注意：/usr/local/bin/master_ip_failover，必须事先准备好此脚本

3.将script.tar.gz 文件上传到/usr/local/bin，并解压
4.修改脚本内容：

vi /usr/local/bin/master_ip_failover
my vip = '10.0.0.55/24';mykey='1';
my sshstartvip="/sbin/ifconfig eth0:key vip";myssh_stop_vip=
"/sbin/ifconfig eth0:$key down";

5.更改manager配置文件:

vi /etc/mha/app1.cnf
添加：
master_ip_failover_script=/usr/local/bin/master_ip_failover

6.主库上，手工生成第一个vip地址
手工在主库上绑定vip，注意一定要和配置文件中的ethN一致，我的是eth0:1(1是key指定的值)

ifconfig eth0:0 10.0.0.55/24

7.重启mha

masterha_stop --conf=/etc/mha/app1.cnf

nohup masterha_manager --conf=/etc/mha/app1.cnf --remove_dead_master_conf --ignore_last_failover < /dev/null > /var/log/mha/app1/manager.log 2>&1 &

15.binlog server(db03)

1.参数：
binlogserver配置：

找一台额外的机器，必须要有5.6以上的版本，支持gtid并开启，我们直接用的第二个slave（db03）

vim /etc/mha/app1.cnf

[binlog1]
no_master=1
hostname=10.0.0.53
master_binlog_dir=/data/binlog_s

2.创建必要目录
提前创建好,这个目录不能和原有的binlog一致

mkdir -p /data/binlog_s
chown -R mysql.mysql /data/*

修改完成后，将主库binlog拉过来（从000001开始拉，之后的binlog会自动按顺序过来）
3.拉取主库binlog日志

cd /data/mysql/binlog -----》必须进入到自己创建好的目录

mysqlbinlog -R --host=10.0.0.52 --user=mha --password=mha --raw --stop-never mysql-bin.000001 &

注意：
binlog拉取和mha本身没啥关系，但是mha配置文件中加入了binlogserver，必须mha启动之前要去配置执行，否则mha起不来
4.重启MHA

masterha_stop --conf=/etc/mha/app1.cnf

nohup masterha_manager --conf=/etc/mha/app1.cnf --remove_dead_master_conf --ignore_last_failover < /dev/null > /var/log/mha/app1/manager.log 2>&1 &

5.故障处理
主库宕机，binlogserver 自动停掉，manager 也会自动停止。
处理思路：
1.恢复故障库
2.将修好的故障库，加入到主从关系
3.修复binlog server 拉取新主日志
4.恢复manager

5.7 GTID 并发复制+MHA