mysql的高可用mha

理论

一套优秀的mysql搞可用环境下故障切换和主从复制的软件
mysql故障过程中，mha能够到0-30秒内自动完成故障切换
MHA的组成
manager（管理节点）：可以借助于node组件，实现健康检查（ssh，主从复制），故障切换功能
node（数据节点）：定时汇报给manager节点mysql的服务状态，监控本地mysql服务功能
特点： （本质vip漂移）
自动故障切换过程，MHA视图从宕机的主服务器上保存二进制日志，最大成都的保证数据不丢失
使用半同步复制，可以大大降低数据丢失的风险，目前mha支持一主多个架构，至少三台，

当主挂了，先去除binlog和relay相差100m的日志，择优，master1000多个slave980,900,920
预选，优选

实验

1，实验环境

MHA-manager ：192.168.17.20 管理节点，安装 manager 组件与node组件
三台mysql服务器，三台机器搭建主从复制，安装node组件

2，配置环境

第一安装依赖环境
在四台服务器上安装
yum -y install ncurses-devel gcc-c++ perl-Module-Install

tar zxvf cmake-2.8.6.tar.gz -C /opt

cd /opt/cmake-2.8.6/
./configure
gmake && gmake install
第二步，安装mysql5.6，并配置启动文件，主配置文件，可以参照之前的安装

第三步，在master上开启二进制日志，配置主从同步

cat /etc/my.cnf
[mysqld]
server-id = 1
log_bin = master-bin
log-slave-updates = true

第四步，在从服务器上配置中继日志
vim /etc/my.cnf
server-id = 2
log_bin = master-bin
relay-log = relay-log-bin
relay-log-index = slave-realy-bin.index

#slave 2
vim /etc/my.cnf
server-id = 3
log_bin = master-bin
relay-log = relay-log-bin
relay-log-index = slave-realy-bin.index

第五步，在三台mysql上配置软链接

ln -s /usr/local/mysql/bin/mysql /usr/sbin
ln -s /usr/local/mysql/bin/mysqlbinlog /usr/sbin

在后台启动mysql服务
（mysql_safe 安全启动,相当于多了一个守护进程,mysqld挂了会自动把mysqld进程拉起来）
/usr/local/mysql/bin/mysqld_safe --user=mysql &

systemctl stop firewalld.service
setenforce 0

第六步，配置主从，这里在每台mysql服务器上都要配置
在所有数据库节点上授权两个用户，一个是从库同步使用，另一个是manager使用
grant replication slave on . to ‘myslave’@‘192.168.17.%’ identified by ‘123456’;
grant all privileges on . to ‘mha’@‘192.168.17.%’ identified by ‘manager’
grant all privileges on . to ‘mha’@‘master’ identified by ‘manager’;
grant all privileges on . to ‘mha’@‘slave1’ identified by ‘manager’;
grant all privileges on . to ‘mha’@‘slave2’ identified by ‘manager’;
在从服务器上开启只读功能
set global read_only=1;

flush privileges;
第七步，配置二进制文件和同步点
在master上查看二进制文件和同步点
show master status;
在两台节点服务器进行同步
change master to master_host=‘192.168.17.50’,master_user=‘myslave’,master_password=‘123456’,master_log_file=‘master-bin.000001’,master_log_pos=120;
start slave；
show slave status\G;
只读功能验证
在slave1服务器上，mysql -umyslave -p123456 -h 192.168.17.10 -P 3306

mysql> create database info;
ERROR 1290 (HY000): The MySQL server is running with the --read-only option so it cannot execute this statement
上面部分配置可以参照上一部分主从tongbu

3，配置mha

第一步，安装环境
yum install epel-release --nogpgcheck -y

yum install -y perl-DBD-MySQL
perl-Config-Tiny
perl-Log-Dispatch
perl-Parallel-ForkManager
perl-ExtUtils-CBuilder
perl-ExtUtils-MakeMaker
perl-CPAN
同步阿里云时间
ntpdate ntp.aliyun.com
第二步，在4台服务器上安装node组件``

tar zxvf /opt/mha4mysql-node-0.57.tar.gz -C /root
cd mha4mysql-node-0.57
perl Makefile.PL
make && make install

第三步，在manager上安装manager组件，这个组件只有在node安装完成后安装

tar zxvf /opt/mha4mysql-manager-0.57.tar.gz -C /root
cd mha4mysql-manager-0.57
perl Makefile.PL
make && make install

查看安装结果
manager 安装后在/usr/local/bin目录下会生成几个工具，主要包括以下：

masterha-check_ssh 检查MHA的SSH配置状况（免交互）
masterha_check_repl 检查MySQL复制状况
masterha_manager 启动manager的脚本
masterha_check_status 检查当前MHA运行状态
masterha_master_monitor 检查master是否宕机
masterha_master_switch 控制故障转移(自动或者手动）
masterha_conf_host 添加或删除配置的server信息
masterha_stop 关闭manager
node 安装后也会在/usr/local/bin目录下生成几个脚本，需要进行检查，主要包括以下
save_binary_logs #保存和复制master的二进制日志
apply_diff_relay_logs #识别差异的中继日志时间，并将其差异的事件应用于其他的slave
filter_mysqlbinlog #去除不必要的ROLLBACK回滚事件（MHA 已不适用这个工具）
purge_relay_logs #清除中继日志（不会阻塞 SQL线程）
第四步，4台服务器做免密交互
一路回车
ssh-keygen -t rsa
ssh-copy-id 192.168.17.10
ssh-copy-id 192.168.17.20
ssh-copy-id 192.168.17.30
ssh-copy-id 192.168.17.50
第五步，配置mha
cp -ra /root/mha4mysql-manager-0.57/samples/scripts/ /usr/local/bin
复制上述的master_ip_failover 到/usr/local/bin目录 这里使用脚本管理VIP

[root@manager mha4mysql-manager-0.57]# cp /usr/local/bin/scripts/master_ip_failover /usr/local/bin
[root@manager mha4mysql-manager-0.57]# cd /usr/local/bin
[root@manager bin]# ls
ab                     envvars-std          masterha_check_ssh        pecl
apachectl              fcgistarter          masterha_check_status     phar
apply_diff_relay_logs  filter_mysqlbinlog   masterha_conf_host        phar.phar
apxs                   htcacheclean         masterha_manager          php
ccmake                 htdbm                masterha_master_monitor   php-cgi
checkgid               htdigest             masterha_master_switch    php-config
cmake                  htpasswd             masterha_secondary_check  phpize
cpack                  httpd                masterha_stop             purge_relay_logs
ctest                  httxt2dbm            master_ip_failover        rotatelogs
dbmmanage              logresolve           pear                      save_binary_logs
envvars                masterha_check_repl  peardev                   scripts
[root@manager bin]# vim master_ip_failover 
[root@manager bin]# mkdir /etc/masterha
[root@manager bin]# cp /root/mha4mysql-manager-0.57/samples/conf/app1.cnf /etc/masterha/
[root@manager bin]# vim /etc/masterha/app1.cnf
[root@manager bin]# masterha_check_ssh -conf=/etc/masterha/app1.cnf

第七步，修改master_ip_failover内容（删除原有内容，直接复制）

#!/usr/bin/env perl 
use strict;
use warnings FATAL => 'all';

use Getopt::Long;

my (
$command, $ssh_user, $orig_master_host, $orig_master_ip,
$orig_master_port, $new_master_host, $new_master_ip, $new_master_port
);
my $vip = '192.168.17.100';		#浮动IP
my $brdc = '192.168.17.255';	#广播地址
my $ifdev = 'ens33';		#使用的网卡为ens33
my $key = '1';			#国际序列号
my $ssh_start_vip = "/sbin/ifconfig ens33:$key $vip";							#使用ifoconfig命令将其启动，同时设置浮动地址
my $ssh_stop_vip = "/sbin/ifconfig ens33:$key down";							#可以使用ifconfig命令将其down掉（关闭）
my $exit_code = 0;			#正常退出（返回状态码）
#my $ssh_start_vip = "/usr/sbin/ip addr add $vip/24 brd $brdc dev $ifdev label $ifdev:$key;/usr/sbin/arping -q -A -c 1 -I $ifdev $vip;iptables -F;";
#my $ssh_stop_vip = "/usr/sbin/ip addr del $vip/24 dev $ifdev label $ifdev:$key";
GetOptions(
'command=s' => \$command,
'ssh_user=s' => \$ssh_user,
'orig_master_host=s' => \$orig_master_host,
'orig_master_ip=s' => \$orig_master_ip,
'orig_master_port=i' => \$orig_master_port,
'new_master_host=s' => \$new_master_host,
'new_master_ip=s' => \$new_master_ip,
'new_master_port=i' => \$new_master_port,
);

exit &main();

sub main {

print "\n\nIN SCRIPT TEST====$ssh_stop_vip==$ssh_start_vip===\n\n";

if ( $command eq "stop" || $command eq "stopssh" ) {

my $exit_code = 1;
eval {
print "Disabling the VIP on old master: $orig_master_host \n";
&stop_vip();
$exit_code = 0;
};
if ($@) {
warn "Got Error: $@\n";
exit $exit_code;
}
exit $exit_code;
}
elsif ( $command eq "start" ) {

my $exit_code = 10;
eval {
print "Enabling the VIP - $vip on the new master - $new_master_host \n";
&start_vip();
$exit_code = 0;
};
if ($@) {
warn $@;
exit $exit_code;
}
exit $exit_code;
}
elsif ( $command eq "status" ) {
print "Checking the Status of the script.. OK \n";
exit 0;
}
else {
&usage();
exit 1;
}
}
sub start_vip() {
`ssh $ssh_user\@$new_master_host \" $ssh_start_vip \"`;
}
# A simple system call that disable the VIP on the old_master
sub stop_vip() {
`ssh $ssh_user\@$orig_master_host \" $ssh_stop_vip \"`;
}

sub usage {
print
"Usage: master_ip_failover --command=start|stop|stopssh|status --orig_master_host=host --orig_master_ip=ip --orig_master_port=port --new_master_host=host --new_master_ip=ip --new_master_port=port\n";
}

第八步，
创建MHA软件目录并拷贝配置文件
mkdir /etc/masterha
cp /root/mha4mysql-manager-0.57/samples/conf/app1.cnf /etc/masterha/
vim /etc/masterha/app1.cnf

[server default]
#日志文件
manager_log=/var/log/masterha/app1/manager.log
#工作目录
manager_workdir=/var/log/masterha/app1
#二进制文件
master_binlog_dir=/home/mysql
#故障转移切换的工具
master_ip_failover_script=/usr/local/bin/master_ip_failover
#在线切换VIP工具管理
master_ip_online_change_script=/usr/local/bin/master_ip_online_change
#以下是密码账号的管理配置
password=manager
ping_interval=1
remote_workdir=/tmp
repl_password=123456
repl_user=myslave
secondary_check_script=/usr/local/bin/masterha_secondary_check -s 192.168.226.131 -s 192.168.226.132
shutdown_script=""
ssh_user=root
user=mha

[server1]
hostname=192.168.17.50
port=3306

[server2]
candidate_master=1
hostname=192.168.17.10
check_repl_delay=0
port=3306

[server3]
hostname=192.168.17.30
port=3306

测试无密码认证，如果正常会输出successfully
masterha_check_ssh -conf=/etc/masterha/app1.cnf

测试主从复制
masterha_check_repl -conf=/etc/masterha/app1.cnf

第一次配置需要在master节点上手动开启虚拟IP
/sbin/ifconfig ens33:1 192.168.17.100
启动MHA
#启动时会进行日志记录（在后台开启）
nohup masterha_manager --conf=/etc/masterha/app1.cnf --remove_dead_master_conf --ignore_last_failover < /dev/null > /var/log/masterha/app1/manager.log 2>&1 &

[root@manager bin]# nohup masterha_manager --conf=/etc/masterha/app1.cnf --remove_dead_master_conf --ignore_last_failover < /dev/null > /var/log/masterha/app1/manager.log 2>&1 &
[1] 21360
[root@manager bin]# masterha_check_status --conf=/etc/masterha/app1.cnf
app1 (pid:21360) is running(0:PING_OK), master:192.168.17.50
[root@manager bin]# cat /var/log/masterha/app1/manager.log 

验证

当关闭到master的mysql服务器之后，查看是否切换到从服务器上

切换成功

总结

1，mha是干嘛的,，怎么工作的？
高可用，利用VIP技术，在主服务器出现故障时，可进行自动切换，并且尽可能的保存为禁止日志的完整性，降低数据丢失的风险，同时实现主从的切换。
2，简单描述一下mha的搭建过程
第一步，配置实验环境，需要三台mysql服务器，一台主，两台从服务器，并做好主从同步，还有一台manager服务器，做mha管理，4台服务器上关闭防火墙，时间同步，全部做node组件，node组件用来给manager服务器调度使用。
第二步，在4台服务器上，做免密登录，对其他几台服务器进行免密
第三步，在三台mysql服务器上做提权，先提权做主从，在提权给mha用户，让mha可以管理使用
第四步，安装manager，用来管理mha，配置两个主配置文件，第一个配置文件，master_ip_failover,这个配置文件中主要修改配置VIP信息，定义VIP的地址，广播地址，以及使用的虚拟网卡信息，第二个配置文件app1.cnf，这个文件主要配置mha的管理账户密码，主从服务器的ip地址，以及二进制文件等的目录等
第五步，在客户端服务器上安装mariadb，进行远程登录mha的mysql，查看正否正常，验证，通过主主服务器挂掉，是否VIP地址会进行漂移。