一、MHA搭建
三台服务器:
主:221
从:222
从:220,兼职作为manager
除了manager以外所有的节点都是node
node+manager两种类型
1、基础环境准备:
准备好三台linux Redhat 6.5机器
规划好IP地址、配置hosts文件解析主机名
vim /etc/hosts
172.16.88.220 master
172.16.88.221 bakmas
172.16.88.222 slave
配置好本地yum源
关闭iptables 和selinux
三台安装一样版本的mysql数据库-5.7.14rpm和xtrabackup工具2.4.4
2、搭建主从
在主上创建复制用户并授权:
mysql> grant replication slave,replication client on *.* to
'repl'@'172.16.88.%' identified by 'repl';
对主库做全备,并应用,传输到2个从库上
在各个从库上进行恢复,并授权
启动后设置主从关系,开启从库,检查主从状态
修改配置文件vim /etc/my.cnf
log-bin=server
binlog_format=roe
binlog_rows_query_log_events=on
server_id=1/2/3
重启主库
service mysqld restart
查看节点文件
[root@master ~]# cd /usr/local/mysql/data/
[root@master data]# ll
total 122920
-rw-r----- 1 mysql mysql 56 May 1 12:23 auto.cnf
-rw-r----- 1 mysql mysql 330 May 1 15:48 ib_buffer_pool
-rw-r----- 1 mysql mysql 12582912 May 1 15:55 ibdata1
-rw-r----- 1 mysql mysql 50331648 May 1 15:55 ib_logfile0
-rw-r----- 1 mysql mysql 50331648 May 1 12:23 ib_logfile1
-rw-r----- 1 mysql mysql 12582912 May 1 15:55 ibtmp1
drwxr-x--- 2 mysql mysql 4096 May 1 12:23 mysql
-rw-rw---- 1 root root 6 May 1 15:55 mysqld_safe.pid
drwxr-x--- 2 mysql mysql 4096 May 1 12:23 performance_schema
-rw-r----- 1 mysql mysql 154 May 1 15:55 server.000001
-rw-r----- 1 mysql mysql 16 May 1 15:55 server.index
drwxr-x--- 2 mysql mysql 12288 May 1 12:23 sys
确定主从关系
mysql> ? change master to
CHANGE MASTER TO
MASTER_HOST='172.16.88.220',
MASTER_USER='repl',
MASTER_PASSWORD='repl',
MASTER_PORT=3306,
MASTER_LOG_FILE='server.000001',
MASTER_LOG_POS=154,
MASTER_CONNECT_RETRY=10;
mysql> start slave;
查看主从状态
从:
mysql> show slave status\G
*************************** 1. row
***************************
Slave_IO_State: Waiting for master to send event
Master_Host: 172.16.88.220
Master_User: repl
Master_Port: 3306
Connect_Retry: 10
Master_Log_File: server.000001
Read_Master_Log_Pos: 154
Relay_Log_File: bakmas-relay-bin.000003
Relay_Log_Pos: 317
Relay_Master_Log_File: server.000001
Slave_IO_Running: Yes
Slave_SQL_Running: Yes
主:
mysql> show processlist;
主从库安装node节点软件
[root@master mha_file]# rpm -ivh mha4mysql-node-0.54-0.el6.noarch.rpm
备主机器安装所有软件
rpm localinstall ./*.rpm
查看/usr/bin有没有生成脚本
[root@bakmas mha_file]# cd /usr/bin/
[root@bakmas bin]# ll |grep "_logs"
-rwxr-xr-x 1 root root 15977 Dec 1 2012 apply_diff_relay_logs
-rwxr-xr-x 1 root root 7401 Dec 1 2012 purge_relay_logs
-rwxr-xr-x 1 root root 7263 Dec 1 2012 save_binary_logs
3、配置免密
三台都需要
主库:
生成rsa秘钥:
[root@master ~]# ssh-keygen -t rsa
[root@master ~]# cd .ssh/
[root@master .ssh]# ll
total 8
-rw------- 1 root root 1675 May 1 16:45 id_rsa//私钥
-rw-r--r-- 1 root root 393 May 1 16:45 id_rsa.pub//公钥
将生成的公钥追加到认证文件中:
cat /root/.ssh/id_rsa.pub >> authorized_keys
修改ssh文件夹和公钥的权限:
chmod 700 /root/.ssh
chmod 600 authorized_keys
将公钥传输到其他2个机器上:
ssh-copy-id -i id_rsa.pub root@slave
ssh-copy-id -i id_rsa.pub root@bakmas
slave:
ssh-copy-id -i id_rsa.pub root@master
ssh-copy-id -i id_rsa.pub root@bakmas
bakmas:
ssh-copy-id -i id_rsa.pub root@master
ssh-copy-id -i id_rsa.pub root@slave
验证三台机器间无密码登录任何一台机器
4、配置监控用户
在master上创建mha监控用户,这样2个从上自动有该用户
mysql> grant all privileges on *.* to 'mha_bakmas'@'172.16.88.%' identified
by 'mha_bakmas';
测试是否成功:
mysql -umha_bakmas -pmha_bakmas -hmaster -P3306
5、配置MHA
在mha-manager上执行:
1、创建mha的工作目录
mkdir -p /etc/masterha
修改相关配置文件app1.cnf
[server default]
manager_workdir=/var/log/masterha/app1
manager_log=/var/log/masterha/app1/manager.log
master_binlog_dir=/var/lib/mysql/data
master_ip_failover_script=/usr/bin/master_ip_failover //失败切换
master_ip_online_change_script=/usr/bin/master_ip_online_change //主动切换
user=mha_monitor //manager 使用这个账号连接各个数据库
password=mha_monitor //manager 使用这个账号密码连接各个数据库
ping_interval=1 //manager 每隔 1 秒钟,探测一下各个节点
remote_workdir=/tmp //指定远端目录
repl_user=repl //各个节点之间的复制账号和密码
repl_password=repl
ssh_user=root
[server1]
hostname=192.168.10.50
#candidate_master=1
port=3306
[server2]
hostname=192.168.10.51
candidate_master=1 //指定2节点优先成为主,假设没有这个选项,默认使用最新的 slave
成为主
check_repl_delay=0 //关闭延迟监测
port=3306
[server3]
hostname=192.168.10.52
port=3306
填充:
[server default]
manager_workdir=/var/log/masterha/app1
manager_log=/var/log/masterha/app1/manager.log
master_binlog_dir=/var/lib/mysql/data
master_ip_failover_script=/usr/bin/master_ip_failover
master_ip_online_change_script=/usr/bin/master_ip_online_change
user=mha_bakmas
password=mha_bakmas
ping_interval=1
remote_workdir=/tmp
repl_user=repl
repl_password=repl
ssh_user=root
[server1]
hostname=172.16.88.220
port=3306
[server2]
hostname=172.16.88.221
candidate_master=1
check_repl_delay=0
port=3306
[server3]
hostname=172.16.88.222
port=3306
2、在从库上关闭自动purge
在2个从节点,设置relay_log_purge=0,不自动清除relay_log,可以利用自带的purge_relay_log脚本实现定时任务自动清理relay
log
[root@bakmas ~]# vim /etc/my.cnf
relay_log_purge=off
read_only=on
3、修改脚本
主库上:
在主库设置虚拟ip
[root@master etc]# ifconfig eth0:1 172.16.88.224/24
bakmas(监控机)上:
master_ip_failover
master_ip_online_change
将脚本放到/usr/bin
修改虚拟地址
[root@bakmas bin]# vim /usr/bin/master_ip_failover
my $vip = '172.16.88.224/24'; # Virtual IP
[root@bakmas bin]# vim /usr/bin/master_ip_online_change
vip=`echo '172.16.88.224/24'` # Virtual IP
manager需要使用这两个脚本,在新的主上启动漂移ip
将这两个中的所有地址改成漂移ip地址就行了
这两个脚本在manager节点上
4、改完之后加上权限
[root@bakmas bin]# chmod +x master_ip_*
上面配置好以后,就可以在 manager 上面执行相关的脚本进行测试
上面的配置就是告诉 manager,我这个集群的基本信息
5、mha检查ssh免密登录:
masterha_check_ssh --conf=/etc/masterha/app1.cnf
6、mha检查复制
masterha_check_repl --conf=/etc/masterha/app1.cnf
7、mha状态检查
masterha_check_status --conf=/etc/masterha/app1.cnf
8、启动 manager:
nohup masterha_manager --conf=/etc/masterha/app1.cnf --remove_dead_master
--ignore_last_failover < /dev/null > /var/log/masterha/app1/manager.log 2>&1
&
建议:在启动manager以前,启动好主从
另开窗口查看监控日志: tail -f /var/log/masterha/app1/manager.log
再次查看监控状态:
masterha_check_status --conf=/etc/masterha/app1.cnf
如何关闭manager监控:
masterha_stop --conf=/etc/masterha/app1.cnf
一主两从
搭建两次从服务器
不建议使用半同步复制
注意几个点:
1、从库都该成read-only模式
2、从库的relay log自动删除功能要关闭
3、三个数据库的server_id必须不一致
log-bin = mysql-bin //要求所有可能成为主库的节点开启二进制日志
relay_log_purge = 0 //要求所有可能成为主库的节点都要配置此项
read_only = 1 //MHA 要求所有 slave 节点配置为 read_only = 1
server-id = 2 //注意主从节点的 server-id 不同
5、安装node和manager软件,这个属于mha软件
安装的时候,需要依赖很多的per软件和Perl库,因此可能会比较麻烦
去下载已经安装好的虚拟机
6、配置互信(配置SSH免密登录)
节点之间可以互相执行命令、拷贝数据,这些都不需要密码。
配置完成互信以后,一定要进行测试。
二、MHA在线|故障切换测试
1、手工在线测试
检查master_ip_online_change脚本中所有虚拟ip是否修改完成。
在线切换步骤:
1、手工停掉mha监控
masterha_stop --conf=/etc/masterha/app1.cnf
2、执行在线切换
masterha_master_switch --conf=/etc/masterha/app1.cnf --master_state=alive
--new_master_host=172.16.88.220 --new_master_port=3306
--orig_master_is_new_slave --running_updates_limit=10000
yes,yes
3、其中参数的意思:
--orig_master_is_new_slave 切换时加上此参数是将原 master 变为 slave
节点,如果不加此参数,原来的 master 将不启动。
--running_updates_limit=10000,故障切换时,候选 master 如果有延迟的话,mha
切换不能成功,加上此参数表示延迟在此时间范围内都可切换(单位为
s),但是切换的时间长短是由 recover 时 relay 日志的大小决定。
在备主和监控机上查看是否完成切换:show processlist;
4、启动MHA manager:
nohup masterha_manager --conf=/etc/masterha/app1.cnf --remove_dead_master
--ignore_last_failover < /dev/null > /var/log/masterha/app1/manager.log
2>&1 &
masterha_check_status --conf=/etc/masterha/app1.cnf
2、故障切换测试
直接在主库上进行failover,杀掉mysqld进程
mysql> shutdown;
Query OK, 0 rows affected (0.01 sec)
mysql> show processlist;
ERROR 2006 (HY000): MySQL server has gone away
No connection. Trying to reconnect...
ERROR 2002 (HY000): Can't connect to local MySQL server through socket
'/var/lib/mysql/mysql.sock' (2)
ERROR:
Can't connect to the server
这时候会自动完成222故障切换,vip的漂移,但是manager进程会自动关闭
注意:
1、MHA里有2个角色,一个是manager节点,一个是node节点,要实现这个MHA,最好是不少于3台机器,一主2从,1台是主,一台当备用master,另一台从机当监控机,一旦主库宕机,备主开始充当主库提供服务,如果旧主上线也不会在成为master了,除非修复完整后强制做主库。
2、一旦发生切换,manager进程将会退出,无法进行再次测试,需要将故障数据库加入到MHA环境中。
宕掉的主库需要进行恢复操作:
常情况下,旧主在修复完整后,可能想把旧主作为新主的slave,这时可以借助当时自动切换时刻的MHA日志来完成对旧主的修复。
3、在manager上查看当时的change master 信息:
# cat /var/log/masterha/app1/manager.log |grep -i "All other slaves should
start"
Fri Dec 30 18:09:35 2016 - [info] All other slaves should start replication
from here. Statement should be: CHANGE MASTER TO MASTER_HOST='192.168.10.51',
MASTER_PORT=3306, MASTER_LOG_FILE='mha-server.000001', MASTER_LOG_POS=154,
MASTER_USER='repl', MASTER_PASSWORD='xxx';
获取上述信息后,在旧主上执行change master to操作,重新设置为新主的从库:
启动从库,查看主从状态
无论什么测试,在切换完成后,注意检查vip的位置,主从的状态信息是否正常,read_only和relay_log_purge的值,要和真实的架构状态对应起来,并且记得在配置文件中进行相应的修改
4、修复好的旧主并没有加入到MHA监控环境中,需要手工加入:
masterha_conf_host --command=add --conf=/etc/masterha/app1.cnf
--hostname=172.16.88.220 --block=server1 --params="no_master=1;ignore_fail=1"
或者是直接手工编辑app1.cnf配置文件添加上该信息,再次检查复制环境:
masterha_check_repl --conf=/etc/masterha/app1.cnf
5、Requirements and Limitations
1 这一部分做简要翻译,安装MHA的依赖和限制
2 SSH public key认证
3 仅支持Liunx操作系统
4 只有一台master能被设置成readonly=0,其他设置为只读
5如果是Master1 -> Master2->
Slave3这样的三级复制框架,在配置文件中只需要设置master1和master2这样的二级复制结构,并设置multi_tier_slave=1来支持三级复制结构。
6 MHA仅支持mysql 5.0及以后的版本
7 mysqlbinlog必须是3.3及以上版本
8 log-bin必须在每一个可称为master的mysql服务器上设置
9 所有mysql服务器的复制过滤规则必须一致
10 必须在能成为master的服务器上设置复制账户
11所有Mysql服务器上必须设置relay_log_purge=1,使得能够保存一段时间的relay log
12 基于语句的复制时,不要使用load datainfile命令