利用数据库实现高可用

最新推荐文章于 2023-02-11 17:55:00 发布

weixin_43478840

最新推荐文章于 2023-02-11 17:55:00 发布

阅读量454

点赞数 1

本文链接：https://blog.csdn.net/weixin_43478840/article/details/86539987

版权

##用数据库实现高可用##

准备三台虚拟机，server1、server2、server3
其中server1为master，server2为备master，server3为slave
通过数据库实现高可用，可以解决严重的主从延迟，主从复制终端，大量阻塞与
软硬件引起的宕机等问题,选择三台虚拟机作为实验准备.
其中master对外提供写服务，备选master（实际的slave，主机名server2）提供读服务，slave也提供相关的读服务，一旦master宕机，将会把备选master提升为新的master，slave指向新的master

mysql高可用MHA######
MHA（Master High Availability）目前在MySQL高可用方面是一个相对成熟的解决方案，它由日本DeNA公司youshimaton（现就职于Facebook公司）开发，是一套优秀的作为MySQL高可用性环境下故障切换和主从提升的高可用软件。在MySQL故障切换过程中，MHA能做到在0~30秒之内自动完成数据库的故障切换操作，并且在进行故障切换的过程中，MHA能在最大程度上保证数据的一致性，以达到真正意义上的高可用。

该软件由两部分组成：MHA Manager（管理节点）和MHA Node（数据节点）。MHA Manager可以单独部署在一台独立的机器上管理多个master-slave集群，也可以部署在一台slave节点上。MHA Node运行在每台MySQL服务器上，MHA Manager会定时探测集群中的master节点，当master出现故障时，它可以自动将最新数据的slave提升为新的master，然后将所有其他的slave重新指向新的master。整个故障转移过程对应用程序完全透明。

在MHA自动故障切换过程中，MHA试图从宕机的主服务器上保存二进制日志，最大程度的保证数据的不丢失，但这并不总是可行的。例如，如果主服务器硬件故障或无法通过ssh访问，MHA没法保存二进制日志，只进行故障转移而丢失了最新的数据。使用MySQL 5.5的半同步复制，可以大大降低数据丢失的风险。MHA可以与半同步复制结合起来。如果只有一个slave已经收到了最新的二进制日志，MHA可以将最新的二进制日志应用于其他所有的slave服务器上，因此可以保证所有节点的数据一致性。

目前MHA主要支持一主多从的架构，要搭建MHA,要求一个复制集群中必须最少有三台数据库服务器，一主二从，即一台充当master，一台充当备用master，另外一台充当从库，因为至少需要三台服务器，出于机器成本的考虑，淘宝也在该基础上进行了改造，目前淘宝TMHA已经支持一主一从。

1）从宕机崩溃的master保存二进制日志事件（binlog events）;

（2）识别含有最新更新的slave；

（3）应用差异的中继日志（relay log）到其他的slave；

（4）应用从master保存的二进制日志事件（binlog events）；

（5）提升一个slave为新的master；

（6）使其他的slave连接新的master进行复制；

在这里插入图片描述

MHA软件由两部分组成，Manager工具包和Node工具包，具体的说明如下。

Manager工具包主要包括以下几个工具：

masterha_check_ssh 检查MHA的SSH配置状况
masterha_check_repl 检查MySQL复制状况
masterha_manger 启动MHA
masterha_check_status 检测当前MHA运行状态
masterha_master_monitor 检测master是否宕机
masterha_master_switch 控制故障转移（自动或者手动）
masterha_conf_host 添加或删除配置的server信息

Node工具包（这些工具通常由MHA Manager的脚本触发，无需人为操作）主要包括以下几个工具：

save_binary_logs 保存和复制master的二进制日志
apply_diff_relay_logs 识别差异的中继日志事件并将其差异的事件应用于其他的slave
filter_mysqlbinlog 去除不必要的ROLLBACK事件（MHA已不再使用这个工具）
purge_relay_logs 清除中继日志（不会阻塞SQL线程）

主从复制方式：一对多
一、配置从mysql『server3』
1.安装
mysql-community-client-5.7.24-1.el7.x86_64.rpm
mysql-community-common-5.7.24-1.el7.x86_64.rpm
mysql-community-libs-5.7.24-1.el7.x86_64.rpm
mysql-community-libs-compat-5.7.24-1.el7.x86_64.rpm
mysql-community-server-5.7.24-1.el7.x86_64.rpm
mysql-proxy-0.8.5-linux-el6-x86-64bit.tar.gz
[root@server3 ~]# yum install * -y
[root@server3 ~]# systemctl start mysqld
2.数据库初始化
grep password /var/log/mysqld.log
root@localhost: 。。。。。。。 ##此为数据库初始化密码，每次不同，注意保存，在修改密码时使用##
mysql_secure_installation
Enter password for user root:
New password:
3.下载半同步模块semisync_slave.so
mysql -p ##登陆数据库##
Enter password:
mysql> INSTALL PLUGIN rpl_semi_sync_slave SONAME ‘semisync_slave.so’;
4.配置主配置文件
vim /etc/my.cnf
systemctl restart mysqld
5.配置server1（server1为主）
mysql -p
Enter password:
mysql> change master to master_host=‘172.25.19.1’,master_user=‘repl’,
master_password=‘Redhat-1’,master_auto_position=1; ##用gtid自动##
mysql> start slave; ##开启slave##
mysql> show slave status\G ##查看slave状态##
* 1. row *
Slave_IO_Running: Yes
Slave_SQL_Running: No ##数据不一致导致
解决方法：
1）注释并行的代码
vim /etc/my.cnf
systemctl restart mysqld
2.关slave
[root@server3 ~]# mysql -pRedhat-1
mysql> stop slave;
3.备份
mysqldump -u root -p westos > westos.sql
Enter password:
mysqldump -u root -p --set-gtid-purged=OFF westos > westos.sql
Enter password:
diff westos.sql westos1.sql 17,24d16
< SET @MYSQLDUMP_TEMP_LOG_BIN = @@SESSION.SQL_LOG_BIN;
< SET @@SESSION.SQL_LOG_BIN= 0;
<
< –
< – GTID state at the beginning of the backup
< –
<
< SET @@GLOBAL.GTID_PURGED=‘3472d0a6-1980-11e9-b8d1-525400963735:1-5’;
48d39
< SET @@SESSION.SQL_LOG_BIN = @MYSQLDUMP_TEMP_LOG_BIN;
59c50
< – Dump completed on 2019-01-17 21:30:20

– Dump completed on 2019-01-17 21:28:01
scp westos.sql server3:
4.导入
mysqladmin -u root -pRedhat-1 create westos
mysql -u root -p westos < westos.sql
Enter password:
5.开启slave
mysql -pRedhat-1
mysql> start slave;

6.加入并行
vim /etc/my.cnf
systemctl restart mysqld
7.查看slave状态
mysql -pRedhat-1
mysql> use westos;
Reading table information for completion of table and column names
You can turn off this feature to get a quicker startup with -A

Database changed
mysql> select * from userlist;
±---------±---------+
| username | password |
±---------±---------+
| user1 | 123 |
| user2 | 456 |
| user3 | 777 |
| user5 | 555 |
| user6 | 66 |
| user7 | 66 |
±---------±---------+
mysql> show slave status\G
*************************** 1. row ***************************
Slave_IO_Running: Yes
Slave_SQL_Running: Yes

二、安装MHA

mha4mysql-manager-0.58-0.el7.centos.noarch.rpm perl-Mail-Sender-0.8.23-1.el7.noarch.rpm
mha4mysql-node-0.58-0.el7.centos.noarch.rpm perl-Mail-Sendmail-0.79-21.el7.noarch.rpm
perl-Config-Tiny-2.14-7.el7.noarch.rpm perl-MIME-Lite-3.030-1.el7.noarch.rpm
perl-Email-Date-Format-1.002-15.el7.noarch.rpm perl-MIME-Types-1.38-2.el7.noarch.rpm
perl-Log-Dispatch-2.41-1.el7.1.noarch.rpm perl-Parallel-ForkManager-1.18-2.el7.noarch.rpm
在server1上安装： yum install * -y
安装完成后会在/usr/local/bin/产生脚本文件。复制相关脚本到/usr/local/bin目录(软件包解压缩后就有了，不是必须，因为这些脚本不完整，
需要自己修改，这是软件开发着留给我们自己发挥的,如果开启下面的任何一个脚本对应的参数，而对应这里的脚本又没有修改，则会抛错）
在server2上安装：yum install mha4mysql-node-0.58-0.el7.centos.noarch.rpm
在server3上安扎un装：yum install mha4mysql-node-0.58-0.el7.centos.noarch.rpm
三、三节点免密

在server1上操作（第一次要数输入密码时按回车）：
ssh-keygen
Generating public/private rsa key pair.
Enter file in which to save the key (/root/.ssh/id_rsa):
Enter passphrase (empty for no passphrase):
Enter same passphrase again:
Your identification has been saved in /root/.ssh/id_rsa.
Your public key has been saved in /root/.ssh/id_rsa.pub.
The key fingerprint is:
98:85:ef:f5:55:61:a3:58:da:49:4a:eb:82:96:9d:e2 root@server1
The key’s randomart image is:
±-[ RSA 2048]----+
| . o + |
| . . O + o|
| . . = + .|
| =+ o . |
| o=S+… . |
| o… . |
| E. . |
| |
| |
±----------------+
cd .ssh/
ls
id_rsa id_rsa.pub known_hosts
ssh-copy-id server1
logout
Connection to 172.25.19.1 closed.
[kiosk@foundation ~]ssh root@172.25.19.1
server1： scp -r .ssh/ server2:
server1： scp -r .ssh/ server3:
检测：
server1：ssh server1
Last login: （每次连接之后一定要执行logout）
server1：logout
Connection to server1 closed.
server1 ssh server2
Last login:
server1：logout
Connection to server2 closed.
server1: ssh server3
Last login:
logout

在这里插入图片描述

server2: ssh server1
Last login: Thu Jan from server1
logout
Connection to server1 closed.
ssh server2
Last login: Thu …from server1
logout
Connection to server2 closed.
ssh server3
Last login: Thu Jan 2019 from server1
logout

server3: ssh server1
Last login: Thu Jan 2019 from server2
logout
Connection to server1 closed.
ssh server2
Last login: Thu Jan 2019 from server2
logout
四、配置主从
每个节点配置文件完全一样，除了server-id（/etc/my.cnf)

在这里插入图片描述

[server1]
[root@server1 masterha]# mysql -p
Enter password:
mysql> grant all on . to root@’%’ identified by ‘Redhat-1’;
mysql> flush privileges;
mysql> INSTALL PLUGIN rpl_semi_sync_slave SONAME ‘semisync_slave.so’;
mysql> grant replication slave on . to repl@‘172.25.19.%’ identified by ‘Redhat-1’;
mysql> flush privileges;
[root@server1 masterha]# vim /etc/my.cnf
[root@server1 masterha]# systemctl restart mysqld
[root@server2 ~]# mysql -p
Enter password:
mysql> INSTALL PLUGIN rpl_semi_sync_master SONAME ‘semisync_master.so’;
mysql> set global read_only=1;
vim /etc/my.cnf
systemctl restart mysqld

server3：mysql -p
Enter password:
mysql> INSTALL PLUGIN rpl_semi_sync_master SONAME ‘semisync_master.so’;
Query OK, 0 rows affected (0.48 sec)

mysql> set global read_only=1;

vim /etc/my.cnf
systemctl restart mysqld

五、配置MHA
server1： tar zxf mha4mysql-manager-0.58.tar.gz

[root@server1 MHA-7]# cd mha4mysql-manager-0.58/
[root@server1 mha4mysql-manager-0.58]# cd samples/conf/
[root@server1 conf]# ls
app1.cnf masterha_default.cnf
[root@server1 conf]# mkdir /etc/masterha
[root@server1 conf]# cp * /etc/masterha/
[root@server1 conf]# cd /etc/masterha/
[root@server1 masterha]# ls
app1.cnf masterha_default.cnf
[root@server1 masterha]# cat app1.cnf >>masterha_default.cnf

[root@server1 masterha]# vim masterha_default.cnf
[server default]
manager_workdir=/etc/masterha ##设置manger工作目录
manager_log=/etc/masterha/manager.log ##设置manger日志
user=root
password=Redhat-1
ssh_user=root
master_binlog_dir=/var/lib/mysql ##mysql的数据目录。设置master保存binlog，以便MHA可找到master的日志。
remote_workdir=/tmp
#secondary_check_script= masterha_secondary_check -s remote_host1 -s remote_host2
ping_interval=1
repl_user=repl
repl_password=Redhat-1

master_ip_failover_script= /script/masterha/master_ip_failover ##设置手动failover时切换脚本

shutdown_script= /script/masterha/power_manager

report_script= /script/masterha/send_report

master_ip_online_change_script= /script/masterha/master_ip_online_change 设置自动failover时切换脚本

在这里插入图片描述

[server1]
hostname=172.25.2.1

[server2]
hostname=172.25.2.2
candidate_master=1
check_repl_delay=0 ##不论延迟时间长短##

[server3]
hostname=172.25.2.3
no_master=1
六、检测
[root@server1 masterha]# masterha_check_ssh --conf=/etc/masterha/masterha_default.cnf ##检测manger到节点的免密ssh连接状态
Fri Jan 2019 - [info] All SSH connection tests passed successfully.
[root@server1 masterha]# masterha_check_repl --conf=/etc/masterha/masterha_default.cnf ##检测repl用户mysql主从复制状态
MySQL Replication Health is OK.

weixin_43478840

关注

1
点赞
踩
2

收藏

觉得还不错? 一键收藏
0
评论
利用数据库实现高可用

##用数据库实现高可用##准备三台虚拟机，server1、server2、server3其中server1为master，server2为备master，server3为slave通过数据库实现高可用，可以解决严重的主从延迟，主从复制终端，大量阻塞与软硬件引起的宕机等问题,选择三台虚拟机作为实验准备.其中master对外提供写服务，备选master（实际的slave，主机名server2...
复制链接

扫一扫