MySQL数据库集群实战（4）——MySQL主从复制之全同步复制（单主模式和多主模式）

最新推荐文章于 2022-11-05 17:01:55 发布
最新推荐文章于 2022-11-05 17:01:55 发布
阅读量2.1k 收藏 4
点赞数 1
分类专栏： Linux企业实战
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/CapejasmineY/article/details/104214685
版权

文章目录

一、mysql全同步复制（组复制）
1、理解组复制工作原理

MySQL组复制是一个MySQL插件，它基于常规的MySQL复制，利用了基于行格式的二进制日志和GTID等特性。

MySQL组复制是MySQL 5.7.17开始引入的新功能，为主从复制实现高可用功能。它支持单主模型和多主模型两种工作方式(默认是单主模型)。

  • 单主模型：从复制组中众多个MySQL节点中自动选举一个master节点，只有master节点可以写，其他节点自动设置为read only。当master节点故障时，会自动选举一个新的master节点，选举成功后，它将设置为可写，其他slave将指向这个新的master。
  • 多主模型：复制组中的任何一个节点都可以写，因此没有master和slave的概念，只要突然故障的节点数量不太多，这个多主模型就能继续可用。

组由多个服务器构成，通过传递消息进行交互，通信层保证原子消息传递。MGR构建于此通信层抽象之上，并实现了多主更新复制协议。组中的每个服务器独立地执行事务，但是所有读写事务只有在得到组的批准后才会提交。只读事务在组内不需要协调，因此立即提交。对于任何读写事务，当事务准备好在始发服务器处提交时，服务器以原子方式广播写入值（更改的行）和对应的写入集（更新的行的唯一标识符），然后将该事务加入全局事务列表。最终所有服务器都以相同的顺序接收并应用相同的事务集，所以它们在组内保持一致。

2、搭建mysql全同步复制多主模式
实验环境
主机名ip服务
server1172.25.1.1master
server2172.25.1.2slave
server3172.25.1.3slave
实验

在master（server1）上：
步骤一：在网上下载mysql安装包并安装
在这里插入图片描述
步骤二：打开mysqld

systemctl start mysqld

在这里插入图片描述
步骤三：关闭mysqld

systemctl stop mysqld

在这里插入图片描述
步骤四：复制uuid

cat /var/lib/mysql/auto.cnf

在这里插入图片描述
步骤五：删除数据库文件

rm -fr /var/lib/mysql/*

在这里插入图片描述
步骤六：修改配置文件/etc/my.cnf

server-id=1
gtid_mode=ON
enforce-gtid-consistency=true
master_info_repository=TABLE
relay_log_info_repository=TABLE
binlog_checksum=NONE #关闭binlog校验
log_slave_updates=ON
log_bin=binlog
binlog_format=ROW #组复制依赖基于行的复制格式

transaction_write_set_extraction=XXHASH64
loose-group_replication_group_name="508e830d-4983-11ea-9103-525400a1ffb6" #可以看/var/lib/mysql/auto.cnf
loose-group_replication_start_on_boot=off
loose-group_replication_local_address= "172.25.1.1:24901"
loose-group_replication_group_seeds= "172.25.1.1:24901,172.25.1.2:24901,172.25.1.3:24901"
loose-group_replication_bootstrap_group=off ##插件是否自动引导，这个选项一般都要off掉，只需要由发起组复制的节点开启，并只启动一次，如果是on，下次再启动时，会生成一个同名的组，可能会发生脑裂
loose-group_replication_ip_whitelist="127.0.0.1,172.25.1.0/24"
loose-group_replication_enforce_update_everywhere_checks=ON 
loose-group_replication_single_primary_mode=OFF #后两行是开启多主模式的参数

在这里插入图片描述
步骤七：启动mysqld

systemctl start mysqld

在这里插入图片描述
步骤八：初始化数据库

查看初始密码

grep password /var/log/mysqld.log

在这里插入图片描述
方式一：安全初始化

mysql_secure_installation

方式二：登录数据库，修改密码

mysql> alter user root@localhost identified by 'Westos+007';

在这里插入图片描述
步骤九：创建组复制使用的用户

mysql> SET SQL_LOG_BIN=0;	#关闭二进制日志，防止传到其他server上
mysql> CREATE USER rpl_user@'%' IDENTIFIED BY 'Westos+007'; #创建用户
mysql> GRANT REPLICATION SLAVE ON *.* TO rpl_user@'%'; #授权
mysql> FLUSH PRIVILEGES; #刷新授权表
mysql> SET SQL_LOG_BIN=1;	##开启日志

在这里插入图片描述
步骤八：配置slave连接master的信息
所用用户，登陆密码及组插件

mysql> CHANGE MASTER TO MASTER_USER='rpl_user', MASTER_PASSWORD='Westos+007' FOR CHANNEL 'group_replication_recovery';

在这里插入图片描述
步骤九：安装组插件

mysql> INSTALL PLUGIN group_replication SONAME 'group_replication.so';
mysql> SHOW PLUGINS;	##查看插件

在这里插入图片描述
在这里插入图片描述
步骤十：组复制发起

mysql> SET GLOBAL group_replication_bootstrap_group=ON;	##组复制发起节点开启这个参数
mysql> START GROUP_REPLICATION; ##开启组复制
mysql> SET GLOBAL group_replication_bootstrap_group=OFF;
mysql> SELECT * FROM performance_schema.replication_group_members;	##查看server1是否online

在这里插入图片描述
在slave（server2）上：

添加server2到组内
步骤一：安装数据库软件
在这里插入图片描述
步骤二：开启数据库

systemctl start mysqld

在这里插入图片描述
步骤三：关闭数据库并删除数据库信息

systemctl stop mysqld
rm -fr /var/lib/mysql/*

在这里插入图片描述
步骤四：修改配合文件/etc/my.cnf

server-id=2
gtid_mode=ON
enforce-gtid-consistency=true
master_info_repository=TABLE
relay_log_info_repository=TABLE
binlog_checksum=NONE
log_slave_updates=ON
log_bin=binlog
binlog_format=ROW

transaction_write_set_extraction=XXHASH64
loose-group_replication_group_name="508e830d-4983-11ea-9103-525400a1ffb6" #注意：这里和server1的保持一致！！！！！！
loose-group_replication_start_on_boot=off
loose-group_replication_local_address= "172.25.1.2:24901"
loose-group_replication_group_seeds= "172.25.1.1:24901,172.25.1.2:24901,172.25.1.3:24901"
loose-group_replication_bootstrap_group=off
loose-group_replication_ip_whitelist="127.0.0.1,172.25.1.0/24"
loose-group_replication_enforce_update_everywhere_checks=ON
loose-group_replication_single_primary_mode=OFF

在这里插入图片描述
步骤三：启动mysqld

systemctl start mysqld

在这里插入图片描述
步骤四：修改登陆密码

grep password /var/log/mysqld.log

在这里插入图片描述
进入数据库

mysql_secure_installation

在这里插入图片描述
步骤五：创建组复制用户并授权

mysql> SET SQL_LOG_BIN=0;
mysql> CREATE USER rpl_user@'%' IDENTIFIED BY 'Westos+007';
mysql> GRANT REPLICATION SLAVE ON *.* TO rpl_user@'%';
mysql> FLUSH PRIVILEGES;
mysql> SET SQL_LOG_BIN=1;

在这里插入图片描述
步骤六：配置slave连接master的信息

mysql> CHANGE MASTER TO MASTER_USER='rpl_user', MASTER_PASSWORD='Westos+007' FOR CHANNEL 'group_replication_recovery';

在这里插入图片描述
步骤七：安装组插件

mysql> INSTALL PLUGIN group_replication SONAME 'group_replication.so';

在这里插入图片描述
步骤八：开启组复制

mysql> START GROUP_REPLICATION;

在这里插入图片描述
这里开启组复制可能会报错,查看mysql日志

cat /var/log/mysqld.log

在这里插入图片描述
日志中提示要开启变量group_replication_allow_local_disjoint_gtids_join
设置全局变量

mysql> STOP GROUP_REPLICATION;
mysql> set global group_replication_allow_local_disjoint_gtids_join=on;

在这里插入图片描述
开启组复制

mysql> START GROUP_REPLICATION;

在这里插入图片描述
此时在server1上查看：

SELECT * FROM performance_schema.replication_group_members;

在这里插入图片描述
在（slave）server3上
与server2配置相同

添加server3到组内
步骤一：安装数据库软件
在这里插入图片描述
步骤二：开启数据库

systemctl start mysqld

在这里插入图片描述
步骤三：关闭数据库并删除数据库信息

systemctl stop mysqld
rm -fr /var/lib/mysql/*

在这里插入图片描述
步骤四：修改配合文件/etc/my.cnf

server-id=3
gtid_mode=ON
enforce-gtid-consistency=true
master_info_repository=TABLE
relay_log_info_repository=TABLE
binlog_checksum=NONE
log_slave_updates=ON
log_bin=binlog
binlog_format=ROW

transaction_write_set_extraction=XXHASH64
loose-group_replication_group_name="508e830d-4983-11ea-9103-525400a1ffb6" #注意：这里和server1的保持一致！！！！！！
loose-group_replication_start_on_boot=off
loose-group_replication_local_address= "172.25.1.3:24901"
loose-group_replication_group_seeds= "172.25.1.1:24901,172.25.1.2:24901,172.25.1.3:24901"
loose-group_replication_bootstrap_group=off
loose-group_replication_ip_whitelist="127.0.0.1,172.25.1.0/24"
loose-group_replication_enforce_update_everywhere_checks=ON
loose-group_replication_single_primary_mode=OFF

步骤三：启动mysqld

systemctl start mysqld

步骤四：修改登陆密码

grep password /var/log/mysqld.log

在这里插入图片描述
安全初始化

mysql_secure_installation

在这里插入图片描述

步骤五：创建组复制用户并授权

mysql> SET SQL_LOG_BIN=0;
mysql> CREATE USER rpl_user@'%' IDENTIFIED BY 'Westos+007';
mysql> GRANT REPLICATION SLAVE ON *.* TO rpl_user@'%';
mysql> FLUSH PRIVILEGES;
mysql> SET SQL_LOG_BIN=1;

在这里插入图片描述
步骤六：配置slave连接master的信息

mysql> CHANGE MASTER TO MASTER_USER='rpl_user', MASTER_PASSWORD='Westos+007' FOR CHANNEL 'group_replication_recovery';

在这里插入图片描述
步骤七：安装组插件

mysql> INSTALL PLUGIN group_replication SONAME 'group_replication.so';

在这里插入图片描述
步骤八：开启组复制

设置全局变量

mysql> set global group_replication_allow_local_disjoint_gtids_join=on;

在这里插入图片描述
开启组复制

mysql> START GROUP_REPLICATION;

在这里插入图片描述
此时在server1上查看：

mysql> SELECT * FROM performance_schema.replication_group_members;

在这里插入图片描述
看到3台都是online，表示正常
这时在任何一个节点都可以写入和查看数据

测试：
在server3上插入数据：

mysql> create database yan;

在这里插入图片描述
在server2上查看数据：

mysql> show databases;

在这里插入图片描述
在server1上查看数据并写入数据：

mysql> show databases;

在这里插入图片描述
写入数据

mysql> use yan;
mysql> create table test (   
    -> name varchar(10) not null,
    -> age  int(10) not null);
mysql> insert into test values ('user1','18');

在这里插入图片描述
在这里插入图片描述
在server2上查看数据：

mysql> use yan;
mysql> show tables;
mysql> select * from test;

在这里插入图片描述
此时，证明了在任何一个节点都可以写入和查看数据。

3、多主模式切换成单主模式
# 所有节点执行
mysql> stop group_replication;
mysql> set global group_replication_enforce_update_everywhere_checks=OFF;
mysql> set global group_replication_single_primary_mode=ON;

# 主节点（server1）执行
SET GLOBAL group_replication_bootstrap_group=ON; 
START GROUP_REPLICATION; 
SET GLOBAL group_replication_bootstrap_group=OFF;


# 从节点（server2 server3）执行
START GROUP_REPLICATION; 

# 主节点（server1）查看MGR组信息
mysql> SELECT * FROM performance_schema.replication_group_members;

实现过程：
在master（server1上）：
在这里插入图片描述
在slave（server2）：
在这里插入图片描述
在slave（server3）：
在这里插入图片描述
在master（server1上）：
在这里插入图片描述
在slave（server2）：
在这里插入图片描述
在slave（server3）：
在这里插入图片描述
在master（server1上）：
在这里插入图片描述
测试：
在slave（server2）上写入数据：
在这里插入图片描述
在slave（server3）上写入数据：
在这里插入图片描述
报错，证明slave无写入功能

在master（server1上）写入数据：
在这里插入图片描述
在这里插入图片描述
正常写入并查看

在slave（server2）上查看数据：

在这里插入图片描述
以上可得出，单主模式配置成功。master节点可以写入和读出，slave节点只能读出不能写入。

4、单主模式切换成多主模式
# 停止组复制(所有节点执行)：
mysql> stop group_replication;
mysql> set global group_replication_single_primary_mode=OFF;
mysql> set global group_replication_enforce_update_everywhere_checks=ON;

# 随便选择某个节点执行
mysql> SET GLOBAL group_replication_bootstrap_group=ON; 
mysql> START GROUP_REPLICATION; 
mysql> SET GLOBAL group_replication_bootstrap_group=OFF;

# 其他节点执行
mysql> START GROUP_REPLICATION; 

# 查看组信息，所有节点的online
mysql> SELECT * FROM performance_schema.replication_group_members;

总结：
实验中出现的报错并改正：
mysql> insert into test values (‘user1’,‘18’);
ERROR 3098 (HY000): The table does not comply with the requirements by an external plugin.
改正方法：

给表添加主键

mysql> alter table test modify age int  primary key;
CapejasmineY
关注
  • 1
    点赞
  • 踩
  • 4
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
mysql数据库主从复制的搭建.md
06-19
使用与Linux版本centos7以及7以上版本，就是傻瓜试安装，每一条命令都有详细解释和说明，关键技术，数据挂载目录，主从复制模式的三种模式，binlog的三种格式的解释说明
【数据库】MySQL的主从复制模式
最新发布
wenchun001的博客
06-26 2094
MySQL的主从复制模式包括异步复制，全同步复制，半同步复制。MySQL默认为异步模式。MySQL5.7引入了一种新的半同步方案，并且在5.7引入了一个新的参数，rpl_semi_sync_master_wait_point，这个参数有两种取值，1）AFTER_SYNC 2)AFTER_COMMIT 前者是新的半同步方案后者为老的半同步方案。
MySQL群集，主从复制及双主模式
weixin_34082789的博客
09-21 320
MySQL主从复制，是一个MySQL的群集，可以很好的解决的单点故障，并且可以进行读写分离来减轻数据库的压力。很多情况下主服务器仅作为写入数据服务器，而构建多个从节点来进行数据读取。构建主从复制的几个事项：尽量保持主从数据库版本一致。如果不一致，从数据库版本要高于主库的数据库版本。创建数据存放目录和binlog存放目录，分开存放，建议是安装到不同的硬盘上，我这...
最全 MySQL主从同步与主主同步
weixin_47680367的博客
09-17 3085
mysql同步
Mysql主从复制的三种同步方式和半同步复制配置
云计算运维工程师的成长之路
11-05 3861
5.6 版本的半同步复制，dump thread 承担了两份不同且又十分频繁的任务：传送binlog 给 slave ，还需要等待 slave 反馈信息，而且这两个任务是串行的，dump thread 必须等待 slave 返回之后才会传送下一个 events 事务。当半同步复制发生超时（由rpl_semi_sync_master_timeout参数控制，默认为10000ms，即10s），会暂时关闭半同步复制，转而使用异步复制，也就是会自动降为异步工作。#可以理解为"后来的先到了，而先来的还没有到的次数"
MySQL主从同步复制实现
MostSnails的博客
11-03 882
MySQL主从同步复制实现 一.概念 1.数据库一主多从高性能: 单点分散到多台机器上。备份: 等同于实现Backup。 负载均衡: 若主挂掉，切换一台Slave机器作为Mater。若Slave挂掉，还有其他Slave支持。 二.实现原理 1.Mater将变更记录到二进制日志BinaryLog中，Mysql根据事物提交顺序依次记录 2.Slave从库 两个线程 （I/O thread 、SQL thread），IO请求主库获取Log日志最新位置，读取变更到从库，SQL线程 实施执行变更记录。
Mysql的主从全同步复制（组复制）
yrx420909的博客
02-20 911
1. 全同步的解释：（Fully synchronous replication） 1、逻辑上 指当主库执行完一个事务，所有的从库都执行了该事务才返回给客户端。因为需要等待所有从库执行完该事务才能返回，所以全同步复制的性能必然会收到严重的影响。 2、技术上 当主库提交事务之后，所有的从库节点必须收到、APPLY并且提交这些事务，然后主库线程才能继续做后续操作。但缺点是，主库完成一个事务的时间会被拉...
MySql系列之主从同步(主从复制)
shuoz的博客
01-11 1051
一、原理 1、要实现主从同步至少需要两台数据库，一台主库（master）一台从库（slave）； 2、主库将数据库操作记录在本地的二进制日志（binary log）中，该过程称之为二进制日志事件； 3、从库通过IO线程读取拷贝主库的binary log到自己的中继日志文件（relay log）中； 4、最后从库通过sql 线程将relay log中的操作记录读取到自己的数据库中执行。 注：mysql的主从复制不是完全实时的，有延迟。 二、配置 主库（master）： 启用二进制日志。 为
MySQL主从复制，并行复制，半同步复制和组复制
Cancer.的博客
10-31 4768
主从复制 主从复制过程存在三个线程，Master端的I/O线程，Slave的I/O线程与SQL线程。Master端需要开启binlog日志，Slave端需要开启relaylog。 1、Slave端的I/O读取master.info文件，获取binlog文件名和位置点，然后向Master端的I/O线程请求，该binlog文件名和位置点的binlog信息。 （master.info文件在配置主从复制时...
mysql主从同步作用及设置_2018_lcf
cbuy888的博客
06-06 1755
用途和用条件 mysql主从复制用途实时灾备，用于故障切换读写分离，提供查询服务备份，避免影响业务 主从部署必要条件：主库开启binlog日志（设置log-bin参数）主从server-id不同从库服务器能连通主库主从原理mysql主从复制原理  从库生成两个线程，一个I/O线程，一个SQL线程； i/o线程去请求主库 的binlog，并将得到的binlog日志写到relay log（中继日志） ...
详解MySQL主从复制实战 – 基于日志点的复制
12-15
基于日志点的复制 1、在主库与从库上建立专用的复制账号 MariaDB [employees]> create user 'repl'@'172.%' identified by '123456'; 注意在生产上的密码必须依照相关规范以达到一定的密码强度, 并且规定在从库上的...
MySQL数据库主从复制技术应用实战（阶段二）
06-09
本课程将从应用层面全方位讲解MySQL数据库技术点及运维管理，帮助学员掌握这门世界上使用广泛的开源数据库技术。
PostgreSQL数据库工程师培训实战教程（主从复制、高可用HA、集群架构）
06-29
分享一套课程，PostgreSQL数据库工程师培训实战教程（主从复制、高可用HA、集群架构）完整版视频教程，欢迎下载学习，希望对大家有帮助。
基于ansible一键离线部署MySQL主从复制容器版分布式集群工具
03-04
4、支持 2台主机一键远程部署Mysql主从复制集群（一主一从）。 5、支持 3台主机一键远程部署Mysql主从复制集群（一主两从）。 6、支持一键部署所有节点或单个mysql实例依次部署、启动、停止、重启、检查、移除等功能...
Nginx服务（7）——Nginx 反向代理获取源地址（客户端ip）
CapejasmineY的博客
02-14 6388
一、前言 1、Nginx反向代理获取客户端的真实IP原理 我们访问互联网的服务时，大多数时，客户端并不是直接访问到服务端的，而是客户端首先请求到反向代理，反向代理再转发到服务端实现服务访问。 客户端访问服务端的数据流走向 Client（172.25.0.1） --> ADSL（ 192.168.0.1） --> cdn（10.0.0.1） --> SLB(反向代理...
nginx工作原理详解
CapejasmineY的博客
10-14 4048
一、Nginx请求处理流程 图解： 进入nginx的大致三种流量：WEB、EMAIL及TCP Nginx中三个状态机： 传输层状态机：处理TCP/UDP四层传输层 HTTP状态机：处理应用层 MAIL状态机：处理邮件 状态机作用：Nginx采用epoll异步非阻塞事件驱动处理引擎，需要状态机识别和处理请求，将解析出来的请求引导到静态资源或磁盘缓存（做反向代理时）。 当静态资源太多，内存不足以缓存时，磁盘调用会退化成阻塞调用，所以我们使用线程池来处理。 线程池详解 总的来说：线程池就是一个单独的处理机制
云计算自动化运维——Ansible-doc用法及常用模块使用
CapejasmineY的博客
11-23 2853
上一篇介绍了ansible基础知识，做了ansible.cfg及hosts文件配置。 本实验在上一个实验的基础上进行的。 上一篇链接： 一、Ansible-doc用法 ansible的模块非常只多，Ansible也提供了类似与man功能的help说明工具ansible-doc。 1、Ansible-doc命令 ansible-doc -l #显示所有可用模块 ansible-doc yum #获...
HAProxy负载均衡——掌握原理和基本概念
CapejasmineY的博客
02-23 2839
文章目录一、HAProxy简介1、什么是HAProxy？2、HAProxy支持两种主要的代理模式3、四层和七层负载均衡的区别4、HAProxy与LVS的异同二、负载均衡LVS、Nginx、HAproxy对比1、LVS2、Ngnix3、HAProxy 一、HAProxy简介 1、什么是HAProxy？ HAProxy 是一款提供高可用性、负载均衡以及基于TCP（第四层）和HTTP（第七层）应用的代理......
MySQL数据库集群实战（1）——MySQL数据库基础知识
CapejasmineY的博客
02-05 2769
文章目录一、为什么使用数据库？二、数据库概念数据库（DataBase，DB）数据库管理系统（DataBase Management System，DBMS）SQL概述三、数据库存储文件的特点四、MySQL常见的数据对象五、MySQL数据类型介绍六、数据库操作语言1、DDL数据库定义语言2、DML数据操纵语言3、DCL数据库控制语言4、TCL事务控制语言 一、为什么使用数据库？ 保存数据的容器：数组...
mysql主从同步复制模式
05-25
MySQL主从同步复制模式是一种常用的高可用性和负载均衡方案。该模式中，一个MySQL数据库服务器被指定为主服务器（Master），而其他MySQL服务器被指定为从服务器（Slave）。主服务器上的所有数据改变都会被记录下来，...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值