LAMP-4:Mysql(主从复制及组复制)

最新推荐文章于 2024-05-10 18:54:12 发布
最新推荐文章于 2024-05-10 18:54:12 发布
阅读量175 收藏
点赞数
分类专栏： Linux LAMP
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Fancyll_Lee/article/details/115521157
版权
Linux 同时被 2 个专栏收录
25 篇文章 0 订阅
订阅专栏
LAMP
5 篇文章 0 订阅
订阅专栏
本文详细介绍了MySQL的主从复制配置，包括基于二进制日志和GTID的复制方式，以及半同步复制。此外，还探讨了多主复制的去中心化集群搭建，包括读写分离的实现，确保数据一致性。文中涉及的步骤包括服务器环境准备、用户授权、配置更改以及故障排查等关键环节。
摘要由CSDN通过智能技术生成

文章目录


Mysql5.7 server官方手册

1.环境准备

主从有延迟，不适合实时同步，只能保证最终一致

1.1 server2上安装mysql

在server1上，将二进制编译好的mysql复制到server2上：scp -r mysql/ server2:/usr/local/
顺便复制配置文件：scp my.cnf server2:/etc/
及相关脚本：scp mysqld server2:/etc/init.d/
在server2中添加默认变量：vim .bash_profile

PATH=$PATH:$HOME/bin:/usr/local/mysql/bin

并使之生效：source .bash_profile
删除目录内文件：/usr/local/mysql/data
创建和server1同样的用户：useradd -M -d /usr/local/mysql/data/ -s /sbin/nologin mysql
初始化mysql：mysqld --initialize --user=mysql
启动mysql：/etc/init.d/mysqld start
利用初始化提供的密码进行初始化安全设置：mysql_secure_installation
在这里插入图片描述
在这里插入图片描述

1.2 配置

  1. 主从复制是基于mysql的二进制日志，在server1（主）上配置，打开主从功能：vim /etc/my.conf
[mysqld]
datadir=/usr/local/mysql/data
socket=/usr/local/mysql/data/mysql.sock
symbolic-links=0

server-id=1
log-bin=mysql-bin

0表示拒绝任何id
重启：/etc/init.d/mysqld restart

  1. 创建一个用来复制的用户

进入server1的数据库：mysql -plee
授权：GRANT REPLICATION SLAVE ON *.* TO 'repl'@'%' IDENTIFIED BY 'lee';
在这里插入图片描述
查看master状态：show master status;
在这里插入图片描述
3. 配置server2

配置文件：vim /etc/my.cnf

[mysqld]
datadir=/usr/local/mysql/data
socket=/usr/local/mysql/data/mysql.sock
symbolic-links=0

server-id=2

重启数据库：/etc/init.d/mysqld restart

正常情况下需要备份数据，锁表。由于本实验的数据库均为新库，为空表，所以在此略过，若有需要查看官方文档

接下来指明slave端复制源，进入数据库mysql -plee：

mysql> CHANGE MASTER TO MASTER_HOST='172.25.38.1', MASTER_USER='repl', MASTER_PASSWORD='lee',MASTER_LOG_FILE='mysql-bin.000001',MASTER_LOG_POS=437;
Query OK, 0 rows affected, 2 warnings (0.06 sec)

启动：start slave;
查看slave状态：show slave status\G;
在这里插入图片描述
IO接口负责复制Rep日志，SQL负责操作

检测：
在server1上创建一个test库create database test;
在server2上能同步：
在这里插入图片描述

2.主从复制

2.1 基于二进制文件的主从复制

配置server2
再开启一个server3，安装mysql，参考上述安装步骤
编辑server2上的配置文件：

[mysqld]
datadir=/usr/local/mysql/data
socket=/usr/local/mysql/data/mysql.sock
symbolic-links=0

server-id=2
log-slave-updates
log-bin=mysql-bin

进入数据库，添加一个远程用户：GRANT REPLICATION SLAVE ON *.* TO 'repl'@'%' IDENTIFIED BY 'lee';
配置server3
编辑server3上的配置文件：

[mysqld]
datadir=/usr/local/mysql/data
socket=/usr/local/mysql/data/mysql.sock
symbolic-links=0

server-id=3

在此首先拷贝server2上的数据库表：mysqldump -uroot -plee test > dump.db
发送给server3：scp dump.db server3:
在server3上先进入数据库，新建一个数据库表：mysqladmin create test -plee后者进入数据库后：create database test;(删除数据库表：drop database test;)
导入至server3数据库：mysql -plee test < dump.db
查看导入成功：
在这里插入图片描述
server3可以通过远程登陆：
在这里插入图片描述

根据查询server2的master信息：
在这里插入图片描述
在server3上，进入数据库配置：change master to master_host='172.25.38.2',master_user='repl',master_password='lee',master_file_log='mysql-bin.000003',master_log_pos=415
进入数据库打开slave模式：start slave;
查看slave信息：show slave status;
在这里插入图片描述
此时，在server1上插入数据在server3上即可同步。

2.2 基于Gtid的主从复制

先停止server2，3的slave
编辑server1的mysql文件：

[mysqld]
datadir=/usr/local/mysql/data
socket=/usr/local/mysql/data/mysql.sock
symbolic-links=0

server-id=1
log-bin=mysql-bin

gtid_mode=ON
enforce-gtid-consistency=ON

编辑server2的：

[mysqld]
datadir=/usr/local/mysql/data
socket=/usr/local/mysql/data/mysql.sock
symbolic-links=0

server-id=2
log-slave-updates
log-bin=mysql-bin

gtid_mode=ON
enforce-gtid-consistency=ON

编辑server3的：

[mysqld]
datadir=/usr/local/mysql/data
socket=/usr/local/mysql/data/mysql.sock
symbolic-links=0

server-id=3

gtid_mode=ON
enforce-gtid-consistency=ON

开启slave，此时可以同步。
查看server2和server3的slave状态;
在这里插入图片描述

2.3 半同步

在server1数据库中安装插件：mysql> INSTALL PLUGIN rpl_semi_sync_master SONAME 'semisync_master.so';
在server2数据库中安装两个插件：
INSTALL PLUGIN rpl_semi_sync_slave SONAME 'semisync_slave.so';
INSTALL PLUGIN rpl_semi_sync_master SONAME 'semisync_master.so';
在server3数据库中安装一个插件：INSTALL PLUGIN rpl_semi_sync_slave SONAME 'semisync_slave.so';

在server1上打开master：SET GLOBAL rpl_semi_sync_master_enabled = 1;
在server上打开master和slave：
SET GLOBAL rpl_semi_sync_master_enabled = 1;
SET GLOBAL rpl_semi_sync_slave_enabled = 1;
在server3上打开slave：SET GLOBAL rpl_semi_sync_slave_enabled = 1;

查看以rpl开头的变量：show status like 'rpl%';

打开server2，3的IO接口：START SLAVE IO_THREAD;
在这里插入图片描述

在这里插入图片描述
在server1上插入数据：insert into user_tb values ('user5','5555');
此时server3上能顺利同步：
在这里插入图片描述
若关掉server2上的IO接口，再再server1上插入数据：insert into user_tb values ('user6','6666');
则会有10s的延迟：
在这里插入图片描述
并且server3上无法同步到数据，打开server2上的IO接口后，server3会自动同步：
在这里插入图片描述

3.多主复制

3.1 去中心化集群

首先停止所有节点的mysql，删除data/文件，并初始化：mysqld --initialize --user=mysql
再启动所有节点的mysql：/etc/init.d/mysql start

server1上：

# cat /etc/my.cnf
[mysqld]
datadir=/usr/local/mysql/data
socket=/usr/local/mysql/data/mysql.sock
symbolic-links=0

disabled_storage_engines="MyISAM,BLACKHOLE,FEDERATED,ARCHIVE,MEMORY"
server_id=1
gtid_mode=ON
enforce_gtid_consistency=ON
master_info_repository=TABLE
relay_log_info_repository=TABLE
binlog_checksum=NONE
log_slave_updates=ON
log_bin=binlog
binlog_format=ROW

plugin_load_add='group_replication.so'
transaction_write_set_extraction=XXHASH64
group_replication_group_name="aaaaaaaa-aaaa-aaaa-aaaa-aaaaaaaaaaaa"
group_replication_start_on_boot=off
group_replication_local_address= "172.25.0.1:33061"
group_replication_group_seeds= "172.25.0.1:33061,172.25.0.2:33061,172.25.0.3:33061"
group_replication_bootstrap_group=off
group_replication_ip_whitelist="172.25.0.0/24,127.0.0.1/8"
group_replication_single_primary_mode=OFF
group_replication_enforce_update_everywhere_checks=ON

server2上：

# cat /etc/my.cnf
[mysqld]
datadir=/usr/local/mysql/data
socket=/usr/local/mysql/data/mysql.sock
symbolic-links=0

disabled_storage_engines="MyISAM,BLACKHOLE,FEDERATED,ARCHIVE,MEMORY"
server_id=2
gtid_mode=ON
enforce_gtid_consistency=ON
master_info_repository=TABLE
relay_log_info_repository=TABLE
binlog_checksum=NONE
log_slave_updates=ON
log_bin=binlog
binlog_format=ROW

plugin_load_add='group_replication.so'
transaction_write_set_extraction=XXHASH64
group_replication_group_name="aaaaaaaa-aaaa-aaaa-aaaa-aaaaaaaaaaaa"
group_replication_start_on_boot=off
group_replication_local_address= "172.25.38.2:33061"
group_replication_group_seeds= "172.25.38.1:33061,172.25.38.2:33061,172.25.38.3:33061"
group_replication_bootstrap_group=off
group_replication_ip_whitelist="172.25.38.0/24,127.0.0.1/8"
group_replication_single_primary_mode=OFF
group_replication_enforce_update_everywhere_checks=ON
group_replication_allow_local_disjoint_gtids_join=ON

server3上：

# cat /etc/my.cnf
[mysqld]
datadir=/usr/local/mysql/data
socket=/usr/local/mysql/data/mysql.sock
symbolic-links=0

disabled_storage_engines="MyISAM,BLACKHOLE,FEDERATED,ARCHIVE,MEMORY"
server_id=3
gtid_mode=ON
enforce_gtid_consistency=ON
master_info_repository=TABLE
relay_log_info_repository=TABLE
binlog_checksum=NONE
log_slave_updates=ON
log_bin=binlog
binlog_format=ROW

plugin_load_add='group_replication.so'
transaction_write_set_extraction=XXHASH64
group_replication_group_name="aaaaaaaa-aaaa-aaaa-aaaa-aaaaaaaaaaaa"
group_replication_start_on_boot=off
group_replication_local_address= "172.25.38.3:33061"
group_replication_group_seeds= "172.25.38.1:33061,172.25.0.2:33061,172.25.38.3:33061"
group_replication_bootstrap_group=off
group_replication_ip_whitelist="172.25.38.0/24,127.0.0.1/8"
group_replication_single_primary_mode=OFF
group_replication_enforce_update_everywhere_checks=ON
group_replication_allow_local_disjoint_gtids_join=ON

mysql> alter user root@localhost identified by 'lee';			#改密码
mysql> SET SQL_LOG_BIN=0;										#关闭日志
mysql> CREATE USER rpl_user@'%' IDENTIFIED BY 'password';		#创建一个数据库用户
mysql> GRANT REPLICATION SLAVE ON *.* TO rpl_user@'%';			#赋予权限
mysql> FLUSH PRIVILEGES;										#刷新权限表
mysql> SET SQL_LOG_BIN=1;										#打开日志
mysql> CHANGE MASTER TO MASTER_USER='rpl_user', MASTER_PASSWORD='password' FOR CHANNEL 'group_replication_recovery';
																#指定集群master
mysql> SET GLOBAL group_replication_bootstrap_group=ON;         #只有第一个节点执行
mysql> START GROUP_REPLICATION;									#打开组复制功能
mysql> SET GLOBAL group_replication_bootstrap_group=OFF; 		#只有第一个节点执行

查看已加入节点SELECT * FROM performance_schema.replication_group_members;
在这里插入图片描述

打开慢查询：set global slow_query_log=ON;

3.2 多主复制下的读写分离

首先保证3个mysql集群都在线：
在这里插入图片描述
新建一个server4，在上面安装mysql路由转发功能：
安装包：yum install mysql-router-community-8.0.21-1.el7.x86_64.rpm
修改配置,在最后添加：vim /etc/mysqlrouter/mysqlrouter.conf

[routing:ro]
bind_address = 0.0.0.0
bind_port = 7001
destinations = 172.25.38.1:3306,172.25.38.2:3306,172.25.38.3:3306
routing_strategy = round-robin

[routing:rw]
bind_address = 0.0.0.0
bind_port = 7002
destinations = 172.25.38.1:3306,172.25.38.2:3306,172.25.38.3:3306
routing_strategy = first-available

启动转发服务：systemctl start mysqlrouter.service
在server1上添加两个远程登陆用户，分别具有查询权限和部分表的所有权限：

grant select on *.* to user1@'%' identified by 'lee';
grant all on test.* to user2@'%' identified by 'lee';
flush privileges;				#刷新权限

在真机上即可登陆：mysql -h 172.25.38.4 -P 7001 -u user1 -p
在这里插入图片描述

LeeHoo0
关注
专栏目录
LAMP架构之mysql（2）：mysql主从架构
weixin_43803940的博客
01-11 1284
一.实验环境 （1） MyAdmin安装部署 需要的安装包： phpMyAdmin-5.0.2-all-languages.zip cp phpMyAdmin-5.0.2-all-languages.zip /usr/local/nginx/html/ 把服务安装在nginx默认发布目录下 unzip phpMyAdmin-5.0.2-all-languages.zip 解压 建立软链接 ln -s phpMyAdmin-5.0.2-all-language...
Mysql主从复制自动切换实现方案
12-29 3738
Mysql主从复制自动切换实现方案
Mysql的主从全同步复制（组复制）
yrx420909的博客
02-20 971
1. 全同步的解释：（Fully synchronous replication） 1、逻辑上 指当主库执行完一个事务，所有的从库都执行了该事务才返回给客户端。因为需要等待所有从库执行完该事务才能返回，所以全同步复制的性能必然会收到严重的影响。 2、技术上 当主库提交事务之后，所有的从库节点必须收到、APPLY并且提交这些事务，然后主库线程才能继续做后续操作。但缺点是，主库完成一个事务的时间会被拉...
lamp架构四、mysql主从复制
ninimino的博客
04-06 391
server-id =0 拒绝复制 二进制名字 主从复制： slave复制主二进制文件到slave上执行，做复制之前：主从的base需要相同 IO 复制 sql： 存 lEnkCHUv.2-t 301 scp -r /usr/local/mysql/ server2:/usr/local/ 303 scp /etc/my.cnf server2:/etc/ 307 scp /etc/init.d/mysqld server2:/etc/init.d/ [root@server1 dat
LAMP和主从复制读写分离结合
m0_50586427的博客
09-28 284
项目：配置LAMP和mysql读取分离和主从分离 实验环境： centos01mysql backup和centos02mysql backup和centos03位mysql master和LNMP 和centos04为amoeba和 win702为客户端验证使用 安装三台mysql服务器和master上安装ntp同步时间使用 同步时间主MySQL服务器上设置开机自动启动ntp [root@centos02 ~]# vim /etc/ntp.cong 18 restrict 192.168.100.0
MySQL MGR数据一致性关键参数group_replication_consistency
雪辉博客
09-08 1336
  group_replication_consistency是MySQL 8.0.14为解决MGR中一致性读提供的参数，可以在全局或单个事务中进行配置。分为以下5种可选值： EVENTUAL：   RO和RW事务执行前不会等待先序事务的回放完成，也不会影响后序事务等待该事务回放完成，只需要在超过半数节点冲突检测通过以后即可提交；RW事务不等待其他成员完成应用事务，意味着事务可以在其他成员完成之前外部化。这就可能在在主库发生故障转移的情况下，新主数据库可以在先前的主要事务完成全部应用之前就开始接受新的RO
MGR之group_replication_consistency性能测试
老叶茶馆
10-28 2358
导读作者徐晨亮，MySQL DBA，知数堂学员。热衷于数据库优化，自动化运维及数据库周边工具开发，对MySQL源码有一定的兴趣一、前言开篇先说明下MGR中group_re...
数据同步的桥梁：MySQL主从复制配置全指南
最新发布
07-31
它基于结构化查询语言（SQL）来管理数据，并且是LAMP（Linux, Apache, MySQL, PHP/Python/Perl）技术栈的一部分，这个技术栈常用于构建动态网站和Web应用程序。 MySQL的特点包括： - **开放源代码**：MySQL的源代码...
LAMP架构+Redis主从复制.docx
10-08
LAMP架构+Redis主从复制 本文档主要介绍了LAMP架构的安装和配置，以及Redis主从复制的设置。LAMP架构是指Linux操作系统、Apache HTTP服务器、MySQL数据库和PHP编程语言的组合，而Redis则是一个开源的、基于内存的...
Mysql主从复制+读写分离1
08-08
Mysql 主从复制+读写分离实践 Mysql 主从复制+读写分离是指在 Mysql 集群中，拥有多个从服务器（Slave），它们从主服务器（Master）中复制数据，以确保数据的一致性和可用性。这种架构可以提高数据库的读取性能、...
组复制常规操作-事务一致性保证 | 全方位认识 MySQL 8.0 Group Replication
老叶茶馆
09-03 860
作者 罗小波 · 数据库技术专家出品 沃趣科技对于组复制这样的分布式系统来说，主要的需求之一是它需要有数据的一致性保证。换句话说，需要保证在组成员之间分布的事务的全局同步的一致性。本...
MGR同步复制验证
雅冰石的专栏
05-10 707
/在①delete过程中，多次执行该sql，前几次很快（2秒钟）执行完毕，t1数据量是删除前的数据量，但发现有时会阻塞，阻塞了74秒，进程状态是Executing hook on transaction begin，不阻塞后，显示查询结果为0，读到的是① delete后的数据量。//在①delete过程中，多次执行该sql，t1数据量一直是删除前的数据量，直到① delete完毕，这里变成0条数据，说明是同步复制，节点2删除完，节点1才执行成功。//①执行期间，在节点2上查询同一个表，出现阻塞。
MySQL复制—MGR原理（从几个核心问题入手）
m0_60006388的博客
01-30 1814
MGR基于配额（Quota）进行流控，也就是说，一个Group在一个周期内，只能执行固定数量的事务，这个固定数量就是配额。
mysql 上级组织参数值_MySQL参数group_replication_consistency说明
一名数据库爱好者的专栏
04-25 310
group_replication_consistency 这个参数是在8.0.14引进的一个和组复制相关的参数，用来控制组提供的事务一致性保障。可以在全局或单个事务中进行配置。也可在单主组复制环境中配置用于新的主库(primary)选举的组复制一致性防护机制。必须考虑组复制一致性级别对于只读(RO)事务和读写(RW)事务的影响。 此参数有5个可选配置值，分别是：EVENTUAL(默认)、BEFORE_ON_PRIMARY_FAILOVER、BEFORE、AFTER、BEFORE_AND_AFTER 以下按
ant table 中树形数据 异步加载
qq_39339008的博客
11-17 4198
List item 项目场景： 项目需求，采用ant design table同步加载数据，但数据量过大，导致经常崩溃，因此选择异步加载数据，查找资料，无对应内容（也许是我自己不会找），因此自己融合整理写了个异步加载处理树形数据。 ps:ant design tree有封装好的异步加载方式，table没有，因此自己写了 问题描述： ant design table 树形数据加载，数据量过大，采用异步加载方式 原因分析： 数据量过大，导致渲染速度慢，且很容易崩溃 解决方案： 先加载父节点，再点击展开
MySQL MGR“一致性读写“特性解读
一名数据库爱好者的专栏
04-25 568
MySQL 8.0.14 版本增加了一个新特性：MGR读写一致性；有了此特性，“妈妈”再也不用担心读MGR非写节点数据会产生不一致啦。 有同学会疑问：“MGR不是’全同步’么，也会产生读写不一致？”，在此肯定的告诉大家MGR会产生读写不一致，原因如下： MGR相对于半同步复制，在relay log前增加了冲突检查协调，但是binlog回放仍然可能延时，也就是跟我们熟悉的半同步复制存在io线程的回放延迟情况类似。当然关于IO线程回放慢的原因，跟半同步也类似，比如大事务！！ 所以MGR并不是全同步方案，关于如
社区投稿 | MySQL MGR"一致性读写"特性解读
ActionTech的博客
07-09 792
作者：田帅萌 MySQL 8.0.14版本增加了一个新特性：MGR读写一致性；有了此特性，“妈妈”再也不用担心读MGR非写节点数据会产生不一致啦。 有同学会疑问：“MGR不是'全同步'么，也会产生读写不一致？”，在此肯定的告诉大家MGR会产生读写不一致，原因如下： MGR相对于半同步复制，在relay log前增加了冲突检查协调，但是binlog回放仍然可能延时，也就是跟我们熟悉的...
组复制系统变量 | 全方位认识 MySQL 8.0 Group Replication
老叶茶馆
10-27 3818
本节列出特定于 MGR 插件的系统变量。每个系统变量的前缀都是“group_replication”字符串。组复制的大多数系统变量都是动态的，它们的值可以在MySQL Server运行时...
MySQL Group Replication 动态添加成员节点
CrazyPig的技术博客
01-05 3493
前面文章已经介绍如何部署MySQL GR 的两种模式。在前面的部署里面，因为是预先知道需要部署的组节点规模，所以我们能够在my.cnf里面体现出组成员信息。但是，前面的部署并没有体现出动态添加组节点。这篇文章介绍如何动态往一个GR组里面添加新的成员节点
LAMP架构部署与Redis主从复制实战指南
整体来说，本文档是运维人员在企业环境中部署和维护复杂IT架构的重要参考，对于理解和实践LAMP架构及Redis主从复制技术非常实用。通过阅读和执行其中的步骤，运维人员可以提升网站的稳定性和数据一致性，优化运维...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值