MySQL 基于GTID的复制

最新推荐文章于 2023-01-03 10:59:35 发布
最新推荐文章于 2023-01-03 10:59:35 发布
阅读量291 收藏
点赞数
分类专栏： MySQL 文章标签： mysql GTID
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/liupf0217/article/details/79160733
版权

一 GTID简介

GTID是全局事务标识符，每一个提交的事务，当前执行线程都会分配给一个唯一标识符，该标识符无论在源端还是在复制环境中都是唯一的。由此可见，环境中的所有事务都和GTID一一对应，GTId格式如下：

GTID=source_id:sequnence_id

——source_id 是源服务器的唯一标识，通常为server_uuid；

——sequnence_id是事务在提交时由系统分配的一个序列号。

 

二 复制的流程

1.      MASTER执行一个事务，相关进程产生一个GTID与之对应，并保存在Binlog中；

2.      MASTER的Binlog发送到SLAVE，并存储在RelayLog中，SLAVE读取GTID并将其设置为gtid_next；

3.      SLAVE在自己Binlog中验证读取的GTID是否有冲突，若无冲突，SLAVE则写入该GTID，并应用相应事务，且写入二进制日志；

4.      SLAVE不会自己产生GTID，而是从Relay Log获取，将其设置为gtid_next，然后标识事务。

三 搭建GTId主从

1.      参数配置

相对传统模式，GTID模式需要配置一下参数：

gtid_mode=ON ——开启GTID模式

#enforce_gtid_consistency=on——开启GTID模式时，保证GTID一致性

binlog_format=row  ——GTID模式强烈建议使用ROW模式

log_slave_updates=ON  ——建议SLAVE记录Binlog

skip-slave-start=1   ——SLAVE不自动启动

     2.      搭建主从

       说明：该搭建过程是针对MASTER具有大量数据时的情况，MASTER使用innobackupex进行备份，然后在SLAVE上恢复，并初始化SLAVE。

      2.1  MATSER使用innobackupex进行备份

创建测试库TEST，创建测试表t_doc

 

备份：

xtrabackup/bin/innobackupex --defaults-file=/mysql/my3306.cnf --slave-info --user=root --password=123qwe  --socket=/mysql/3306/mysql_3306.sock  --parallel=4  .

备份后产生的目录文件：2018-01-19_11-15-02

 

  2.2  创建复制用户并授权：

         > create user repp@'192.168.17.%'identified by 'tinayun';

         > grant replication slave,replication client on *.* to repp@'192.168.17.%' identified by 'tinayun';

         > flush privileges;

 

  2.3  在备库进行恢复：

xtrabackup/bin/innobackupex  --defaults-file=/mysql/my3307.cnf --copy-back--slave-info 2018-01-19_11-15-02

xtrabackup/bin/innobackupex  --defaults-file=/mysql/my3307.cnf --apply-log--slave-info 2018-01-19_11-15-02

检查恢复状况:

 

 

 2.4  使用CHANGE MASTER 配置主从：

CHANGEMASTER TO

MASTER_HOST='192.168.17.100',

MASTER_PORT=3306,

MASTER_USER='repp',

MASTER_PASSWORD='tinayun',

MASTER_AUTO_POSITION=1;

 

  2.5   启动SLAVE复制,跳过相应GTID范围。

> start  slave ;

>show  slave status\G

***************************1. row ***************************

               Slave_IO_State: Waiting formaster to send event

                  Master_Host: 192.168.17.100

                  Master_User: repp

                  Master_Port: 3306

                Connect_Retry: 60

              Master_Log_File: mysql-bin.000003

          Read_Master_Log_Pos: 93671263

               Relay_Log_File:mysql-relay-bin.000002

                Relay_Log_Pos: 367

        Relay_Master_Log_File: mysql-bin.000003

             Slave_IO_Running: Yes

            Slave_SQL_Running: No

              Replicate_Do_DB:

          Replicate_Ignore_DB:

           Replicate_Do_Table:

       Replicate_Ignore_Table:

      Replicate_Wild_Do_Table:

  Replicate_Wild_Ignore_Table:

                   Last_Errno: 1007

                   Last_Error: Error 'Can'tcreate database 'test'; database exists' on query. Default database: 'test'.Query: 'create  database  test'

                 Skip_Counter: 0

          Exec_Master_Log_Pos: 194

              Relay_Log_Space: 93671643

              Until_Condition: None

               Until_Log_File:

                Until_Log_Pos: 0

           Master_SSL_Allowed: No

           Master_SSL_CA_File:

           Master_SSL_CA_Path:

              Master_SSL_Cert:

            Master_SSL_Cipher:

               Master_SSL_Key:

        Seconds_Behind_Master: NULL

Master_SSL_Verify_Server_Cert:No

                Last_IO_Errno: 0

                Last_IO_Error:

               Last_SQL_Errno: 1007

               Last_SQL_Error: Error 'Can't createdatabase 'test'; database exists' on query. Default database: 'test'. Query:'create  database  test'

  Replicate_Ignore_Server_Ids:

             Master_Server_Id: 13783306

                  Master_UUID: 541d40a8-fcc3-11e7-b444-000c29273545

             Master_Info_File:/mysql/mysql3307/master.info

                    SQL_Delay: 0

          SQL_Remaining_Delay: NULL

      Slave_SQL_Running_State:

           Master_Retry_Count: 86400

                  Master_Bind:

      Last_IO_Error_Timestamp:

     Last_SQL_Error_Timestamp: 180119 11:25:21

               Master_SSL_Crl:

           Master_SSL_Crlpath:

           Retrieved_Gtid_Set:541d40a8-fcc3-11e7-b444-000c29273545:2-111

            Executed_Gtid_Set: 541d40a8-fcc3-11e7-b444-000c29273545:1

                Auto_Position: 1

         Replicate_Rewrite_DB:

                 Channel_Name:

          Master_TLS_Version:

 

 

查看状态，发现会有报错，因为SLAVE是从MASTER最看是的Binlog 执行，所以需要设置选项gtid_purged方式跳过这相应的GTID。Innobackupex备份会保留xtrabackup_info文件，该文件包含gtid_purged信息。（这一点很重要，在Group Replication 搭建时也有用到。）

 

跳过相应的GTID操作：

> reset master;

>set @@GLOBAL.GTID_PURGED='541d40a8-fcc3-11e7-b444-000c29273545:1-108';

 

 

>show  slave status\G

***************************1. row ***************************

               Slave_IO_State: Waiting formaster to send event

                  Master_Host: 192.168.17.100

                  Master_User: repp

                  Master_Port: 3306

                Connect_Retry: 60

              Master_Log_File: mysql-bin.000003

          Read_Master_Log_Pos: 93671263

               Relay_Log_File:mysql-relay-bin.000003

                Relay_Log_Pos: 454

        Relay_Master_Log_File: mysql-bin.000003

             Slave_IO_Running: Yes

            Slave_SQL_Running: Yes

              Replicate_Do_DB:

          Replicate_Ignore_DB:

           Replicate_Do_Table:

       Replicate_Ignore_Table:

      Replicate_Wild_Do_Table:

  Replicate_Wild_Ignore_Table:

                   Last_Errno: 0

                   Last_Error:

                 Skip_Counter: 0

          Exec_Master_Log_Pos: 93671263

              Relay_Log_Space: 93671943

              Until_Condition: None

               Until_Log_File:

                Until_Log_Pos: 0

           Master_SSL_Allowed: No

           Master_SSL_CA_File:

           Master_SSL_CA_Path:

              Master_SSL_Cert:

            Master_SSL_Cipher:

               Master_SSL_Key:

        Seconds_Behind_Master: 0

Master_SSL_Verify_Server_Cert:No

                Last_IO_Errno: 0

                Last_IO_Error:

               Last_SQL_Errno: 0

               Last_SQL_Error:

  Replicate_Ignore_Server_Ids:

             Master_Server_Id: 13783306

                  Master_UUID:541d40a8-fcc3-11e7-b444-000c29273545

             Master_Info_File: /mysql/mysql3307/master.info

                    SQL_Delay: 0

          SQL_Remaining_Delay: NULL

      Slave_SQL_Running_State: Slave has readall relay log; waiting for more updates

           Master_Retry_Count: 86400

                  Master_Bind:

      Last_IO_Error_Timestamp:

     Last_SQL_Error_Timestamp:

               Master_SSL_Crl:

           Master_SSL_Crlpath:

           Retrieved_Gtid_Set:541d40a8-fcc3-11e7-b444-000c29273545:2-111

            Executed_Gtid_Set:541d40a8-fcc3-11e7-b444-000c29273545:1-111

                Auto_Position: 1

         Replicate_Rewrite_DB:

                 Channel_Name:

           Master_TLS_Version:

主从模式已经正常。若还有相同报错，重启SLAVE。

（另，最好在CHANGE MASTER之前执行该操作）

 

2.6  验证主从复制：

主库多表t_doc 进行DML操作：

Delete 操作：

Insert 操作：

 

 

备库检查：

主Delete 操作后：

 

 

主Insert 操作后：

 

平凡亦非凡
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
MySQL基于GTID复制
bjgaocp的博客
03-05 450
MySQL 5.6 引入了Gtid 全局事务号 每一条sql语句都有一个事务号 主从同步可以不在指定logfile post点 主从会自动写上补全数据 依赖对的就是gtid 基于GTID的主从复制 1、配置主从节点的服务配置文件 1.1、配置master节点： [mysqld] binlog-format=MIXED log-bin=master-bin log-slave-updates=1 g...
MySQL基于gtid的主从复制（一主一从、一主多从、双主一从）
满堂花醉三千客,一剑霜寒十四州
09-01 701
文章目录1.Gtid概念2. 什么是Gitd?3. Gtid的作用4. Gtid的工作原理5. 事务的概述5.1 事务的四大特征Gtid优缺点配置Gtid 1.Gtid概念 从 MySQL 5.6.5 开始新增了一种基于 GTID 的复制方式。通过 GTID保证了每个在主库上提交的事务在集群中有一个唯一的ID。这种方式强化了数据库的主备一致性，故障恢复以及容错能力。 2. 什么是Gitd? GTID 全称 global transaction identifier 全局事物id，是MASTER创建的和事物相
MySQL复制（三）：GTID复制（Replication using GTIDs）
Vincent的博客
11-30 1493
MySQL从5.6版本开始引入了全局事务标识符（Global Transaction Identifiers, GTID）的概念，为每个事务都分配一个唯一的标识符。GTID以事务为单位管理复制，不再需要靠log_file和log_pos来定位复制位置，在主从切换、故障恢复时更加简单。source_id是发起事务服务器的UUID，用来保证"全局"唯一，transaction_id是事务的编号，按照事务提交的顺序从1开始单调递增。这保证的事务在整个复制拓扑中的是唯一的。
【MySQL】MySQL复制之GTID复制
morris
02-19 3万+
从MySQL 5.6.5开始新增了一种基于GTID的复制方式。通过GTID保证了每个在主库上提交的事务在集群中有一个唯一的ID。这种方式强化了数据库的主备一致性，故障恢复以及容错能力。 GTID是什么 GTID (Global Transaction ID) 是对于一个已提交事务的编号，并且是一个全局唯一的编号。 GTID实际上是由UUID+TID 组成的。其中UUID是一个 MySQL实例的唯一标识。TID代表了该实例上已经提交的事务数量，并且随着事务提交单调递增。 下面是一个GTID的具体形式：3E11
MySQL复制技术方案——GTID复制配置
JC的博客
01-03 1935
如何跳过一个GTID在复制中，偶尔会遇到主键冲突或从库找不到该条记录等错误。那么如何解决呢?在传统的复制模式中，经常通过设置 sql_slave_skip_counter参数跳过一个事件，如下。但是在GTID模式中，如果继续执行上述操作，就会有如下错误产生。在GTID模式的复制情况下，如果SLAVE发生错误，则可以通过跳过该事务的方式恢复主从复制，如图13.1所示。从图13.1中可以看出，出错事务的Binlog文件为mysql-bin.000003，end_log_pos为426，其开始位置为194。
Mysql 5.7 多源复制 创建相同的数据库时提示 Slave: Can't create database 'test'; database exists Error_code: 1007
leo__1990的博客
06-19 1501
Mysql 5.7 多源复制有个限制，源数据库的名称不能相同。下面测试在两个源主库创建相同数据库test,第二个主库创建的时候查看从库状态报错如下所示：查看从库进程状态 mysql> SHOW SLAVE STATUS FOR CHANNEL 'Master_2'/G; ... Last_SQL_Errno: 1007 Last_SQL_Error: Error 'Can't creat...
主从同步出现Error 'Can't create database 'test‘; database exists'错误
qq_35622837的博客
12-11 1万+
slave start mysql命令行下执行slave start show slave status；看下状态 如果出现Error 'Can't create database 'oldboy'; database exists'错误，则 slave stop; set GLOBAL sql_slave_skip_counter=1; slave start 主从复制到这来就ok了 原文：ht...
MySQL主从复制故障解决
weixin_30645617的博客
07-26 209
丛库复制停止，进丛库查看，报错1007，数据库已存在，不能创建数据库 mysql> show slave status\G; Slave_IO_Running: Yes Slave_SQL_Running: No Last_Errno: 1007 Last_Error: Error 'Can't create database 'test'; dat...
mysql5.7主从方案_mysql5.7-主从复制基础(异步)
weixin_33897085的博客
01-19 113
高可用架构方案负载均衡:有一定的高可用性LVS Nginx主备系统:有高可用性,但是需要切换,是单活的架构KA , MHA, MMM真正高可用(多活系统)NDB Cluster Oracle RAC Sysbase cluster , InnoDB Cluster(MGR),PXC , MGC主从复制前提1、两台以上mysql实例 ,server_id,server_uuid不同2、...
mysql主从报错_mysql 主从复制如何跳过报错
weixin_33850554的博客
01-25 291
一、传统binlog主从复制，跳过报错方法mysql> stop slave;mysql> set global sql_slave_skip_counter = 1;mysql> start slave;mysql> show slave status \G二、GTID主从复制，跳过报错方法mysql> stop slave； #先关闭slave复制；mysql&g...
错误代码： 1007 Can't create database 'test'; database exists
热门推荐
游海东的技术专栏
09-16 6万+
1、错误描述1 queries executed, 0 success, 1 errors, 0 warnings 查询：create database test 错误代码： 1007 Can't create database 'test'; database exists 执行耗时 : 0 sec 传送时间 : 0 sec2、错误原因    执行创建数据库时，两次执行了同一SQL
Last_SQL_Error: Error 'Can't drop database 'ABC'; database doesn't exist' on query. Default database...
weixin_33726313的博客
04-27 1578
查看从库状态发现报错： show slave status\G; 发现是主库上删除了一个数据库，但是从库上面没有，从库执行这个语句的时候失败报错。 解决方法： 停止从库 stop slave; 创建语句中所说的数据库，这里使用ABC create database ABC; 启动从库 start slave; 问题解决。 再次查看show slave status\G,发...
Error 'Can't drop database 'just'; database doesn't exist' on query.
weixin_34049948的博客
03-09 1113
Last_SQL_Error: Error 'Can't drop database 'just'; database doesn't exist' on query. Default database: 'just'. Query: 'drop database just' Relay_Master_Log_File: master-bin....
mysql 复制 错误 1007_MySQL GTID复制错误处理之跳过错误
weixin_33653182的博客
01-19 334
mysql>show slave status\G;*************************** 1. row ***************************Slave_IO_State: Waitingformaster to send eventMaster_Host:192.168.206.140Master_User: u_replMaster_Port:3306C...
mysql 模拟序列_MySQL模拟Oracle序列使用
weixin_30227565的博客
01-19 142
注意：创建序列表时一定要有 主键id自增，否则为只读状态不能修改递增。 序列名字段名都更改一下即可DROP TABLE IF EXISTS sequence;CREATE TABLE sequence (id INT UNSIGNED NOT NULL AUTO_INCREMENT,name VARCHAR(50) NOT NULL,current_value INT NOT NULL,incre...
错误（已解决）：Last_SQL_Error: Error ‘Can‘t drop database ‘test01‘； database doesn‘t exist‘ on query
世上哪有什么岁月静好,不过是有人替你负重前行
04-24 1653
Last_SQL_Error: Error ‘Can’t drop database ‘test01’; database doesn’t exist’ on query. Default database: ‘test01’. Query: ‘DROP DATABASE test01’ 在docker中主从同步的时候产生的：原因是我删除了主库中从库没有的数据库，我也没想到还会导致集群宕机，解决方法就是让指针往下移动： mysql> stop slave; Query OK, 0 rows affe
MySQL GTID复制错误处理之跳过错误
a549010853的博客
03-16 722
某Slave报错信息： mysql> show slave status\G; mysql> show slave status\G; *************************** 1. row *************************** Slave_IO_State: Waiting for mas...
MySQL主从复制【基于GTID复制】
JohnnyG2000的博客
05-11 2248
MySQL主从复制【基于GTID复制】1、GTID复制简介2、GTID复制运行过程3、GTID复制开启参数4、示例1）环境准备2）初始化数据【重置所有数据（方便实验）】3）配置主库4）配置从库5）测试6）查看GTID 1、GTID复制简介 在主从同步时 GTID_Event 和事务的 Binlog 会一起传递到从库，由中继日志接收，从库在执行的时候使用对应的 GTID 写 binlog；主从同步以后，可以通过 GTID 确定从库目前同步的位置了。 【简单来说：可以通过 GTID 自动找点，无需像之前那样通过
基于gtid搭建双主数据库
最新发布
07-12
要基于 GTID（Global Transaction Identifier）搭建双主数据库，你需要遵循以下步骤： ...完成上述步骤后，你将具有基于GTID的双主数据库架构。这将允许你在两个服务器上同时进行写操作，并确保数据一致性和高可用性。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值