MySQL（四） 主从复制（多源复制）

最新推荐文章于 2023-01-05 15:26:19 发布
最新推荐文章于 2023-01-05 15:26:19 发布
阅读量143 收藏
点赞数
分类专栏： 数据库&消息队列 文章标签： mysql 数据库
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_23435961/article/details/112349802
版权
该文详细介绍了如何初始化并启动3个MySQL实例，使用mysqld_multi进行多实例管理。然后通过脚本创建复制用户并设置主从复制，使得3313实例成为3311和3312的从库。最后验证了多源复制的正确性，通过在主库上创建数据库，观察从库是否同步。文章深入浅出地展示了MySQL多源复制的实现过程。
摘要由CSDN通过智能技术生成

MySQL 主从复制（多源复制）

  • 初始化3个MySQL实例
  • **注意：**脚本有可能创建复制用户是失败的，需要检查下是否成功创建repl用户
  • 使用mysqld_multi管理启动MySQL多实例
[root@db03 ~]# cat multisource_env.sh
#!/bin/bash

mysql_cmd="/usr/local/mysql/bin/mysqld"

# 创建multi管理配置文件
mkdir -p /labs
cat > /labs/multisource.cnf <<EOF
[mysqld1]
server-id=3311
user=mysql
socket=/replication/3311/mysql.sock
port=3311
datadir=/replication/3311/data
log-error=/replication/3311/error.log
log-bin=/replication/3311/binlog/mysql-bin
relay-log=/replication/3311/relaylog/relay-bin
log-slave-updates
report-port=3311
report-host=localhost
relay-log-recovery=1
master-info-repository=TABLE
relay-log-info-repository=TABLE
gtid-mode=on
enforce-gtid-consistency

[mysqld2]
server-id=3312
user=mysql
socket=/replication/3312/mysql.sock
port=3312
datadir=/replication/3312/data
log-error=/replication/3312/error.log
log-bin=/replication/3312/binlog/mysql-bin
relay-log=/replication/3312/relaylog/relay-bin
log-slave-updates
report-port=3312
report-host=localhost
relay-log-recovery=1
master-info-repository=TABLE
relay-log-info-repository=TABLE
gtid-mode=on
enforce-gtid-consistency

[mysqld3]
server-id=3313
user=mysql
socket=/replication/3313/mysql.sock
port=3313
datadir=/replication/3313/data
log-error=/replication/3313/error.log
log-bin=/replication/3313/binlog/mysql-bin
relay-log=/replication/3313/relaylog/relay-bin
log-slave-updates
report-port=3313
report-host=localhost
relay-log-recovery=1
master-info-repository=TABLE
relay-log-info-repository=TABLE
gtid-mode=on
enforce-gtid-consistency
EOF

# 初始化实例
echo -e "----- init mysql -----"
mkdir -p /replication/33{11,12,13}/{binlog,relaylog}
chown -R mysql.mysql /replication/33{11,12,13}
${mysql_cmd} --no-defaults --initialize-insecure --user=mysql --datadir=/replication/3311/data
${mysql_cmd} --no-defaults --initialize-insecure --user=mysql --datadir=/replication/3312/data
${mysql_cmd} --no-defaults --initialize-insecure --user=mysql --datadir=/replication/3313/data

# 启动所有实例
echo -e "----- start mysql -----"
${mysql_cmd}_multi --defaults-file=/labs/multisource.cnf start 1-3

echo -e "----- sleep 10s -----"
sleep 10

# 创建复制用户 只对3311和3312创建
echo -e "----- create replication slave user -----"
${mysql_cmd} -P 3311 -e "grant replication slave on *.* to repl@'127.0.0.1' identified by 'oracle'; reset master;"
${mysql_cmd} -P 3312 -e "grant replication slave on *.* to repl@'127.0.0.1' identified by 'oracle'; reset master;"

echo -e "----- Done -----"
运行脚本后可以看到3311/3312/3313实例全部启动
[root@db03 ~]# sh multisource_env.sh
----- init mysql -----
2020-04-23T09:31:44.655575Z 0 [Warning] TIMESTAMP with implicit DEFAULT value is deprecated. Please use --explicit_defaults_for_timestamp server option (see documentation for more details).
2020-04-23T09:31:44.835648Z 0 [Warning] InnoDB: New log files created, LSN=45790
2020-04-23T09:31:44.871478Z 0 [Warning] InnoDB: Creating foreign key constraint system tables.
2020-04-23T09:31:44.927662Z 0 [Warning] No existing UUID has been found, so we assume that this is the first time that this server has been started. Generating a new UUID: 3f4a0c4e-8545-11ea-b265-02000aba3d09.
2020-04-23T09:31:44.928659Z 0 [Warning] Gtid table is not ready to be used. Table 'mysql.gtid_executed' cannot be opened.
2020-04-23T09:31:44.929158Z 1 [Warning] root@localhost is created with an empty password ! Please consider switching off the --initialize-insecure option.
2020-04-23T09:31:46.839819Z 0 [Warning] TIMESTAMP with implicit DEFAULT value is deprecated. Please use --explicit_defaults_for_timestamp server option (see documentation for more details).
2020-04-23T09:31:47.014100Z 0 [Warning] InnoDB: New log files created, LSN=45790
2020-04-23T09:31:47.047423Z 0 [Warning] InnoDB: Creating foreign key constraint system tables.
2020-04-23T09:31:47.103188Z 0 [Warning] No existing UUID has been found, so we assume that this is the first time that this server has been started. Generating a new UUID: 40960162-8545-11ea-b2ea-02000aba3d09.
2020-04-23T09:31:47.104036Z 0 [Warning] Gtid table is not ready to be used. Table 'mysql.gtid_executed' cannot be opened.
2020-04-23T09:31:47.104698Z 1 [Warning] root@localhost is created with an empty password ! Please consider switching off the --initialize-insecure option.
2020-04-23T09:31:48.987927Z 0 [Warning] TIMESTAMP with implicit DEFAULT value is deprecated. Please use --explicit_defaults_for_timestamp server option (see documentation for more details).
2020-04-23T09:31:49.138326Z 0 [Warning] InnoDB: New log files created, LSN=45790
2020-04-23T09:31:49.168599Z 0 [Warning] InnoDB: Creating foreign key constraint system tables.
2020-04-23T09:31:49.225036Z 0 [Warning] No existing UUID has been found, so we assume that this is the first time that this server has been started. Generating a new UUID: 41d9c677-8545-11ea-b44d-02000aba3d09.
2020-04-23T09:31:49.225900Z 0 [Warning] Gtid table is not ready to be used. Table 'mysql.gtid_executed' cannot be opened.
2020-04-23T09:31:49.226466Z 1 [Warning] root@localhost is created with an empty password ! Please consider switching off the --initialize-insecure option.
----- start mysql -----
----- sleep 10s -----
----- create replication slave user -----
----- Done -----

[root@db03 ~]# netstat -tunpl |grep mysqld
tcp        0      0 0.0.0.0:3311            0.0.0.0:*               LISTEN      2842/mysqld        
tcp        0      0 0.0.0.0:3312            0.0.0.0:*               LISTEN      2845/mysqld        
tcp        0      0 0.0.0.0:3313            0.0.0.0:*               LISTEN      2848/mysqld
在3313实例对3311/3312创建主从连接信息
  • 也就是说3313实例同时做3311和3312两个实例的从库。（注意：两个主库不要搞冲突的数据）
[root@db03 ~]# mysql -P 3313
Welcome to the MySQL monitor.  Commands end with ; or \g.
Your MySQL connection id is 2
Server version: 5.7.26-log MySQL Community Server (GPL)

Copyright (c) 2000, 2019, Oracle and/or its affiliates. All rights reserved.

Oracle is a registered trademark of Oracle Corporation and/or its
affiliates. Other names may be trademarks of their respective
owners.

Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.

root@localhost[(none)]> prompt 3313 >;
PROMPT set to '3313 >'
3313 >

3313 >CHANGE MASTER TO
    ->    MASTER_HOST='127.0.0.1',
    ->    MASTER_USER='repl',
    ->    MASTER_PASSWORD='oracle',
    ->    MASTER_PORT=3311,
    ->    MASTER_CONNECT_RETRY=10,
    ->    MASTER_AUTO_POSITION=1
    ->    FOR CHANNEL 'master1';
Query OK, 0 rows affected, 2 warnings (0.01 sec)

3313 >CHANGE MASTER TO
    ->    MASTER_HOST='127.0.0.1',
    ->    MASTER_USER='repl',
    ->    MASTER_PASSWORD='oracle',
    ->    MASTER_PORT=3312,
    ->    MASTER_CONNECT_RETRY=10,
    ->    MASTER_AUTO_POSITION=1
    ->    FOR CHANNEL 'master2';
Query OK, 0 rows affected, 2 warnings (0.00 sec)

3313 >start slave for channel 'master1';
Query OK, 0 rows affected (0.01 sec)

3313 >start slave for channel 'master2';
Query OK, 0 rows affected (0.01 sec)
查看多源复制从节点状态信息
3313 >show slave status\G
*************************** 1. row ***************************
               Slave_IO_State: Waiting for master to send event
                  Master_Host: 127.0.0.1
                  Master_User: repl
                  Master_Port: 3311
                Connect_Retry: 10
              Master_Log_File: mysql-bin.000001
          Read_Master_Log_Pos: 154
               Relay_Log_File: relay-bin-master1.000003
                Relay_Log_Pos: 367
        Relay_Master_Log_File: mysql-bin.000001
             Slave_IO_Running: Yes
            Slave_SQL_Running: Yes
              Replicate_Do_DB:
          Replicate_Ignore_DB:
           Replicate_Do_Table:
       Replicate_Ignore_Table:
      Replicate_Wild_Do_Table:
  Replicate_Wild_Ignore_Table:
                   Last_Errno: 0
                   Last_Error:
                 Skip_Counter: 0
          Exec_Master_Log_Pos: 154
              Relay_Log_Space: 789
              Until_Condition: None
               Until_Log_File:
                Until_Log_Pos: 0
           Master_SSL_Allowed: No
           Master_SSL_CA_File:
           Master_SSL_CA_Path:
              Master_SSL_Cert:
            Master_SSL_Cipher:
               Master_SSL_Key:
        Seconds_Behind_Master: 0
Master_SSL_Verify_Server_Cert: No
                Last_IO_Errno: 0
                Last_IO_Error:
               Last_SQL_Errno: 0
               Last_SQL_Error:
  Replicate_Ignore_Server_Ids:
             Master_Server_Id: 3311
                  Master_UUID: 3f4a0c4e-8545-11ea-b265-02000aba3d09
             Master_Info_File: mysql.slave_master_info
                    SQL_Delay: 0
          SQL_Remaining_Delay: NULL
      Slave_SQL_Running_State: Slave has read all relay log; waiting for more updates
           Master_Retry_Count: 86400
                  Master_Bind:
      Last_IO_Error_Timestamp:
     Last_SQL_Error_Timestamp:
               Master_SSL_Crl:
           Master_SSL_Crlpath:
           Retrieved_Gtid_Set:
            Executed_Gtid_Set:
                Auto_Position: 1
         Replicate_Rewrite_DB:
                 Channel_Name: master1
           Master_TLS_Version:
*************************** 2. row ***************************
               Slave_IO_State: Waiting for master to send event
                  Master_Host: 127.0.0.1
                  Master_User: repl
                  Master_Port: 3312
                Connect_Retry: 10
              Master_Log_File: mysql-bin.000001
          Read_Master_Log_Pos: 154
               Relay_Log_File: relay-bin-master2.000003
                Relay_Log_Pos: 367
        Relay_Master_Log_File: mysql-bin.000001
             Slave_IO_Running: Yes
            Slave_SQL_Running: Yes
              Replicate_Do_DB:
          Replicate_Ignore_DB:
           Replicate_Do_Table:
       Replicate_Ignore_Table:
      Replicate_Wild_Do_Table:
  Replicate_Wild_Ignore_Table:
                   Last_Errno: 0
                   Last_Error:
                 Skip_Counter: 0
          Exec_Master_Log_Pos: 154
              Relay_Log_Space: 789
              Until_Condition: None
               Until_Log_File:
                Until_Log_Pos: 0
           Master_SSL_Allowed: No
           Master_SSL_CA_File:
           Master_SSL_CA_Path:
              Master_SSL_Cert:
            Master_SSL_Cipher:
               Master_SSL_Key:
        Seconds_Behind_Master: 0
Master_SSL_Verify_Server_Cert: No
                Last_IO_Errno: 0
                Last_IO_Error:
               Last_SQL_Errno: 0
               Last_SQL_Error:
  Replicate_Ignore_Server_Ids:
             Master_Server_Id: 3312
                  Master_UUID: 40960162-8545-11ea-b2ea-02000aba3d09
             Master_Info_File: mysql.slave_master_info
                    SQL_Delay: 0
          SQL_Remaining_Delay: NULL
      Slave_SQL_Running_State: Slave has read all relay log; waiting for more updates
           Master_Retry_Count: 86400
                  Master_Bind:
      Last_IO_Error_Timestamp:
     Last_SQL_Error_Timestamp:
               Master_SSL_Crl:
           Master_SSL_Crlpath:
           Retrieved_Gtid_Set:
            Executed_Gtid_Set:
                Auto_Position: 1
         Replicate_Rewrite_DB:
                 Channel_Name: master2
           Master_TLS_Version:
2 rows in set (0.00 sec)
创建数据库检查3313实例是否可以同步创建
[root@db03 ~]# mysql -P 3311 -e "create database test1;"
[root@db03 ~]# mysql -P 3312 -e "create database test2;
[root@db03 ~]# mysql -P 3313 -e "show databases;"
+--------------------+
| Database           |
+--------------------+
| information_schema |
| mysql              |
| performance_schema |
| sys                |
| test1              |
| test2              |
+--------------------+
正在输入中…………
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 2
    评论
专栏目录
Mysql多源主从复制
weixin_46119350的博客
05-22 176
MySQL在5.7.2上面添加了多源复制（Multi-Source）功能，意味着一个从库可以连多个主库，从而同时进行同步，但是如果是同一个表的话，会存在主键和唯一索引冲突的风险，需要提前做好规划。| replication_applier_status_by_worker |###查看各个channel是否复制正常，以及并行复制work号，复制错误的code、SQL和时间。master_log_file='mylog.000003', --我这里不一样，根据你自己的名称和位置去写。
MySQL主从复制有哪几种类型_MySQL常用的4种主从复制架构
weixin_42160252的博客
01-18 997
复制的4中常见架构有一主多从复制架构、多级复制架构、双主(Dual Master)复制架构和多源(Multi-Source)复制架构。一主多从复制架构在主库读取请求压力非常大的场景下，可以通过配置一主多从复制架构实现读写分离，把大量的对实时性要求不是特别高的读请求通过负载均衡分部到多个从库上(对于实时性要求很高的读请求可以让从主库去读)，降低主库的读取压力，如下图所示。在主库出现异常宕机的情况下，...
MySQL主从复制（5）多源主从复制
weixin_42073629的博客
05-24 344
一、多源复制介绍 当业务数据被打散到多个数据库实例后，如果需要实现一个从库同时同步多个主库的数据就需要使用多源复制这样的主从架构。在多源复制架构中，从库通过多个不同的复制通道（channel）来接受不同主库的数据，然后将这些数据存放在以通道命名的relaylog中。在MySQL 5.7中一个从库最多可以配置256个复制通道，这些通道名称不能重复（多源复制中每个数据库名也不可重复）。从库数据量控制在1T以内，除非有很好的存储设备，如PCIE-SSD。每个通道可以独立配置和运行，对于数据库的日志等相关配置，每
性能提升利器：MySQL 5.7多源主从复制的独特性
Enweitech Software Works
11-08 4918
关于MySQL主从复制 　　复制技术顾名思义，就是通过数据库的复制技术以一份数据为主，复制成另一份存放，数据来源的那一份做为主库，存放复制数据的的称为从库。MySQL的复制方案有很多，比如主从复制、半同步复制、多主还有主主复制等。基本都是是通过把主库的操作写入二进制日志，将二进制日志传送到从库并且重演日志中记录的操作跟进主库状态以便达到在从库数据同步的效果。 　　其中，主从复制
MySQL多源复制
必凌云的博客
03-05 242
待完善、、、、、、、
MySQL高可用之多源复制
eagle89的专栏
01-05 1201
MySQL高可用之多源复制
简单讲解MySQL中的多源复制
12-15
在这篇文章里，我将要用一些简单的步奏来尝试了解这新的多源复制工作原理以及我们怎样进行自己的测试。需要说明的是，这还是一个开发版本，不是给生产环境准备的。因此这篇文章是打算给那些想了解此新功能的人，看看...
MySQL主从复制类型简介入门
12-19
### MySQL主从复制类型简介入门 #### 一、复制原理 MySQL作为一种广泛使用的开源关系型数据库管理系统，提供了强大的数据复制功能。数据复制是构建大型、高性能应用程序的基础之一，通过将MySQL的数据分布到多个...
MySQL主从复制模式全面实践
04-29
MySQL主从复制是一种数据库高可用性和数据冗余的重要机制，它允许数据从一个服务器（主节点）同步到一个或多个其他服务器（从节点）。在本实践中，我们将深入探讨这一模式的各个方面，包括其工作原理、配置步骤、...
mysql如何查看多源复制的主库_mysql 5.7多源复制（用于生产库多主库合并到一个查询从库）...
weixin_32957761的博客
02-03 193
目前我们使用的是主从+分库分表的系统架构，主库有N个分库，从库为多个slave做负载均衡，所以数据库端的架构是下面这样的：这就涉及到多个主库数据同步到不分库分表的从库共查询和管理类系统使用。在mysql 5.6以及之前的版本中，没有原生的解决方法，除非使用mariadb分支，在mysql 5.7之后支持多源复制，除了使用原生的多源复制之外，还有一个选择，就是使用案例开源的otter/canal。如...
Mysql主从机复制同步（单向、双向、多源）
weixin_44310844的博客
08-10 2244
主从机复制同步，单向，双向，多源
MySQL5.7多源主从复制
u013983450的博客
08-11 1765
MySQL5.7多源主从复制 MySQL在5.7.2上面添加了多源复制（Multi-Source）功能，意味着一个从库可以连 多个主库，从而同时进行同步，但是如果是同一个表的话，会存在主键和唯一索引冲突的风险，需要提前做好规划   MySQL多源复制的原理 个人认为MySQL能实现多源复制的关键有两点 1.      MySQL5.7中的从库进行同步的SQL_THREA
MySQL5.7 多主一从（多源复制）同步配置
eagle89的专栏
12-28 4031
多主一从
mysql多源复制
任何技能都是从模仿开始，逐步升华。
12-04 3247
多源复制就是多个master复制，允许一个slave对应多个master； change master语法（参考：http://dev.mysql.com/doc/refman/5.7/en/change-master-to.html）： CHANGE MASTER TO option [, option] ... [ channel_option ] option:
MySQL 5.7 多主一从（多源复制）同步配置
KHOST的博客
12-17 1370
多主一从，也称为多源复制，数据流向：   主库1 -&gt; 从库s 主库2 -&gt; 从库s 主库n -&gt; 从库s   应用场景     数据汇总，可将多个主数据库同步汇总到一个从数据库中，方便数据统计分析。 读写分离，从库只用于查询，提高数据库整体性能。   部署环境     注：使用docker部署mysql实例，方便...
Mysql之多源复制
Z120552123的博客
07-27 406
Mysql之多源复制
MySQL 5.7 Replication 相关新功能说明
weixin_33753003的博客
07-30 225
背景： MySQL5.7在主从复制上面相对之前版本多了一些新特性，包括多源复制、基于组提交的并行复制、在线修改Replication Filter、GTID增强、半同步复制增强等。因为都是和复制相关，所以本文将针对这些新特性放一起进行说明，篇幅可能稍长，本文使用的MySQL版本是5.7.13。 1，多源复制（多主一从） MySQL在5.7之后才支持多源复制，之前介绍过MariaDB 多主一从...
mysql复习总结面试资料
qq_23435961的博客
07-17 2154
mysql 文章目录数据库基础知识为什么要使用数据库什么是SQL？什么是MySQL?数据库三大范式是什么mysql有关权限的表都有哪几个MySQL的binlog有有几种录入格式？分别有什么区别？数据类型mysql有哪些数据类型引擎MySQL存储引擎MyISAM与InnoDB区别MyISAM索引与InnoDB索引的区别？InnoDB引擎的4大特性存储引擎选择索引什么是索引？索引有哪些优缺点？索引使用场景（重点）索引有哪几种类型？索引的数据结构（b树，hash）索引的基本原理索引算法有哪些？索引设计的原则？创建
MySQL主从复制发展史
最新发布
05-06
MySQL主从复制是MySQL数据库中一种常见的数据复制技术，用于实现数据的备份、负载均衡和高可用性。下面是MySQL主从复制的发展史： 1. MySQL 3.23版本引入了基于语句级别的主从复制。在这种模式下，主服务器将执行的...
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

正在输入中…………

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值