mysql的主从复制(基于二进制文件）

最新推荐文章于 2022-10-26 21:27:19 发布
最新推荐文章于 2022-10-26 21:27:19 发布
阅读量292 收藏
点赞数
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Rapig1/article/details/101306481
版权

MySQL主从复制涉及到三个线程，一个运行在主节点（log dump thread），其余两个(I/O thread, SQL thread)运行在从节点，如下图所示:
在这里插入图片描述
主节点 binary log dump 线程

当从节点连接主节点时，主节点会创建一个log dump 线程，用于发送bin-log的内容。在读取bin-log中的操作时，此线程会对主节点上的bin-log加锁，当读取完成，甚至在发动给从节点之前，锁会被释放。

从节点I/O线程

当从节点上执行start slave命令之后，从节点会创建一个I/O线程用来连接主节点，请求主库中更新的bin-log。I/O线程接收到主节点binlog dump 进程发来的更新之后，保存在本地relay-log中。

从节点SQL线程

SQL线程负责读取relay log中的内容，解析成具体的操作并执行，最终保证主从数据的一致性。

要实施复制，首先必须打开Master 端的binary log（bin-log）功能，否则无法实现。
因为整个复制过程实际上就是Slave 从Master 端获取该日志然后再在自己身上完全顺序的执行日志中所记录的各种操作。如下图所示：
在这里插入图片描述
复制的基本过程如下：
== 从节点上的I/O 进程连接主节点，并请求从指定日志文件的指定位置（或者从最开始的日志）之后的日志内容；
 主节点接收到来自从节点的I/O请求后，通过负责复制的I/O进程根据请求信息读取指定日志指定位置之后的日志信息，返回给从节点。返回信息中除了日志所包含的信息之外，还包括本次返回的信息的bin-log file 的以及bin-log position；
 从节点的I/O进程接收到内容后，将接收到的日志内容更新到本机的relay log中，并将读取到的binary log文件名和位置保存到master-info 文件中，以便在下一次读取的时候能够清楚的告诉Master“我需要从某个bin-log 的哪个位置开始往后的日志内容，请发给我”；
 Slave 的 SQL线程检测到relay-log 中新增加了内容后，会将relay-log的内容解析成在主节点上实际执行过的操作，并在本数据库中执行。==

2.Mysql的主从异步复制（Asynchronous replication）
1、逻辑上

MySQL默认的复制即是异步的，主库在执行完客户端提交的事务后会立即将结果返给给客户端，并不关心从库是否已经接收并处理，这样就会有一个问题，主如果crash掉了，此时主上已经提交的事务可能并没有传到从库上，如果此时，强行将从提升为主，可能导致新主上的数据不完整。

2、技术上

主库将事务 Binlog 事件写入到 Binlog 文件中，此时主库只会通知一下 Dump 线程发送这些新的 Binlog，然后主库就会继续处理提交操作，而此时不会保证这些 Binlog 传到任何一个从库节点上。

（2）异步复制的实现：
所需环境：主库：172.25.15.1 server1
从库：172.25.15.2 server2
两个7.3的虚拟机镜像
将rpm包从真机传给虚拟机，然后进行安装
在这里插入图片描述
安装完成后：修改配置文件,启动数据库，并获得生成的初始密码：
vim /etc/my.cnf
在这里插入图片描述
systemctl start mysqld
cat /var/log/mysqld.log | grep password
在这里插入图片描述
数据库安全初始化，并使用新密码登陆：
mysql_secure_installation
在这里插入图片描述
初始化成功
登陆
在这里插入图片描述
创建用来主从复制的用户repl，查看主节点状态：
在这里插入图片描述
show plugins; 查看限制密码插件
在这里插入图片描述
show master status; 查看节点状态
在这里插入图片描述
真机测试，repl用户能否登陆：
mysql -h 172.25.15.1 -urepl -p 登陆成功
在这里插入图片描述
从库的操作如下：
安装rpm包：
在这里插入图片描述
vim /etc/my.cnf
在这里插入图片描述
systemctl start mysqld 查看密码并安全初始化
cat /var/log/mysqld.log | grep password
在这里插入图片描述
mysql_secure_installation
在这里插入图片描述
登陆数据库设置，并开启从节点：
mysql> CHANGE MASTER TO
-> MASTER_HOST=‘172.25.15.1’, 主节点ip
-> MASTER_USER=‘repl’,
-> MASTER_PASSWORD=‘Yty123+ld’,
-> MASTER_LOG_FILE=‘mysql-bin.000002’, 所读数据目录
-> MASTER_LOG_POS=1011; 所读数据位置 同步数据的起始位置
Query OK, 0 rows affected, 2 warnings (0.30 sec)

在这里插入图片描述
start slave; 开启从库
在这里插入图片描述
mysql> show slave status\G #查看从节点状态
在这里插入图片描述
Slave_IO_Running: Yes #这两行必须是yes，否则有问题
Slave_SQL_Running: Yes

这样，主从异步复制就已经实现了，进行测试
主节点的操作：
在这里插入图片描述
==desc usertb; == #查看表结构
在这里插入图片描述
mysql> select * from usertb; #查看表中所有内容
在这里插入图片描述
从节点的操作：
可以看到westos库
在这里插入图片描述
可以看到表中所有内容
在这里插入图片描述
在这里插入图片描述

Rapig1
关注
MySQL 主从复制：基于二进制文件复制配置详解
weixin_42545066的博客
02-21 1075
MySQL-主从复制：基于二进制文件复制详解 前言 主从复制是指把一个MySQL的数据库服务器作为主服务器(master)，然后把master的数据复制到一个或者多个MySQL数据库服务器作为从服务器(slave)。从master到slave的复制一般是异步复制，所以从服务器的复制可以随时停止，也不会影响到主服务器的使用。可以通过配置来决定只复制哪些数据库或者哪些表的数据。 主从复制的优...
MySQL的复制方式（基于二进制日志文件位置的主从复制、基于GTID的主从复制、半同步复制、组复制）
Aimee_c的博客
05-12 1348
文章目录1.MySQL1.1 MySQL的事务2.MySQL的三种复制方式2.1 MySQL的异步复制——基于二进制日志文件位置的复制 1.MySQL Mysql是一种关系型数据库，特点是将这些数据保存在不同的二维表中，并将这些表放入数据库，这样可以增加它的读取速度。 1.1 MySQL的事务 事务就是一组原子性的SQL查询，或者说一个独立的工作单元 如果数据库引擎能够成功地对数据库进行该组查询的全部语句，那么就执行该组查询，如果其中有任何一条语句因为崩溃或者其他原因无法执行，那么所有的语句都不会执行，也就
VB二进制文件实现文件复制
12-29
使用打开并保存二进制文件来复制文件的源代码。特别适合于嵌入到将文件分割或通过网络发送。
Mysql数据库的主从复制（基于二进制文件）
yrx420909的博客
02-20 401
1.MySQL主从复制原理 MySQL主从复制涉及到三个线程，一个运行在主节点（log dump thread），其余两个(I/O thread, SQL thread)运行在从节点，如下图所示:    主节点 binary log dump 线程    当从节点连接主节点时，主节点会创建一个log dump 线程，用于发送bin-log的内容。在读取bin-log中的操作时，此线程会对主节点上的...
mysql 复制 二进制文件命令_Mysql中复制详细解析
weixin_42124497的博客
01-28 202
原标题：Mysql中复制详细解析1.mysql复制概念指将主数据库的DDL和DML操作通过二进制日志传到复制服务器上，然后在复制服务器上将这些日志文件重新执行，从而使复制服务器和主服务器的数据保持同步。复制过程中一个服务器充当主服务器(master)，而一个或多个其它服务器充当从服务器(slaves)。主服务器将更新重新写入二进制日志文件，并维护文件的一个索引以跟踪日志循环。这些日志可以记录发送到...
Mysql主从复制—binlog二进制日志 解析
翔之天空的专栏
12-12 717
参考：官方文档(binlog中的event结构)：https://dev.mysql.com/doc/internals/en/event-structure.html binlog解析：http://blog.itpub.net/7728585/search/%E8%A7%A3%E6%9E%90mysql/ 实验目的：通过一个del...
mysql二进制文件复制_MySQL 主从复制：基于二进制文件复制配置详解
weixin_30475939的博客
02-05 190
##MySQL-主从复制：基于二进制文件复制详解###前言主从复制是指把一个MySQL的数据库服务器作为主服务器(master)，然后把master的数据复制到一个或者多个MySQL数据库服务器作为从服务器(slave)。从master到slave的复制一般是异步复制，所以从服务器的复制可以随时停止，也不会影响到主服务器的使用。可以通过配置来决定只复制哪些数据库或者哪些表的数据。###主从复制的优...
二进制方式安装Mysql并配置Mysql主从
NancyLCL的博客
10-26 860
4. 初始化数据库：初始化数据库会得到数据库的起始密码。
企业—mysql基于二进制文件位置的主从复制和基于GTID的主从复制
xy_的博客
05-18 254
1.mysql的简介 Mysql是一种关系型数据库，特点是将这些数据保存在不同的二维表中，并将这些表放入数据库，这样可以增加它的读取速度。 2.mysql的事务 事务就是一组原子性的SQL查询，或者说一个独立的工作单元，如果数据库引擎能够成功地对数据库进行该组查询的全部语句，那么就执行该组查询，如果其中有任何一条语句因为崩溃或者其他原因无法执行，那么所有的语句都不会执行，也就是说，事务内的语句，要么全部执行成功，要么全部执行失败。 3.mysql如何复制？ 1）在主库上把数据更改记录到二进制（Binary
二进制文件复制
zhenjw
06-29 88
[code="java"] import java.io.BufferedInputStream; import java.io.BufferedOutputStream; import java.io.File; import java.io.FileInputStream; import java.io.FileOutputStream; public class Fi...
二进制读写文件, 实现任意格式文件的复制以及网络传送
q191201771的专栏
12-29 6489
  代码贴在下面, 通过从源文件的开头到结尾二进制形式把文件进行了复制, 我已经测试了一个jpg图片以及一个mp3音频文件, 理论上是所有文件都能进行复制的, 要想实现网络传送只需把从源文件读出的那个src_buf通过socket发送出去就行了  另外大致聊一下文件后缀名, 有说错的地方欢迎大家纠正, 本来后缀名是没有用的, 它并不影响文件内 存储的内容以及结构, 但是因为我们很多程序在打开文件时, 做了通过后缀名来判断应该对该文件名做何种操作, 所以后缀名就变得有用起来, 这里举个简单的例子, 假设你电脑
文件复制二进制版
weixin_34381687的博客
03-07 74
两种复制方式： FILE*src=fopen("src.txt","r"); FILE*dest=fopen("dest.txt","w"); Charbuf[1024]={0}; While(!feof(src)){ Size_tsize=fread(buf,1,sizeof(buf),src); Fwrite(buf,1,size,dest); } ...
复制二进制文件
神童i的博客
11-05 1206
用sublime打开二进制文件，然后全选复制到一个新文件中，即使给新文件执行权限，也不能执行。 使用diff命令可以看到两个文件是不同的。 因为使用文本编辑器打开时会对文件内容进行处理，比如换行符等 所以正确的方式应该是使用程序把文件内容拷贝过去。 #include <stdio.h> #include <sys/types.h> #include <sys/stat...
mysql的二进制文件与主从复制
庞凡 坚定自己踏实走好每一步
08-28 1925
1、用户授权 授权的意思：a中的mysql可以拿着一个密码去连接b中的mysql；mysql中授权成功就会在mysql.user表中添加一条记录 如果user表中的Host是%，那么代表所有人都可以连接 2、mysql中四种常用日志 1、mysql-slow.log        慢查询日志，当mysql中数据的查询超过10s，数据就会被存放在这个日志中。当我们在进行数据库调
MYSQL 主从复制（物理文件恢复版）
weixin_34292924的博客
10-22 127
1. 停掉主库和从库服务，备份主库INNODB数据文件(innodbdata),表文件(整个datadir目录)，日志文件(dblog) 2.压缩数据文件 tar-cfdata30.tardatadirdbloginnodbdata 3.删掉原来从库的ibdata1,表文件，日志文件 Rm-rfdatadir R...
mysql5.5 slave复制从指定位置开始
sharphero2003的专栏
06-11 715
mysql5.5 slave复制从binlog指定位置开始
MySQL学习(四)----MySQL的二进制文件和根据二进制文件实现主从复制
05-10 395
MySQL复制功能提供分担读负载 备库：分担读负载 高可用、灾难恢复、备份提供更多的选择 二进制日志 复制解决什么问题 实现在通天服务器的数据分布 利用二进制日志增量进行 不需要太多的带宽 但是使用基于行的复制在进行大批量的更改时 会对带宽带来一定的压力 特别是跨IDC环境下进行复制 解决什么问题 是现在不同服务器上的数据分布 实现数据读取的负载均衡 需要其他组件配合完成 利用DNS轮询的方式...
mysql binlogdump工具的base64编码
huyangyamin的专栏
12-10 621
命令格式 mysqldump -vv --base64-output=decode-rows binlog或者relaylog文件名字 base64编码 http://www.ruanyifeng.com/blog/2008/06/base64.html a）二个字节的情况：将这二个字节的一共16个二进制位，按照上面的规则，转成三组，最后一组除了前面加两个0以外，后面也要加两个0。这样得到一...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值