MySQL主从复制高级进阶day13

主从复制-高级进阶

1.延时从库

1.1作用

处理逻辑损坏 比如drop database之类的操作

2.过滤复制

3.GTID复制

4.半同步复制(了解)

SQL线程延时:数据已经写入relaylog中了,SQL线程"慢点"运行
一般企业建议3-6小时,具体看公司运维人员对于故障的反应时间

mysql>stop slave;
mysql>CHANGE MASTER TO MASTER_DELAY = 300;
mysql>start slave;
mysql> show slave status \G
SQL_Delay: 300
SQL_Remaining_Delay: NULL

1.3 怎么处理逻辑损坏,恢复数据思路

drop 操作；
(1)感知到故障。
(2)停相关业务,挂维护页。
(3)停延时从库SQL线程。
(4)手工模拟SQL线程恢复后续的relaylog
起点:relaylog。info
终点:drop
(5)直接接触从库替代主库工作
或者，导出故障数据库，倒回到生产。

1.4 演练

(1)模拟数据

(2)create database   help charset utf8mb4;
use help;
create table t1 (id int);
insert into t1 values(1);
insert into t1 values(11);
insert into t1 values(1111);
insert into t1 values(1111);
insert into t1 values(11111);

(2)模拟误操作

drop database help;

(3)停从库线程

stop slave;

(4)截取relaylog日志
起点:

mysql> show slave status \G
Relay_Log_File: db01-relay-bin.000002
Relay_Log_Pos: 473

终点:

show  relaylog events in 'db01-relay-bin.00000';
db01-relay-bin.000002 | 2143 | Query          |         7 |        2359 | drop database help

mysqlbinlog --start-position=473 --stop-position=2143 /data/3308/data/db01-relay-bin.000002 >/tmp/relay1.sql

(5)恢复数据

source /tmp/relay1.sql

mysql> show tables;
+----------------+
| Tables_in_help |
+----------------+
| t1             |
+----------------+
1 row in set (0.01 sec)

mysql> 
mysql> select * from t1;
+-------+
| id    |
+-------+
|     1 |
|    11 |
|  1111 |
|  1111 |
| 11111 |
+-------+
5 rows in set (0.01 sec)

mysql>

2.过滤复制

2.1 主库方面实现

binlog_do_db 白名单
binlog_ingore_db 黑名单

2.2从库参数

Replicate_Do_DB: *****
Replicate_Ignore_DB: *****

Replicate_Do_Table:
Replicate_Ignore_Table:

Replicate_Wild_Do_Table:
Replicate_Wild_Ignore_Table:

2.3过滤复制实现

例子:只复制help库的数据

vim /data/3308/my.cnf
然后加入一行
replicate_do_db=help

保存退出重启数据库即可。

2.4测试

在主库创建一个help数据库 然后从库也会出现一个help库

mysql> create database help;
Query OK, 1 row affected (0.00 sec)

在主库创建一个help1数据库,从库没有创建,证明配置已经生效。

3. GTID引入

3.1 GTID介绍

GTID(Global Transaction ID)是对于一个已提交事务的唯一编号，并且是一个全局(主从复制)唯一的编号。
它的官方定义如下：
GTID = source_id ：transaction_id
7E11FA47-31CA-19E1-9E56-C43AA21293967:29
什么是sever_uuid，和Server-id 区别？
核心特性: 全局唯一,具备幂等性

3.2 GTID核心参数

重要参数：

gtid-mode=on
enforce-gtid-consistency=true
log-slave-updates=1

gtid-mode=on                        --启用gtid类型，否则就是普通的复制架构
enforce-gtid-consistency=true               --强制GTID的一致性
log-slave-updates=1                 --slave更新是否记入日志

4.配置

克隆两台虚拟机 db02 id 10.0.0.52
db03 id 10.0.0.53

修改一下hosts解析文件。

4.1 GTID核心参数

重要参数：

gtid-mode=on
enforce-gtid-consistency=true
log-slave-updates=1

gtid-mode=on                        --启用gtid类型，否则就是普通的复制架构
enforce-gtid-consistency=true       --强制GTID的一致性
log-slave-updates=1                 --slave更新是否记入日志

4.2 GTID复制配置过程

4.2.1 清理环境

pkill mysqld
rm -rf /data/mysql/data/*
rm -rf /data/binlog/*

mkdir -p /data/mysql/data
chown -R mysql.mysql /data/*
4.2.2 准备配置文件

# 主库db01：
cat > /etc/my.cnf <<EOF
[mysqld]
basedir=/application/mysql/
datadir=/data/mysql/data
socket=/tmp/mysql.sock
server_id=51
port=3306
secure-file-priv=/tmp
autocommit=0
log_bin=/data/binlog/mysql-bin
binlog_format=row
gtid-mode=on
enforce-gtid-consistency=true
log-slave-updates=1
[mysql]
prompt=db01 [\\d]>
EOF

slave1(db02)：

cat > /etc/my.cnf <<EOF
[mysqld]
basedir=/application/mysql
datadir=/data/mysql/data
socket=/tmp/mysql.sock
server_id=52
port=3306
secure-file-priv=/tmp
autocommit=0
log_bin=/data/binlog/mysql-bin
binlog_format=row
gtid-mode=on
enforce-gtid-consistency=true
log-slave-updates=1
[mysql]
prompt=db02 [\\d]>
EOF

slave2(db03)：

cat > /etc/my.cnf <<EOF
[mysqld]
basedir=/application/mysql
datadir=/data/mysql/data
socket=/tmp/mysql.sock
server_id=53
port=3306
secure-file-priv=/tmp
autocommit=0
log_bin=/data/binlog/mysql-bin
binlog_format=row
gtid-mode=on
enforce-gtid-consistency=true
log-slave-updates=1
[mysql]
prompt=db03 [\\d]>
EOF

4.2.3 初始化数据

mkdir -p /data/mysql/data 
chown -R mysql.mysql /data/*
mysqld --initialize-insecure --user=mysql --basedir=/application/mysql  --datadir=/data/mysql/data  

4.2.4 启动数据库

/etc/init.d/mysqld start

4.2.5 构建主从：

master:51
slave:52,53
# 51:
mysql -e "grant replication slave  on *.* to repl@'10.0.0.%' identified by '123';"

52\53:
mysql -e "change master to master_host='10.0.0.51',master_user='repl',master_password='123' ,MASTER_AUTO_POSITION=1;"
mysql -e  "start slave;"
[root@db02 ~]# mysql -e  "show slave status \G"|grep "Running:"

4.3 GTID 复制和普通复制的区别

CHANGE MASTER TO
MASTER_HOST='10.0.0.51',
MASTER_USER='repl',
MASTER_PASSWORD='123',
MASTER_PORT=3307,
MASTER_LOG_FILE='mysql-bin.000001',
MASTER_LOG_POS=444,
MASTER_CONNECT_RETRY=10;

change master to
master_host='10.0.0.51',
master_user='repl',
master_password='123' ,
MASTER_AUTO_POSITION=1;
start slave;