巧设slave_exec_mode参数的解决主从同步失败你会了吗？

点击上方蓝字“数据库干货铺” 解锁更多精彩内容

从库异常中断的情况不在少数，其中报错信息中1032及1062的错误占了不少的比重

错误1032指的是从库中找不到对应行的记录

错误1062指的是主键冲突

遇到此报错时，大多DBA会使用如下方法进行处理。

（视频内容来自于腾讯视频，喜欢NBA甜瓜安东尼的别看哭了）

01

  手动处理

 

方法一：找出引起异常的数据然后手动在从库处理后重启SQL线程继续观察；

根据报错的信息，通过mysqlbinlog解析binlog日志，找到对应的数据，然后查看从库是否缺失数据或者已存在对应主键的数据，然后手动在从库处理对应记录的数据。处理完毕后再次开启同步。

但是，后续还得观察是否再次出现错误

方法二：手动跳过1个或更多个事务，然后继续观察。

/* 传统点位模式复制 */
SQL>set global sql_slave_skip_counter=1;
SQL>start sql_thread;


/* GTID模式复制 */
SQL>set gtid_next='e29d3917-9dbb-11e9-8b64-e4434b6e2c80:11103335-16054791';
SQL>begin;commit;
SQL>set gtid_next='AUTOMATIC';

注意,手动跳过事务的方式存在一个很大的缺点：1个事务中存在多个sql,用此方式，本事务中的其他SQL也会被跳过（具体的和binlog-format有关，对于当前常用的ROW格式均有影响）。

02

  持续跳过报错

 

但是，如果一直报错，但是，这些报错又可以忽略可以怎么处理，此时也有很多方法，通常使用的是如下几种：

方法一：  使用pt-slave-restart工具跳过对应错误

但是使用pt-slave-restart工具跳过报错时，必须关闭多线程复制，因为工具分不清到底哪个线程复制出了问题，然后会报类似如下的报错：

Cannot skip transactions properly because GTID is enabled and slave_parallel_workers > 0. 
 See 'GLOBAL TRANSACTION IDS' in the tool's documentation

处理步骤为:

/*  暂停并行复制  */
SQL> set global slave_parallel_workers=0;


/*  使用pt-slave-restart工具跳过错误（填写错误号）*/
pt-slave-restart  --user=root --password='Admin@123' --socket=/data/mysql3306/tmp/mysql.sock  --error-numbers=1062


/* 不再报错时，再开启并行复制 */
mysql> set global slave_parallel_workers=8;

方法二：  在配置文件里配置跳过指定错误

在配置文件[mysqld]项里加入参数slave-skip-errors

slave-skip-errors=1032,1062

但是，此方法存在一个致命缺点：该参数是静态参数，无法动态修改，需要修改配置文件后重启数据库方可生效。

03

  幂等模式

 

因为手动跳过事务时，会忽略相同事务下的其他正常的SQL在从库的应用；pt-slave-restart工具需要停止多线程复制，影响从库应用速度；配置slave-skip-errors又需要重启数据库方可生效。那么有没有一种方式既不会跳过多余的SQL，又无需重启数据库也不影响从库应用SQL的速度呢？答案是有的，也就是将slave_exec_mode参数设置为IDEMPOTENT，即幂等模式（默认为严格模式STRICT）。

/*  在线动态修改 */
SQL > set global slave_exec_mode='IDEMPOTENT';

改为幂等模式后，可以忽略1032及1062的错误，对同一事务内的其他SQL无影响，依旧能正常执行。

 

04

  结语

 

本文中没有举具体案例进行实战演示，不过建议大家还是自行搭建环境进行场景复现的演示（在从库先插入部分数据或先更新部分数据），然后再在主库执行，即可出现1062或1032的错误。

很多初学者或实战经验不足的同学可能不知道该参数，因此，更加建议在多种场景下测试。

另外，要定期比对主从数据是否存在差异，及时处理不一致情况。

如想和更多的数据库技术爱好者及时交流，可以关注公众号：数据库干货铺  回复“加群”，进入技术交流群进行沟通。

往期精彩回顾

1.  升级python，就是这么简单

2.  mysql8.0新增用户及加密规则修改的那些事

3.  比hive快10倍的大数据查询利器-- presto

4.  监控利器出鞘：Prometheus+Grafana监控MySQL、Redis数据库

5.  PostgreSQL主从复制--物理复制

6.  MySQL传统点位复制在线转为GTID模式复制

7.  MySQL敏感数据加密及解密

8.  MySQL数据备份及还原（一）

9.  MySQL数据备份及还原（二）

扫

码

关

注