MySQL5.7多线程复制故障成因及解决方案

最新推荐文章于 2023-11-30 15:03:28 发布
最新推荐文章于 2023-11-30 15:03:28 发布
阅读量3k 收藏
点赞数
分类专栏： 数据库学习记录
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/nnsword/article/details/80897842
版权
本文探讨了MySQL5.7多线程复制过程中遇到的错误，主要集中在slave_pending_jobs_size_max参数。当该参数设置不当，可能导致复制事件队列溢出或阻塞。文中详细分析了两种报错情况，并提供了调整该参数以优化复制性能的建议。
摘要由CSDN通过智能技术生成

报错有以下两种情况

  • 第一种
Last_Error: Cannot schedule event Rows_query, relay-log name ./db-s18-relay-bin.000448, position 419156572 to Worker thread because its size 18483519 exceeds 16777216 of slave_pending_jobs_size_max.
  • 第二种
[Note] Multi-threaded slave: Coordinator has waited 701 times hitting slave_pending_jobs_size_max; current
最低0.47元/天 解锁文章
nnsword
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
mysql5.7开启多线程复制_MySQL5.7多线程复制故障及解决方案
weixin_33745006的博客
01-20 540
虽然mysql log 显示note，但还是要弄明白.查了一些资料，初步判断问题可能在 slave_pending_jobs_size_max 的大小上，此值，官方默认是 16M，此值可以动态调整在多线程复制时，在队列中Pending的事件所占用的最大内存，默认为16M，如果内存富余，或者延迟较大时，可以适当调大;注意这个值要比主库的max_allowed_packet大2020-01-10T07...
mysql 多线程复制_如何解决MySQL多线程复制遇到Error_code: 1872
weixin_42440389的博客
02-27 126
MySQL多线程复制遇到Error_code: 1872的解决方案上周在生产环境上遇到一个问题，不敢独享，拿出来给小伙伴们做个简单的分享。起因 ：由于IDC机房断电(估计又是哪里被挖掘机碰了下吧)，导致所有服务器重启，影响到了其中的MySQL数据库。来看下这时数据库遇到的问题：数据库版本 ：MySQL 5.7.10问题表现：从机复制报如下错误：Slave SQL for channel ”: Sl...
slave_pending_jobs_size_max mysql多线程故障
hxiang613的专栏
08-05 642
MySQL多线程复制故障(slave_pending_jobs_size_max) 时间：2016年05月24日| 分类：MySQL故障|评论：0 条| 浏览：8,799 次 最近，经常遇到mysql多线程复制故障的问题，报错有以下几种： 第一种： Last_Error: Cannot schedule event Rows_query, relay-log name ./db-s...
读书笔记：MySQL Replication复制故障排除
蛙鳜鸡鹳狸猿
09-22 809
一、master上的问题 　　MySQL复制出现问题经常是由于意外操作或者配置的改变引起的。replication出现故障时大多数原因一般都出现在slave上面。但是在诊断时，还是应该同时检查master和slave。 1.master上二进制日志损坏 　　服务器崩溃或者磁盘损坏等导致的master上二进制日志损坏，将导致slave无法执行，常常出现“不能解析中继日志事件”的错误。
MGR 问题处理
chenglong411的博客
06-06 607
将my.cnf中的参数group_replication_group_seeds设置为只包含除自身外其他group成员的ip地址以及内部通信端口，如果写成group所有成员的IP地址则会出现这个错误，这和相同网段的MGR部署方式有些差异。解决方案：有些成员有组内其它成员没有的事务，set global group_replication_allow_local_disjoint_gtids_join=ON;解决方法：配置group_replication_ip_whitelist。
mysql多线程复制crash_MySQL 并行复制(MTS) 从库发生异常crash分析
weixin_36329818的博客
01-19 160
[toc]背景半同步复制从库在晚上凌晨2点半发生异常crash，另一个异步复制从库在第二天凌晨3点也发生了异常crash。版本mysql 5.7.16 redhat 6.8 mysql> show variables like '%slave_para%'; +------------------------+---------------+ | Variable_name | Value ...
mysql 5.7 gtid 主从_MySQL 5.7基于GTID的主从复制实践
weixin_31546795的博客
01-19 207
原标题：MySQL 5.7基于GTID的主从复制实践在 「」 一文中我们讲解了 MySQL 5.7 新特性多源复制的实现方法。今天我们来讲讲 MySQL 5.7 的另一个新特性基于 GTID 的主从复制实现。什么是GTID Replication从 MySQL 5.6.5 开始新增了一种基于 GTID 的复制方式。通过 GTID 保证了每个在主库上提交的事务在集群中有一个唯一的ID。这种方式强化了...
MySQL 5.7-OCP-题库最终版
10-16
这些知识点主要围绕MySQL 5.7、OCP认证（Oracle Certified Professional）以及与数据库管理和优化相关的具体技术细节。 ### 1. 创建一致性的备份 **问题**: 在一个完全使用InnoDB表的MySQL数据库中，您计划通过`...
【Mysql】Mysql 5.7半同步复制技术
AloneYueCSDN
03-26 764
文章目录一、复制架构衍生史二、半同步复制技术1.半同步复制具体特性：2.半同步复制潜在问题：三、MySQL 5.6半同步复制配置四、MySQL 5.7半同步复制的改进 原文链接 一、复制架构衍生史 在谈这个特性之前，我们先来看看MySQL的复制架构衍生史。 在2000年，MySQL 3.23.15版本引入了Replication。Replication作为一种准实时同步方式，得到广泛应用。这个时候的Replicaton的实现涉及到两个线程，一个在Master，一个在Slave。Slave的I/O和SQL功能
MySQL OCP5.7考试题目大全.docx
12-05
MySQL 5.7 OCP 考试涉及的是一系列关于数据库管理、备份与恢复、复制及InnoDB存储引擎的问题。以下是对这些题目所涵盖知识点的详细解释： **问题1**： 在配置了如下参数的MySQL数据库（log-bin, server-id=1）中，...
mysql 5.7多线程复制的测试
敖尔其楞的专栏
10-26 1501
在主库上执行大量的吸入操作，模拟延时,因为之前的基准测试，导致从库出现长时间的复制延时，在执行stop slave的时候没有响应。 Master_SSL_Key: Seconds_Behind_Master: 85719 mysql> set global slave_parallel_type=logical_clock; ERROR 3017 (HY000
mysql数据库迁移问题_记一次Mysql 数据库迁移后报错问题
weixin_39835117的博客
01-19 292
现象说明：老数据库版本是5.6,新库版本5.7，数据量不大，备份恢复数据均正常，配置主从使用gtid复制后也是正常的，第二天查看新库的时候，发现新库复制出现问题，报错如下:2019-10-10T10:15:27.541697+08:00 4256 [Warning] Master server does not support semi-sync, fallback to asynchronous...
数据库学习日常案例20231130-2-MGR故障总结处理1-13
最新发布
oradbm的博客
11-30 397
MGR集群故障，大多数处于offline状态，如三个节点中2个或3个节点处于offline状态，集群不可用故障修复：1 三个MySQL节点依次执行如下命令，停止组复制 stop group_replication;2 然后依次启动每个节点的组复制# 第一个节点执行如下：# 后面两个节点再依次启动组复制# 查看组复制状态。
MGR单主（Single-Primary）模式部署
ggz 的博客
06-17 719
文章目录MGR单主（Single-Primary）模式部署1、创建复制账号2、修改配置参数3、主节点配置4、在主节点启动组复制并查看日志。5、在主节点通过视图查看现在的集群状态6、在主节点关闭 group_replication_bootstrap_group7、配置从节点8、在两个节点启动组复制9、如何找出 Primary 成员10、常见报错11集群故障 MGR单主（Single-Primary）模式部署 1、创建复制账号 ​ 在每一个MySQL节点创建复制使用账号 set sql_log_bin=0;
mysql从库并行_MySQL教程之MySQL 并行复制(MTS) 从库发生自动重启分
weixin_36163672的博客
02-07 271
目录背景版本分析测试结论背景半同步复制从库在晚上凌晨2点半发生自动重启，另一个异步复制从库在第二天凌晨3点也发生了自动重启。版本mysql 5.7.16redhat 6.8mysql> show variables like '%slave_para%';+------------------------+---------------+| Variable_name | Value |+-...
mysql从库并行,MySQL 并行复制从库发生自动重启分析
weixin_32770687的博客
03-17 224
并行复制从库发生自动重启分析背景半同步复制从库在晚上凌晨2点半发生自动重启，另一个异步复制从库在第二天凌晨3点也发生了自动重启。分析版本mysql 5.7.16mysql> show variables like '%slave_para%';+------------------------+---------------+| Variable_name | Value |+-------...
迁移mysql数据库报错_记一次Mysql 数据库迁移后报错问题
weixin_31211457的博客
01-27 2868
记一次Mysql 数据库迁移后报错问题发布时间：2020-07-21 11:40:28来源：51CTO阅读：291作者：spark_Gg现象说明：老数据库版本是5.6,新库版本5.7，数据量不大，备份恢复数据均正常，配置主从使用gtid复制后也是正常的，第二天查看新库的时候，发现新库复制出现问题，报错如下:2019-10-10T10:15:27.541697+08:00 4256 [Warning...
slave-pending-jobs-size-max导致主从延迟
雪辉博客
05-11 648
2022-05-11T20:30:50.601521+08:00 118 [Note] Multi-threaded slave: Coordinator has waited 57731 times hitting slave_pending_jobs_size_max; current event size = 8192.   在多线程复制时，在队列中Pending的事件所占用的最大内存，默认为16M，如果内存富余，或者延迟较大时，可以适当调大;注意这个值要比主库的max_allowed_packet
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值