MyDumper引发服务不可用故障

最新推荐文章于 2021-02-01 17:42:16 发布
最新推荐文章于 2021-02-01 17:42:16 发布
阅读量884 收藏
点赞数
分类专栏： JAVA 文章标签： p.p1 {margin: 0.0px 0.0p
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/yingshuli_e/article/details/90674379
版权

MyDumper 多线程并行全量备份，以其无可比拟的性能优势广泛用于线上数据库的MySQL 备份，当然也可用于 percona db, tidb 等等。

mydumper 详细介绍请参考github地址

问题

在MySQL使用mydumper备份过程中, 发现如下图所示的问题
image

image

数据库报警导致主从复制延迟超出阈值引发报警, 业务数据表 (innodb)引擎无法执行insert.

原因

因为mydumper持有 FTWRL(FLUSH TABLES WITH READ LOCK), mydumper启动的时候导致业务方数据的所有读写都必须等待全局读锁释放.

解决

查看 mydumper-0.9.5 版本 源码

# line 153
最低0.47元/天 解锁文章
yingshuli_e
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
MYDUMPER源码阅读
lindeci87的博客
07-24 787
MyDumper源码阅读
大文件处理【java以及数据清洗相关】
wbzj1110的博客
09-14 4714
如果遇到数据清洗等问题，小规模数据，几GB以内的推荐，脚本速度快~~书写方便。 如果数据规模已经几百上千GB了。。。推荐直接高级语言吧。 lz最近讲几TB的数据从mysql拉出来（mydumper，但是一定要注意与dba协商好，mydumper的各种小坑较多），然后导入到我们自己的nosql里边，费了老大劲了。 提示：日志级别的sed awk是没有问题的。。。多了亲~~直接java java
CRITICAL **: Couldn't acquire global lock, snapshots will not be consistent: Access denied
weixin_33866037的博客
12-03 1129
报错如下：** (mydumper:56288): CRITICAL **: Couldn't acquire global lock, snapshots will not be consistent: Access denied; you need (at least one of) the RELOAD privilege(s) for this operation 解决办法：RDS...
TiDB数据库 mydumper命令导出数据报错：(mydumper:1908): CRITICAL **: Couldn't acquire global lock, snapshots will...
weixin_33860553的博客
11-16 738
今天想使用Tidb官方提供的mydumper来备份AWS上的RDS集群中mysql数据库的某个表，发现报错了 [tidb@:xxx /usr/local/tidb-tools]$sudo bin/mydumper -h xxx -u xxx -p xxx -P 3306 -t 4 -F 64 -B xxx -T xxx -o /data/test1/ ** (mydumper:1908):...
mysql mysqldump 备份锁表_MySQL xtrabackup/mydumper/mysqldump备份恢复及锁说明
weixin_33851180的博客
02-01 855
1.FLUSH TABLES WITH READ LOCK大多数的备份软件在备份过程中都会执行FTWRL, 这个语句会获取一个全局读锁，从而保证数据处于一致的状态。在大多数场景下，FTWRL获取读锁、unlock tables释放读锁的时间很短，所以通常热备份的锁在备份阶段是无感知的。然而，FTWRL获取读锁时，需要找到一个所有的事务及查询都结束的时间点，如果获取读锁时mysql实例上有长事务或长...
mysql中mydumper 和 mysqldump 对比使用
09-09
MySQL数据库备份工具有其自带的mysqldump,属于mysql官方的一款备份工具。但是第三方备份工具mydumper凭借优越的特点为更多人所使用。下面就通过测试验证它们之间的备份效率。
使用mydumper多线程备份MySQL数据库
09-10
MySQL在备份方面包含了自身的mysqldump工具，但其只支持单线程工作，这就使得它无法迅速的备份数据。而 mydumper作为一个实用工具，能够良好支持多线程工作，这使得它在处理速度方面十倍于传统的
mydumper：mydumper官方项目
02-22
整体上高效的代码） 易于管理输出（用于表的单独文件，转储元数据等，易于查看/解析数据） 一致性-维护所有线程的快照，提供准确的主从日志位置等可管理性-支持PCRE用于指定数据库和表的包含和排除如何安装mydumper ...
Mydumper的使用.pdf
04-17
包括前提环境的配置，软件的原理&安装&使用，实验截图
mydumper 安装报错处理
weixin_34266504的博客
10-31 470
mydumper 官网：https://launchpad.net/mydumper 下载之后，安装报错： [root@localhost local]# cd mydumper-0.6.2 [root@localhost mydumper-0.6.2]# [root@localhost mydumper-0.6.2]# ls binlog.c CMakeCache.txt co...
mysqldump和mydumer时间的比较
一条大河
09-20 1608
目标： 测试mydumper和mysqldump之间的性能；   环境： mysql 5.6.36     mydumper安装 yum install glib2-devel mysql-devel zlib-devel pcre-devel openssl-devel cmake wget https://launchpadlibrarian.net/225370879/myd...
mydumper
July
05-29 1516
文章目录mydumpermydumper 介绍`mydumper` 备份机制`mydumper` 备份原理示意图`mydumper` 备份过程mydumper 备份生成的文件类型metadatadb_name-schema-create.sqldb_name.tb_name-schema.sqldb_name.tb_name.sqlMydumper 安装安装依赖包编译安装检查版本mydumper...
4.mydumper备份
ciqingloveless的博客
10-23 1231
介绍 mydumper是一个逻辑备份工具，类似于mysqlpump。 mydumper比mysqldump具有以下优势： 并行性（速度快）和性能（避免昂贵的字符集转换例程并且整体上具有高效的代码）。 一致性。 它维护所有线程的快照，提供准确的主从日志位置，等等。 mysqlpump不保证一致性。 更容易管理输出（表和转储元数据的单独文件，并且很容易查看/解析数据）。 mysqlpump将所有内容...
mydumper备份数据库详解（已详细说明）
weixin_33751566的博客
03-18 1797
mydumper是针对mysql数据库备份的一个轻量级第三方的开源工具，备份方式为逻辑备份。它支持多线程，备份速度远高于原生态的mysqldump以及众多优异特性。因此该工具是DBA们的不二选择。本文主要描述该工具的使用方法并给出示例。 有关mydumper安装参考：mydumper安装及安装故障汇总 1、mydumper的特点...
linux安装mydumper软件包以及报错解决
weixin_33871366的博客
11-16 369
今天使用mydumper命令从AWS上的RDS集群MYSQL数据库导出数据，发现Tidb官方提供的工具不太适合，所以就自己编译了一个来尝试一下，居然成功了。 首先我的系统是Centos7,并且已经安装过gcc等编译器。 1、需要安装依赖包：yum install -y glib2-devel* mysql-devel* zlib-devel* pcre-devel* openssl-devel...
mysql逻辑备份利器-mydumper
cucao1980的博客
06-14 289
下载： Mydumper官网：http://www.mydumper.org/ githup：https://github.com/maxbube/my...
mydumper安装
最新发布
07-27
要安装mydumper，首先确保你的系统上已经安装了MySQL客户端和CMake。然后按照以下步骤进行安装： ...你可以使用mydumper来备份和恢复MySQL数据库。记得在使用之前，确保你已经配置好了正确的数据库连接信息。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值