mongodb中mongodump 使用 --oplog 参数备份非常的慢

最新推荐文章于 2024-04-15 09:44:30 发布
最新推荐文章于 2024-04-15 09:44:30 发布
阅读量5.2k 收藏 2
点赞数
分类专栏： mongodb日常经验
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Brighter_Xiao/article/details/79533891
版权

mongodb中mongodump 使用 –oplog 参数备份非常的慢

问题表现：最近生产环境突然收到 IO 使用率100%跟的报警
登上服务器产看io状态
iostat -x -m 1
%util 的值一直是 100%，await， 达到 60 以上，
top 查看，负载居然达到47以上，通过进程 id 找到相应的 进程，发现居然是 3个 mongodb 备份进程把磁盘io占用完了，
备份进程如下：

  /usr/local/mongodb3.0.15/bin/mongodump -h 192.168.201.129:28010  --oplog -o /data/backup/mongo_dbbackup/pktest/20180226174241/pktest >/
最低0.47元/天 解锁文章
Brighter_Xiao
关注
  • 0
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
mongodb-async-driver-2.0.1 jar包
07-28
mongodb-async-driver-2.0.1 jar包
第48章：MongoDB-备份和恢复
weixin_30485291的博客
03-26 100
①文件系统快照（snapshot） 生成文件系统快照这个方法需要满足两个条件： 1：文件系统本身支持快照技术 2：运行mongod时必须开启日记系统 其恢复就是快照的恢复，当然，恢复的时候，确保mongod没有开启 ②复制文件系统 冷备份：就是把mongod停了，然后拷贝相应的数据文件，最好是把一个数据库相应的数据文件夹完整的拷出，然后恢复...
MongoDB 手动备份(mongodump)与恢复(mongorestore)，好文推荐
最新发布
2401_84254296的博客
04-15 740
备份的数据存放位置，例如：c:\data\dump，当然该目录需要提前建立，在备份完成后，系统自动在dump目录下建立一个test目录，这个目录里面存放该数据库实例的备份数据。执行以上命令后，客户端会连接到ip为 127.0.0.1 端口号为 27017 的MongoDB服务上，并备份所有数据到 bin/dump/ 目录中。在本地使用 27017 启动你的mongod服务。需要恢复的数据库实例，例如：test，当然这个名称也可以和备份时候的不一样，比如test2。需要备份的数据库实例，例如：test。
[数据库]MongoDB备份以及还原（全量+增量）
yyq2272的博客
12-21 843
[数据库]MongoDB备份以及还原（全量+增量）
[mongo]监控+备份与恢复
weixin_38805083的博客
08-01 241
假设全量备份已经恢复到数据库中（无论使用快照、mongodump 或复制数据文件的方式），要重放一部分增量怎么办。使用 bsondump 查看导出的 oplog，找到需要截止的时间点。导出主节点上的 oplog。
Mongodb的数据备份与删除
Michael的专栏
12-31 1581
Mongodb的数据备份 对于数据备份官方文档给出了3种方案：1、通过操作系统自带的文件系统进行snapshot备份；2、通过dump；3、通过export。第三种我并不建议，因为很慢。第一种没有尝试过，看起来挺复杂；第二种用的较多。通常使用dump按照时间一段段导出数据，否则数据量大的话dump会卡死。 Mongodb的数据删除 从2.2版本开始，提供了ttl索引自动数据删除的功能
MongoDB数据库备份（mongodump）以及恢复（mongorestore）工具实践
热门推荐
larance的挨踢生活
08-30 1万+
mongodump备份工具。
mongodb数据库的快速备份与恢复
qq_41838831的博客
08-25 533
mongodb的数据库的数据库备份与恢复 近期在工作中遇到要使用mongodb的场景，需要将mongodb的数据库的数据进行备份在恢复，现将使用其记录下来，以免后期遗忘； 数据库的备份mongodump 语法： mongodump -h dbhost -d dbname -o dbdirectory 参数说明： -h ，指明需要备份数据库的地址，例如：127.0.0.1，当然也可以加上数据库的端口。 127.0.0.1:27017； -d，指明需要备份的数据库名称； -c，指明需要备份的数据库中的数据表
使用mongodump和mongorestore备份与恢复Mongodb数据
a13568hki的博客
07-12 3175
mongodump仅备份数据库中的文档，不备份索引，所以我们还原后，需要重新生成索引。说明：当前环境的mongodb服务是采用容器部署的，这里的/data/backup是指容器中的备份目录，备份文件会存放在这个目录下，你也可以将容器中的/data/backup目录映射为当前宿主机上的某一目录。mongodump是MongoDB官方提供的备份工具,它可以从MongoDB数据库读取数据,并生成BSON文件,mongodump适合用于备份和恢复数据量较小的MongoDB数据库, 不适用于大数据量备份。
Oracle数据泵备份慢,expdp备份缓慢问题分析
weixin_39888049的博客
04-06 363
--导出问题分析--两个时间语句分析，该语句只导出4,059,292 数据，10分钟后数据没有继续导出Snap Id Snap Time Sessions Cursors/SessionBegin Snap: 39396 13-Jul-14 18:30:32 558 1.7End Snap: 39407 13-Jul-14 20:20:07 556 1.7Elapsed...
mongodb 导入导出
似水流年
09-14 511
简介 mongodb提供了mongoexport/mongoimport以支持将数据表进行导入导出。 导入导出命令一般用于特殊的数据处理用途，由于不包含索引处理，且json格式无法支持所有bson类型，因此不适合用于重要数据的备份恢复。 参考文档 https://docs.mongodb.com/manual/reference/program/mongoimport/https://docs.mongodb.com/manual/reference/program/mongoexport/ mon
mongodb增量/全量备份脚本的实现详解
09-09
在MongoDB中，可以通过`mongodump`命令来执行全量备份。例如，以下命令将在当前目录下创建一个备份： ```bash mongodump --host <hostname> --port <port> --username <username> --password <password> --db ...
Mongodb数据库的备份与恢复操作实例
09-10
**注意**：从MongoDB 2.2版本开始，`mongodump`生成的数据格式与旧版本不兼容，因此不应使用新版本的`mongodump`备份旧版本的数据。 ### 恢复操作 要恢复使用`mongodump`备份的数据，你需要使用`mongorestore`工具...
mongodb增量备份脚本的实现和原理详解
09-09
5. **恢复过程**：当需要恢复数据时，先恢复全量备份，然后按照时间顺序应用增量备份中的 Oplog 记录，这可以通过 `mongorestore` 工具的 `--oplogReplay` 参数实现。 在实际编写备份脚本时，需要考虑到一些细节...
mongodb备份与恢复.doc
06-12
使用mongodump备份比较慢，在备份复制集时还有些问题，但是，用来备份单个数据库、集合、子集合还是比较好的方法。mongodump命令的选项包括：--help、-v、--version、-h、--port、--ipv6、-u、-p、--...
mongodb 的使用.docx
09-12
除此之外，MongoDB 还支持使用 oplog 进行增量备份和跨数据中心复制，以实现更高级别的高可用性和灾难恢复策略。 总结，MongoDB 是一个功能强大的 NoSQL 数据库，其易于安装、管理用户权限和数据操作的特性使其成为...
mongodb导入数据变得很慢，解决办法
qq_40724463的博客
06-16 1万+
我是mongodb小白，学习过程中遇到了一个棘手的问题，向mongos中导入大约1G的数据，变得越来越慢，甚至进度条一直不走了(之前也插入过1G数据，没遇到这种情况)。自己摸索了好久，终于解决。解决方法，与大家分享 开始我以为是不是数据处理的时候出了问题，然后我又将需要导入的数据重新预处理，之后操作，还是不行，也是上述情况。 之后我又以为是mongodb集群崩了，重新搭建复制集+分片，再导入数据...
MongoDB中oplog详解
cxs_123的博客
04-13 2338
oplog简介 oplog 是 local 库下的一个固定集合（local.oplog.$main），Secondary 就是通过查看 Primary 的 oplog 这个集合来进行复制的。每个节点都有 oplog，记录着从主节点复制过来的信息，这样每个成员都可以作为同步源给其它节点。 oplog的数据结构 { ts : ..., op: ..., ns: ..., o: ... o2: ... } 上面就是一条 oplog 信息，复制机制就是通过这些信息来进行节点间的数据同步并维护数据一..
mongodb 数据库备份不成功的问题
fangzy0112的专栏
02-21 4185
Mongodb自带了mongodump和mongorestore这两个工具来实现对数据的备份和恢复。 mongodump能够在Mongodb运行时进行备份，它的工作原理是对运行的Mongodb做查询，然后将所有查到的文档写入磁盘 mongodump用法： [root@localhost mongodb]# ./bin/mongodump --help   Expor
php mongodb lookup,mongodb-在$lookup管道中使用$match$进行聚合
05-25
在 MongoDB 中使用 $lookup 管道与 $match 管道进行聚合操作，可以实现多个集合的数据关联和筛选。下面是一个使用 $lookup 和 $match 管道进行聚合的示例： 假设我们有两个集合：orders 和 customers，其中 orders ...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值