多进程并发mysqldump数据库导入工具

本代码详情及用法已上传到Github上:https://github.com/edisonwong520/mysqldump_multi
如果觉得有用的,欢迎Star收藏,感谢~
本人菜鸟一名,闲来无事写来玩玩,有问题请多多指教~
Github个人主页 主页上还有别的一些小工具~



1. 原理

自定义进程数
根据进程数把要导入的sql文件分块,并且对sql文件大小进行排序,打乱,借此尽可能实现每个进程要处理相同任务量
执行任务,如有导入异常,重新导入,超过5次失败录入到error文件并退出导入

2. 使用说明

安装基于python 3.6 开发,linux环境。需要安装 MySQLdb 库。
nohup python mysqldump_multi 40 /export/backup/dapbackup_not_del/10_127_160_166/ >>/export/scripts/edison/nohup.out &

3. 优势

能把io或cpu跑100%

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值