开源MySQL多线程逻辑导入工具myloader原理与改进
在上一篇中,介绍了多线程备份工具mydumper的实现及网易对其所做的优化,本篇聊聊与mydumper配合使用的myloader工具。
myloader是MySQL领域少有的多线程的恢复工具,为了能够更好的理解其如何进行工作,有必要对mydumper所生成的备份结果进行简单介绍,下图即为mydumper 0.9.1版本所输出的备份目录结构:
rds-user@import-blogbench-test:~$ ls mydumper-data/
dumpdb.dumptable.00000.sql
dumpdb.dumptable-schema.sql
dumpdb-schema-post.sql
dumpdb.dumptable.00001.sql
dumpdb.dumptable-schema-triggers.sql
metadata
dumpdb.dumptable.00002.sql
dumpdb.dumptable-schema-view.sql
dumpdb.dumptable.00003.sql dumpdb-schema-create.sql
metadata保存一致性数据导出时的BinLog信息和导出开始和结束时间,形如:
Started dump at: 2016-03-20 21:18:54
SHOW MASTER STATUS: Log: mysql-bin.000027 Pos: 350229576
Finished dump at: 2016-03-20 21:19:04
dumpdb和dumptable分别表示导出的数据库和表的名称;
dumpdb-schem