如何使用从节点A恢复损坏的从节点B

如何使用从节点A恢复损坏的从节点B

• 问题描述

  在mysql主从中，如果一个从节点损坏掉，或者主从不一致了太多，在无法修复的情况下，需要使用主节点进行恢复。

  之前的方案是flush tables with read lock；此操作非常耗时，而且需要全库加锁，不支持工作时间进行操作。

• 优化方案

使用xtrabackup备份，xtrabackup备份后，在xtrabackup_binlog_info中记录备份到哪个binlog以及pos位置，这两个信息恰好是我们要重置从节点同步时的关键信息。

• 操作步骤

1. 使用主节点恢复方案

   1）主节点上全量备份数据库，执行 xtrabackup --backup --user=root --password=egova --port=3306 --target-dir=/egova/backup/db/full_20180925 

   2）主节点上，使用scp将/egova/backup/db/full_20180925 复制到从节点服务器 scp /egova/backup/db/full_20180925/* root@192.168.101.102:/egova/backup/db/full/

   3) 连接从节点服务器，使用xtrabackup恢复数据库

      xtrabackup --prepare --apply-log-only --target-dir=/egova/backup/db/full/

      xtrabackup --copy-back --target-dir=./full_20180925/

      chown -R mysql:mysql /nbzhcg/mysql/mysqldb

      service mysql start 

      注：恢复前，请先备份原有data目录 mv /egova/db /egova/dbback

      注2：启动失败时请先检查/egova/db/auto.sql是否存在

      注3：1) 和 3）的操作步骤可以使用最新一键部署脚本中的备份数据库和还原数据库来实现。

   4）修复从节点的master info 。根据/egova/backup/db/full/xtrabackup_binlog_info 可知备份时，主库当前位置

    

   

   mysql -A -uroot -pegova;

   mysql>change master to master_host='10.68.128.2',master_port=3306,master_user='root',master_password='egova',master_log_file='mysql-bin.000026',master_log_pos=243;

   mysql>start slave;

2. 使用从节点A恢复其他节点B

   1）从节点A上，先暂停同步

      mysql > stop slave;

   2）记录从节点A当前同步位置：

     mysql > show slave status\G

   我们需要记录的就是mysql-bin.000538以及pos位置：618609840

   

   3）从节点A使用xtrabackup备份

    xtrabackup --backup --user=root --password=egova --port=3306 --target-dir=/egova/backup/db/full_20180925 

   4) 在节点A服务器上，使用scp将/egova/backup/db/full_20180925 复制到从节点B服务器 scp /egova/backup/db/full_20180925/* root@192.168.101.102:/egova/backup/db/full/

      5) 连接从节点B服务器，使用xtrabackup恢复数据库

           xtrabackup --prepare --apply-log-only --target-dir=/egova/backup/db/full/

           xtrabackup --copy-back --target-dir=./full_20180925/

           chown -R mysql:mysql /nbzhcg/mysql/mysqldb

           service mysql start 

           注：恢复前，请先备份原有data目录 mv /egova/db /egova/dbback

           注2：启动失败时请先检查/egova/db/auto.sql是否存在

           注3：3) 和5）的操作步骤可以使用最新一键部署脚本中的备份数据库和还原数据库来实现。

        6）使用步骤2）中记录的位置，恢复从节点B的主从信息   

            mysql>change master to master_host='10.68.128.2',master_port=3306,master_user='root',master_password='egova',master_log_file='mysql-bin.000538',master_log_pos=618609840;

            mysql>start slave;

       此后即可自动同步，观察Seconds_Behind_Master可发现时间逐步减少，直至为0时，将其恢复到mysql-proxy的配置中即可