XBK的应用
安装依赖包:
wget -O /etc/yum.repos.d/epel.repo http://mirrors.aliyun.com/repo/epel-7.repo
yum -y install perl perl-devel libaio libaio-devel perl-Time-HiRes perl-DBD-MySQL libev
下载软件并安装
wget https://www.percona.com/downloads/XtraBackup/Percona-XtraBackup-2.4.12/binary/redhat/7/x86_64/percona-xtrabackup-24-2.4.12-1.el7.x86_64.rpm
yum -y install percona-xtrabackup-24-2.4.4-1.el7.x86_64.rpm
备份命令介绍:
xtrabackup
innobackupex
备份方式——物理备份
(1)对于非Innodb表(比如 myisam)是,锁表cp数据文件,属于一种温备份。
(2)对于Innodb的表(支持事务的),不锁表,拷贝数据页,最终以数据文件的方式保存下来,
把一部分redo和undo一并备走,属于热备方式。
xbk 在innodb表备份恢复的流程
0、xbk备份执行的瞬间,立即触发ckpt,已提交的数据脏页,从内存刷写到磁盘,并记录此时的LSN号
1、备份时,拷贝磁盘数据页,并且记录备份过程中产生的redo和undo一起拷贝走,也就是checkpoint LSN之后的日志
2、在恢复之前,模拟Innodb“自动故障恢复”的过程,将redo(前滚)与undo(回滚)进行应用
3、恢复过程是cp 备份到原来数据目录下
备份过程:
1. ckpt ,记录ckpt后LSN ,to lsn
2. 拷贝数据页 ,保存为数据文件
3. 自动将备份过程redo,会一并备份走,提取最后的last LSN
恢复:
其实就是模拟了CSR过程
对比LAST LSN ,to lsn
使用redo进行前滚,对未提交的事务进行回滚
最后得到一个一致性备份
innobackupex使用
全备
mkdir -p /data/bak/
innobackupex --defaults-file=/etc/my.cnf --user=root --password=oldboy123 /data/bak
注意:
备份工具是依赖于/etc/my.cnf
[mysqld]
[client]
[innobackupex]
[mysqld]
cat /etc/my.cnf
user=mysql
basedir=/application/mysql datadir=/data/mysql/data
socket=/tmp/mysql.sock
server_id=6
port=3306
1og_error=/data/mysql/data/mysql.1og
1og_bin=/data/binlog/mysql-bin
secure-file-priv=/tmp
autocommit=0
innodb_flush_method=0_DIRECT
gtid-mode=on
enforce-gtid-consistency=true
slow_query_log=1
slow_query_log_file=/data/mysql/data/slow.1og
1ong_query_time=0.1
log_queries_not_using_indexes
[client]
socket=/tmp/mysql.sock
[mysqldump]
如果说配置文件没有在/etc ,可以如下操作
innobackupex --defaults-file=具体路径 --user=root --password=oldboy123 /data/bak
自主定制备份路径名
innobackupex --user=root --password=oldboy123 --no-timestamp /data/bak/full_$(date +%F)
备份集中多出来的文件:
-rw-r----- 1 root root 24 Jun 29 09:59 xtrabackup_binlog_info
-rw-r----- 1 root root 119 Jun 29 09:59 xtrabackup_checkpoints
-rw-r----- 1 root root 489 Jun 29 09:59 xtrabackup_info
-rw-r----- 1 root root 2560 Jun 29 09:59 xtrabackup_logfile
xtrabackup_binlog_info :(备份时刻的binlog位置)
cat xtrabackup_binlog_info
mysql-bin.000003 536749
79de40d3-5ff3-11e9-804a-000c2928f5dd:1-7
记录的是备份时刻,binlog的文件名字和当时的结束的position,可以用来作为截取binlog时的起点。
xtrabackup_checkpoints :
backup_type = full-backuped
from_lsn = 0 上次所到达的LSN号(对于全备就是从0开始,对于增量有别的显示方法)
to_lsn = 160683027 备份开始时间(ckpt)点数据页的LSN
last_lsn = 160683036 备份结束后,redo日志最终的LSN
compact = 0
recover_binlog_info = 0
(1)备份时刻,立即将已经commit过的,内存中的数据页刷新到磁盘(CKPT).开始备份数据,数据文件的LSN会停留在to_lsn位置。
(2)备份时刻有可能会有其他的数据写入,已备走的数据文件就不会再发生变化了。
(3)在备份过程中,备份软件会一直监控着redo的undo,如果一旦有变化会将日志也一并备走,并记录LSN到last_lsn。
从to_lsn ----》last_lsn 就是,备份过程中产生的数据变化
删库跑路
pkill mysqld //先关闭数据库
lsof -i:3306 //确认
\rm -rf /data/mysql/data/*
cd /data/mysql/data/
ll
恢复
innobackupex --apply-log /data/bak/2020-11-20_20-24-42/
cd /data/bak/2020-11-20_20-24-42/
cp -a * /data/mysql/data/
cd /data/mysql/data/
chown -R mysql.mysql *
/etc/init.d/mysqld start
mysql -uroot -p'oldboy123';
XBK增量备份
备份方式:基于上次的备份的增量
增量备份不能单独恢复,必须合并到全备中,一起恢复
周日全备
innobackupex --user=root --password=oldboy123 --no-timestamp /data/bak/full_$(date +%F)
模拟周一数据变化
create database xbk charset utf8mb4;
use xbk
create table t1(id int);
insert into t1 values(1),(2),(3);
commit;
周一晚上增量备份
innobackupex --user=root --password=oldboy123 --no-timestamp --incremental --incremental-basedir=/data/bak/full_2020-11-20 /data/bak/inc_$(date +%F)
模拟周二白天的数据变化
use xbk
create table t2(id int);
insert into t2 values(1),(2),(3);
commit;
周二晚上的增量备份
innobackupex --user=root --password=oldboy123 --no-timestamp --incremental --incremental-basedir=/data/bak/inc_2020-11-21 /data/bak/inc2_$(date +%F)
BK增量恢复演示
***思路:
合并所有增量到全备
每个XBK备份都需要恢复准备(prepare)***
--apply-log --redo-only
1. 整理全备
innobackupex --apply-log --redo-only /data/bak/full_2020-11-21/
2. 整理并合并周一增量到全备
innobackupex --apply-log --redo-only --incremental-dir=/data/bak/inc_2020-11-21 /data/bak/full_2020-11-21/
3. 整理并合并周二的增量到全备
innobackupex --apply-log --incremental-dir=/data/bak/inc2_2020-11-21 /data/bak/full_2020-11-21/
4. 再次整理全备
innobackupex --apply-log /data/bak/full_2020-11-21
5. 破坏数据库,恢复数据
pkill mysqld
\rm -rf /data/mysql/data/*
innobackupex --copy-back /data/bak/full_2020-11-21
chown -R mysql.mysql /data/*
/etc/init.d/mysqld start
mysql -uroot -p'oldboy123'
show databases;