MySQL备份教程（2）物理备份工具xtrabackup/innobackupex使用教程

最新推荐文章于 2024-08-08 00:15:00 发布
最新推荐文章于 2024-08-08 00:15:00 发布
阅读量925 收藏 2
点赞数
分类专栏： 数据库
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_42073629/article/details/117235558
版权

一、Xtrabackup作用

Xtrabackup是Percona发布的一款物理备份工具，通常将直接复制数据文件作为备份手段的方式称为物理备份。相比逻辑备份而言速度更快、服务器负载也更低，并且备份期间不会锁表（MyISAM引擎依然存在FTWRL），备份期间不用间断业务，如果备份期间数据发生变化也会通过redolog保持数据一致，并且支持增量备份。只不过在进行单表备份和恢复时非常麻烦，这种场景建议用逻辑备份。

二、Xtrabackup安装

1、Percona官网推荐使用Yum方式安装，只需要配置好仓库地址即可

yum install https://repo.percona.com/yum/percona-release-latest.noarch.rpm
yum install percona-xtrabackup-24.x86_64  #mysql 8以前都是使用该版本

2、如果是下载的rpm包手动安装，如果出现“ libev.so.4()(64bit) is needed by percona-xtrabackup-2.3.4-1.el7.x86_64”这样的报错，只需要配置好EPEL的yum源，再安装libev即可，如图： 

3、安装好Xtrabackup后会提供给用户2给备份工具，分别是xtrabackup和innobackup。xtrabackup主要针对innodb表来做备份，而innobackupex是为了兼容老版本的非innod表备份，对xtrabackup进行了一次封装，查看innobackupex会发现它是xtrabackup的软连接，用innobackup备份innodb表时会自动调用xtrabackup。xtrabackup在8.0版本已经不再支持innobackup 

三、innobackupex常用选项

  • · --defaults-file=：指定my.cnf配置文件路径，如/etc/my.cnf。该选项必须是第一个选项，它会根据配置文件查找数据路径
  • · --user=：执行备份操作的MySQL用户（非系统用户），该用户需要有MySQL的相关权限
  • · --password=：MySQL用户的密码
  • · --databases：指定要备份的数据库，多个数据库以空格隔开，如"db1 db2"，在指定某数据库时也可以只指定其中的某张表（MySQL需要配置innodb_file_per_table = 1）
  • · --no-timestamp：使用这个选项后，备份时不会创建一个以时间戳命名的目录
  • · --compress：压缩备份数据，可以达到好几十倍的压缩率。恢复时需在apply-log之前增加--decompress解压步骤
  • · --compress-threads=8：启用压缩备份时开启的压缩线程数
  • · --stream：使用xbstream或tar流备份，使用此选项时备份数据将以指定流格式输出到标准输出上，通常用它实现本机不落盘的异地备份
  • · --parallel=4：备份所用的线程数
  • · --slave-info ：在从库进行备份时加上该参数后会在备份目录下生成xtrabackup_slave_info文件，该文件记录了主库的binlog position和GTID信息而非进行备份的从库的信息。这样在使用从库备份进行恢复或者部署新的从库时都可以找到正确的主库position。如果主库使用的传统复制模式并且slave_parallel_workers不为0，则该选项无法使用，备份下来的数据也无法部署为新的从库。
  • · --safe-slave-backup：检测从库在备份期间是否有打开临时表（保证数据一致性），如果没有打开临时表就stop SQL thread开始备份，备份完后再start SQL thread。如果有打开的临时表就会等待--safe-slave-backup-timeout超时
  • · --safe-slave-backup-timeout：默认300秒，每3s进行一次重试检查
  • · --incremental：增量备份
  • · --incremental-basedir：指定增量备份所依赖的上一次备份
  • · --use-memory：指定恢复数据时使用的内存大小

四、innobackupex备份与还原

备份命令执行后屏幕会开始输出很多提示，比如告诉用户当前正在复制的是哪个表等等信息。备份期间如果有新数据产生会被记录在一个innobackup_log文件中。在指定的备份目录中除了MySQL数据文件还有2个文件需要关注

· 记录备份时刻binlog position信息和GTID信息的xtrabackup_binlog_info（如果是在从库备份的，则应该是xtrabackup_slave_info）

#如果是对开启了GTID的从库进行备份，将提示扩展新从库的语法
cat xtrabackup_slave_info
SET GLOBAL gtid_purged='xxxxxxxxxxxxxx:n-n'
change master to master_auto_position=1

· 记录用于增量备份的LSN信息的xtrabackup_checkpoint，LSN记录了每一次备份时的起始点和结束点，通常上一次的结束点和下一次的起始点是连续的（如果开启了GTID的话会有9的误差）。如图： 

1、innobackupex备份命令示例

· 使用innobackupex全量备份

innobackupex --defaults-file=/etc/my.cnf --user=root --password='123456'  /data/backup/

· 使用innobackupex备份指定库，需要注意的是MySQL系统库也要一同备份，否则还原会出问题 

innobackupex --defaults-file=/etc/my.cnf --user=root --password='123456'  --databases="db1 db2" /data/backup

· 使用innobackupex流备份，实现本地不落盘直接推送到远程备份节点，恢复的时候需要先对备份压缩包解压（实际也可以边备份边解压） 

#流备份到远程服务器
xtrabackup --defaults-file=/etc/my.cnf --backup --user=root--password=123456 --host=192.168.38.53 --port=3306  --stream=xbstream |lz4 -B4 |ssh -p24 10.3.0.226 "cat - > /data2/logbak01/bi1/mysqlfull_2021_01_21_full.xbstream.lz4"

#解压lz4,得到xbstream
lz4_decompress mysqlfull_2021_01_21_full.xbstream.lz4 mysqlfull_2021_01_21_full.xbstream

#解压xbstream
xbstream -x < mysqlfull_2021_01_21_full.xbstream  -C /data/mysql_restore/xtrabackup/

#一边备份一边推送一边解压
xtrabackup --defaults-file=/etc/my.cnf --backup --user=dba --password=Hzdba666#@888 --host=192.168.38.53 --port=3306  --stream=xbstream |lz4 -B4 |ssh -p24 192.168.38.60 "cat - | lz4 -d -B4 |xbstream -x -C /data/backup"

· innobackupex加密备份 

openssl rand -base64 24  #得到一串加密码
echo -n "pxT5aEDWzasNZw==" > /data/backup/key
innobackupex --default-file=/etc/my.cnf --user=dba --password=123456 --encrypy=AES256 --encrypt-key-file=/data/backup/key #加密备份
xtrabackup --decrypy=AES256 --encrypt-key="pxT5aEDWzasNZw=="  --target-dir=/data/backup/fullback --remove-original#解密,之后再用innobackup apply-log和--copy-back

2、innobackupex数据还原步骤 

· apply-log：应用日志。因为备份过程中会将redo log中的更新也进行记录，里面包含尚未提交的事务。为避免数据不一致，在进行数据恢复前需要将这些未提交的事务进行回滚 

innobackupex --defaults-file=/etc/my.cnf --apply-log  --user-memory=2G /backup/2016-03-29_17-28-37/

· 恢复备份前需要先停止MySQL服务并让数据目录为空 

systemctl stop mysqld
rm -rf /var/lib/mysql/*

· --copy-back | --move-back 拷贝数据到datadir，move的方式会更快 

innobackupex --defaults-file=/etc/my.cnf --copy-back /data/backup/2016-03-29_17-28-37/

· 修改权限为mysql用户后启动服务 

chown -R mysql.mysql /data
mysqld_safe --defaults-file=/etc/my.cnf &

五、innobackupex增量备份与恢复（由于innobackupex增量备份时还会扫描一次全量备份的数据，所以效率并不高，实际工作中不建议使用增量备份，而是采用全备+binlog的形式）

1、对全量备份进行增量备份

innobackupex --incremental /data/backup --incremental-basedir=/data/backup/full_backup  #第一次增量备份需要指定完整备份
innobackupex --incremental /data/backup --incremental-basedir=/data/backup/incremental_1  #第二次增量备份时指定上一次增量或者全量目录

2、恢复增量备份

恢复增量备份时除了最后一次增量备份，其他备份都需要同时使用、--apply-log与--redo-only选项，即只应用redolog前滚，不应用undolog回滚。因为有可能一个事件在第一次备份时并没有提交完成而是在第二次备份时才执行完成，所以为了防止事件被错误回滚，将回滚操作放在最后一次增量备份上

innobackupex --apply-log  --redo-only  BASE-DIR   #首先应用完整备份数据 
innobackupex --apply-log  --redo-only  BASE-DIR --incremental-dir=incremental-dir-1  #恢复增量备份
innobackupex --apply-log   BASE-DIR --incremental-dir=incremental-dir-2  #最后一次增量备份不用redo-only
innobackupex --copy-back  BASE-DIR  #使用合并后的完整备份目录进行--copy-back即可
chown -R mysql.mysql /mysqldata

3、最后通过binlog日志恢复未备份的数据，只要在恢复了全量数据后查看下xtrabackup_binlog_info文件就可以得知需要从哪儿开始恢复 

cat xtrabackup_binlog_info  #假设这里记录到了binlog.000001的23874这个位置
mysqlbinlog --start-position=23874 binlog.000001 binlog.00002 binlog.00003 | mysql -uroot -p  #将23874之后的数据恢复，也可以先重定向到一个文本中检查后再手动导入

六、xtrabackup备份与还原（和innobackupex选项大多相同，按照备份--准备--还原的顺序操作即可）

1、xtrabackup备份示例

· 使用xtrabackup全库备份

xtrabackup --defaults-file=/etc/my.cnf --user=root --password=123456 --backup --target-dir=/data/backup  #backup代表开始备份;target-dir指定备份存放路径

· 使用xtrabackup在从库进行异地流备份 

/bin/xtrabackup  --defaults-file=$MYCNF --backup --slave-info --safe-slave-backup --user=$USER --password=$PWD --host=$HOST --port=$PORT --no-timestamp  --stream=xbstream 2>>"$BASEDIR/$LOGFILE"|lz4 -B4|ssh $TO_HOST -p24 "cat - >$TO_DIR/$BAKFILE"

· 使用xtrabackup备份指定库 

# 备份指定库
xtrabackup --defaults-file=/etc/my.cnf --user=root --password=123456 --backup --databases="database1 database2 database3" --target-dir=/data/backup

# 备份指定表
xtrabackup --defaults-file=/etc/my.cnf --user=root --password=123456 --backup --databases="database1.table1 database1.table2" --target-dir=/data/backup

2、xtrabackup恢复示例 

#准备阶段
xtrabackup --defaults-file=/etc/my.cnf  --prepare --target-dir=/data/backup
#还原阶段
rsync -avrP /data/backup /data/mysql/data/ #官方推荐用rsync还原
# xtrabackup --defaults-file=/etc/my.cnf  --move-back --target-dir=/data/backup  #数据量多推荐使用move方式

3、xtrabackup的增量备份 

xtrabackup --defaults-file=/etc/my.cnf --user=root --password=123456 --backup --target-dir=/data/full_backup
xtrabackup --defaults-file=/etc/my.cnf --user=root --password=123456 --backup --target-dir=/data/full_backup --incremental-basedir=/data/incremental01_backup
xtrabackup --defaults-file=/etc/my.cnf --user=root --password=123456 --backup --target-dir=/data/incremental01_backup --incremental-basedir=/data/incremental02_backup

4、xtrabackup的压缩备份 

#tar形式备份与解压
xtrabackup --defaults-file=/etc/my.cnf --user=dba --password=123456 --backup --stream=tar --target-dir=/data/backup | gzip > /data/backup/backup.tar.gz 
tar izxvf /data/backup/backup.tar.gz 

 #流格式备份与解压
xtrabackup --defaults-file=/etc/my.cnf --user=dba --password=123456 --backup --stream=xbstream --target-dir=/data/backup 1 > /data/backup/backup.xbstream
xbstream -x  < /data/backup/backup.xbstream -C /data/backup  #将流备份文件解压到指定目录

 

weixin_42073629
关注
专栏目录
mysql物理备份
qq_42008023的博客
07-23 1627
1.tar 完整备份 systemctl stop mysqld     1先关闭mysql mkdir /backup                   2准备目录，放置备份数据  tar -cf /backup/`date +%F`-mysql-all.tar /var/lib/mysql    3备份数据 rm -rf /var/lib/mysql/*       4模拟数据库损坏...
MySQL备份工具Xtrabackup
Kason_iWiki
07-10 221
文章目录一、工具的部署二、xtrabackup全备三、xtrabackup全备还原四、增量备份五、增量备份还原 Xtrabackup是一个开源的免费的热备工具，在Xtrabackup包中主要有Xtrabackup和innobackupex两个工具。其中Xtrabackup只能备份InnoDB和XtraDB两种引擎; innobackupex则是封装了Xtrabackup，同时增加了备份MyISAM引擎的功能。 工具官方网站：https://www.percona.com/ 一、工具的部署 （1）YUM安装
使用达梦数据库的disql工具给数据库做热备份
weixin_42447367的博客
09-11 852
使用disql工具做热备份 热备份就是数据库实例的服务是开启的 [dmdba@localhost bin]$ ./DmServiceDMSERVER status DmServiceDMSERVER (pid 5107) is running. 1.整库备份： SQL> backup database full to “disql_quanbei” backupset ‘/dm8/dmbak/disql_quanbei’; 2.增量备份，基于一个备份集做增量备份 SQL> backup dat
MySQL之数据备份与恢复---超详细
最新发布
Linux运维老纪的博客
08-08 2562
备份的主要目的是灾难恢复，在生产环境中，数据的安全性至关重要，任何数据的丢失都可能产生严重的后果。造成数据丢失的原因1.程序错误2.人为操作错误3.运算错误4.磁盘故障 5.灾难(如火灾、地震)和盗窃。本章详细介绍MySQL数据的备份与恢复操作----超详细。
MySQL 物理备份： Innobackupex 和 xtrabackup（热备），增量备份
m0_49190412的博客
11-26 895
Percona XtraBackup是一款基于MySQL的热备份的开源实用程序，它可以备份5.1到5.7版本上InnoDB,XtraDB,MyISAM存储引擎的表， Xtrabackup有两个主要的工具：xtrabackup、innobackupex 。 第一种安装方式： 使用 YUM 方式安装 地址 https://www.percona.com/downloads/Percona-XtraBackup-LATEST/ 确保安装 EPEL 源 yum install https://dl.fedora
MySQL备份工具xtrabackup和innobackupex
曲折旅程，艰难人生
03-30 1108
MySQL的备份是搞数据库的同学绕不过的话题。本文简要介绍了相关工具和原理。
Innobackupex(xtrabackup)物理备份
weixin_30888413的博客
08-29 863
1.Percona XtraBackup介绍 　　Percona XtraBackup（简称PXB）是 Percona 公司开发的一个完全开源的用于 MySQL 数据库物理热备的备份工具，在备份过程中不会锁定数据库。它可以备份来自MySQL5.1，5.5，5.6和5.7服务器上的InnoDB，XtraDB和MyISAM表的数据，以及带有XtraDB的Percona服务器。 　　Pe...
mysql innobackup_mysql裸文件备份XtraBackup (innobackupex)
weixin_34659856的博客
01-27 257
结构如下：热备分为逻辑备份和裸文件备份。裸文件备份比逻辑备份在速度上更快一些，因为它在底层复制数据文件。世界上唯一一款开源的，能够对INNODB和XtrDB数据库进行热备的开源工具。他的优点是备份与恢复过程的速度很快，安全可靠并且咋备份过程中不会锁表，不影响现有业务。但是目前还是不能对表结构文件和其他非事物类型的表进行备份。Xtrabackup包含了两个主要工具，一个是xtrabackup,另一个...
MySQL备份教程：物理备份工具xtrabackupinnobackupex使用教程.doc
10-04
物理备份工具Xtrabackup，特别是其封装版innobackupex，是MySQL备份领域中的高效解决方案。本文将深入探讨Xtrabackup/innobackupex的使用，包括其优势、安装方法以及常用选项。 Xtrabackup是由Percona开发的一款...
编写脚本令Xtrabackup对MySQL数据进行备份的教程
12-15
【Xtrabackup MySQL数据备份教程】 Xtrabackup是Percona公司开发的一款用于MySQL数据库备份的开源工具，特别适用于InnoDB存储引擎的数据备份。它采用了高效且可靠的技术来确保备份过程中的数据一致性。在备份InnoDB...
innobackupex、xtrabackup使用说明及备份脚本
07-09
本文将详细介绍两个用于MySQL数据库物理备份的工具——innobackupex和xtrabackup，并提供实际的备份脚本供参考。 innobackupex，全名InnoDB Hot Backup，是由Percona公司开发的一款用于MySQL数据库备份的工具。它...
使用Xtrabackup进行MySQL备份2
08-08
总结来说，Xtrabackup是一款强大的MySQL备份工具，尤其适用于需要保持高可用性的大型InnoDB数据库。其特性使得它在备份和恢复过程中能够兼顾效率、数据完整性和资源利用率，是数据库管理中的重要工具。
innobackupex和Xtrabackup备份和恢复MySQL数据
qq_40907977的博客
06-16 823
当MySQL数据量很小时，我们可以使用mysqldump来备份，无论是myisam引擎还是innodb引擎都是没有问题的。 但数据量很大，比如上百GB甚至上TB时，再使用mysqldump备份就会很鸡肋了，试想光备份一次全量备份要耗费10几个小时，那就别干别的了。因为，毕竟mysqldump时是会锁表的。 还好我们有xtrabakcup这个工具来备份量级比较大的数据，上百G的数据，仅仅几十分钟搞定，这主要取决于磁盘的I/O效率。不过xtrabackp默认只支持备份innodb，而myisam引擎的数据就不友
Xtrabackup原理及使用innobackupex进行MySQL数据库备份恢复
weixin_30514745的博客
05-03 100
Xtrabackup是由percona提供的mysql数据库备份工具，据官方介绍，这也是世界上惟一一款开源的能够对innodb和xtradb数据库进行热备的工具。 Xtrabackup中主要包含两个工具： xtrabackup：是用于热备份innodb, xtradb表中数据的工具，不能备份其他类型的表，也不能备份数据表结构； innobackupex：是将xtrabackup进行封装的pe...
innobackupex和Xtrabackup备份和恢复MySQL数据_innobackup ubunt
2303_79055586的博客
04-15 1051
Xtrabackup是由percona开源的免费数据库热备份软件，它能对InnoDB数据库和XtraDB存储引擎的数据库非阻塞地备份（对于MyISAM的备份同样需要加表锁）；mysqldump备份方式是采用的逻辑备份，其最大的缺陷是备份和恢复速度较慢，如果数据库大于50G，mysqldump备份就不太适合。Xtrabackup安装完成后有4个可执行文件，其中2个比较重要的备份工具是innobackupex、xtrabackup。
XtraBackup与InnoBackupex 联机备份
allenhulove的博客
02-18 123
XtraBackup联机备份： 专注于InnoDB、XtraBackup的热备工具，是C语言开发的程序，专用于备份InnoDB及XtraDB引擎对象 备份集高效、完整、可用 备份任务执行过程中不会阻塞事务 节省磁盘空间，降低网络带宽占用 备份集自动验证机制 恢复更快 [root@mysql1 /]# rpm -ivh percona-xtrabackup-2.2.3-4982.e...
xtrabackup(innobackupex)使用详解
weixin_33670713的博客
05-13 337
innobackupex实际上是percona-xtrabackup的perl整合脚本,功能当然更强大一些.xtrabackup备份实际上是在线的物理热备,为什么这么说呢,因为实际上他是以拷贝mysql物理文件来备份的方式,只是加入了一些锁和钩子来避免数据缺失,优势当然就是快了,物理拷贝始终是速度最快的备份方式,缺点就是占用空间大.备份原理很多文章有写,重点在于备份初期会创建...
MySQL大数据备份还原：xtrabackup与innobackupex实战指南
"这篇教程介绍了如何使用MySQL中的innobackupex和xtrabackup工具进行大数据量的备份和还原。Xtrabackup是一个专门针对InnoDB存储引擎的高效备份工具，支持在线热备份，能替代商业的InnoDB Hotbackup。它包括两个主要...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值