Partial backup 备份指定表/库

最新推荐文章于 2023-08-08 11:24:03 发布
最新推荐文章于 2023-08-08 11:24:03 发布
阅读量1.3k 收藏
点赞数
分类专栏： MySQL 文章标签： MySQL
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/ashic/article/details/52280967
版权

Partial Backups

XtraBackup支持partial backups,这意味着你可以只备份部分表或库.要备份的表必须是独立表空间,即innodb_file_per_table=1
有一点需要注意的是,部分备份不要copy back prepared backup.restore partial backups应该用导入,而不是–copy-back

创建partial backups

有三种方式可以创建partial backups:
1.–include 支持正则
2.–tables-file 读取一个文件,备份其中写明的所有表
3.–databases 列出库名

–include方式
innobackupex --defaults-file=/data/mysqldata/3306/my.cnf --user=backup --password='backup' --include='^test[.]t.*[0-9]$' /data/mysqldata/backup/partial/

此方法发现一个问题

[mysql@master backup]$ ls partial/2016-08-19_18-42-28/test/
t1.frm  t2.MYD              test_null#P#p1.ibd  trb3.frm       trb3#P#p1.ibd  trb4.frm       trb4#P#p1.ibd
t1.ibd  t2.MYI              test_null#P#p2.ibd  trb3.par       trb3#P#p2.ibd  trb4.par       trb4#P#p2.ibd
t2.frm  test_null#P#p0.ibd  test_null#P#p3.ibd  trb3#P#p0.ibd  trb3#P#p3.ibd  trb4#P#p0.ibd  trb4#P#p3.ibd
备份中包含了test_null表,而test_null表并不匹配我的正则表达式,但是为什么备份到了?(test_null为分区表)

创建分区表thehe,分区名称p0 p1 p2 p3 p4
CREATE TABLE thehe (id INT, name VARCHAR(50), purchased DATE)
    PARTITION BY RANGE( YEAR(purchased) ) (
        PARTITION p0 VALUES LESS THAN (1990),
        PARTITION p1 VALUES LESS THAN (1995),
        PARTITION p2 VALUES LESS THAN (2000),
        PARTITION p3 VALUES LESS THAN (2005)
    );

创建分区表tpapa,分区名称 pa pb pc pd
CREATE TABLE tpapa (id INT, name VARCHAR(50), purchased DATE)
    PARTITION BY RANGE( YEAR(purchased) ) (
        PARTITION pa VALUES LESS THAN (1990),
        PARTITION pb VALUES LESS THAN (1995),
        PARTITION pc VALUES LESS THAN (2000),
        PARTITION pd VALUES LESS THAN (2005)
    );

再次备份
innobackupex --defaults-file=/data/mysqldata/3306/my.cnf --user=backup --password='backup' --include='^test[.]t.*[0-9]$' /data/mysqldata/backup/partial3/

[mysql@master backup]$ ls partial3/2016-08-19_18-49-31/test/
t1.frm  t2.MYD          thehe#P#p1.ibd  trb3.frm       trb3#P#p1.ibd  trb4.frm       trb4#P#p1.ibd
t1.ibd  t2.MYI          thehe#P#p2.ibd  trb3.par       trb3#P#p2.ibd  trb4.par       trb4#P#p2.ibd
t2.frm  thehe#P#p0.ibd  thehe#P#p3.ibd  trb3#P#p0.ibd  trb3#P#p3.ibd  trb4#P#p0.ibd  trb4#P#p3.ibd
只有thehe被备份了
这说明,对于分区表,每个分区在这里被当做一个表,表名是 原table_name+分区名

创建分区表tpapa,分区名称 p1 pb pc p4
CREATE TABLE txxoo (id INT, name VARCHAR(50), purchased DATE)
    PARTITION BY RANGE( YEAR(purchased) ) (
        PARTITION pa VALUES LESS THAN (1990),
        PARTITION pb VALUES LESS THAN (1995),
        PARTITION pc VALUES LESS THAN (2000),
        PARTITION pd VALUES LESS THAN (2005)
    );

再次备份
innobackupex --defaults-file=/data/mysqldata/3306/my.cnf --user=backup --password='backup' --include='^test[.]t.*[0-9]$' /data/mysqldata/backup/partial4/

[mysql@master backup]$ ls partial4/2016-08-19_18-58-39/test/
t1.frm  t2.MYD          thehe#P#p1.ibd  trb3.frm       trb3#P#p1.ibd  trb4.frm       trb4#P#p1.ibd
t1.ibd  t2.MYI          thehe#P#p2.ibd  trb3.par       trb3#P#p2.ibd  trb4.par       trb4#P#p2.ibd
t2.frm  thehe#P#p0.ibd  thehe#P#p3.ibd  trb3#P#p0.ibd  trb3#P#p3.ibd  trb4#P#p0.ibd  trb4#P#p3.ibd
没有备份txxoo,因为若备份p1 p4分区,整个表就是不完整的备份
–tables-file

–tables-file选项后面跟的是一个包含需要备份的表的列表文件.格式为每行一个表,表名以databasename.tablename为格式

cat >> backup_list.txt <<!
fandb.dept
test.app_phone_download_speed_detail
test.quarterly_report_status
!

innobackupex --defaults-file=/data/mysqldata/3306/my.cnf --user=backup --password='backup' --no-timestamp --tables-file=/data/mysqldata/backup/backup_list.txt /data/mysqldata/backup/list

在备份过程中,未包含在备份列表中的表会提示skipping
160822 14:33:16 [01] Skipping ./mysql/innodb_table_stats.ibd.

备份的结构,可见只包含了在备份列表中的表

[mysql@master backup]$ tree list/
list/
|-- backup-my.cnf
|-- fandb
|   |-- dept.frm
|   `-- dept.ibd
|-- ibdata1
|-- test
|   |-- app_phone_download_speed_detail.frm
|   |-- app_phone_download_speed_detail.ibd
|   |-- quarterly_report_status.frm
|   |-- quarterly_report_status.par
|   |-- quarterly_report_status#P#p0.ibd
|   |-- quarterly_report_status#P#p1.ibd
|   |-- quarterly_report_status#P#p2.ibd
|   |-- quarterly_report_status#P#p3.ibd
|   |-- quarterly_report_status#P#p4.ibd
|   |-- quarterly_report_status#P#p5.ibd
|   |-- quarterly_report_status#P#p6.ibd
|   |-- quarterly_report_status#P#p7.ibd
|   |-- quarterly_report_status#P#p8.ibd
|   `-- quarterly_report_status#P#p9.ibd
|-- xtrabackup_binlog_info
|-- xtrabackup_checkpoints
|-- xtrabackup_info
`-- xtrabackup_logfile
–databases

–database选项可以直接接收需要备份的”表”和”库”名,或接收一个包含所需备份表名的列表文件

innobackupex --defaults-file=/data/mysqldata/3306/my.cnf --user=backup --password='backup' --no-timestamp --databases="test.app_phone_download_speed_detail fandb" /data/mysqldata/backup/databases

上面的命令备份了单个test.app_phone_download_speed_detail和全部fandb库下的表
[mysql@master backup]$ tree databases/
databases/
|-- backup-my.cnf
|-- fandb
|   |-- db.opt
|   |-- dept.frm
|   |-- dept.ibd
|   |-- emp.frm
|   |-- emp.ibd
|   |-- incr.frm
|   |-- incr.ibd
|   |-- l_csv.CSM
|   |-- l_csv.CSV
|   |-- l_csv.frm
|   |-- master2.frm
|   |-- master2.ibd
|   |-- salary.frm
|   `-- salary.ibd
|-- ibdata1
|-- test
|   |-- app_phone_download_speed_detail.frm
|   `-- app_phone_download_speed_detail.ibd
|-- xtrabackup_binlog_info
|-- xtrabackup_checkpoints
|-- xtrabackup_info
`-- xtrabackup_logfile

文件列表
cat >> db_list.txt <<!
fandb
test.quarterly_report_status
!

innobackupex --defaults-file=/data/mysqldata/3306/my.cnf --user=backup --password='backup' --no-timestamp --databases=/data/mysqldata/backup/db_list.txt /data/mysqldata/backup/db_list

[mysql@master backup]$ tree db_list
db_list
|-- backup-my.cnf
|-- fandb
|   |-- db.opt
|   |-- dept.frm
|   |-- dept.ibd
|   |-- emp.frm
|   |-- emp.ibd
|   |-- incr.frm
|   |-- incr.ibd
|   |-- l_csv.CSM
|   |-- l_csv.CSV
|   |-- l_csv.frm
|   |-- master2.frm
|   |-- master2.ibd
|   |-- salary.frm
|   `-- salary.ibd
|-- ibdata1
|-- test
|   |-- quarterly_report_status.frm
|   |-- quarterly_report_status.par
|   |-- quarterly_report_status#P#p0.ibd
|   |-- quarterly_report_status#P#p1.ibd
|   |-- quarterly_report_status#P#p2.ibd
|   |-- quarterly_report_status#P#p3.ibd
|   |-- quarterly_report_status#P#p4.ibd
|   |-- quarterly_report_status#P#p5.ibd
|   |-- quarterly_report_status#P#p6.ibd
|   |-- quarterly_report_status#P#p7.ibd
|   |-- quarterly_report_status#P#p8.ibd
|   `-- quarterly_report_status#P#p9.ibd
|-- xtrabackup_binlog_info
|-- xtrabackup_checkpoints
|-- xtrabackup_info
`-- xtrabackup_logfile
Preparing Partial Backups
innobackupex --apply-log --export /path/to/partial/backup

在prepare过程中你会看到一些错误

[mysql@master backup]$ innobackupex --apply-log --export /data/mysqldata/backup/db_list

InnoDB: xtrabackup: Last MySQL binlog file position 2519, file name mysql-bin.000035
InnoDB: Failed to find tablespace for table `sakila`.`FTS_0000000000000203_00000000000001c5_INDEX_1` in the cache. Attempting to load the tablespace with space id 507
InnoDB: Operating system error number 2 in a file operation.
InnoDB: The error means the system cannot find the path specified.
InnoDB: If you are installing InnoDB, remember that you must create directories yourself, InnoDB does not create them.
InnoDB: Cannot open datafile for read-only: './sakila/FTS_0000000000000203_00000000000001c5_INDEX_1.ibd' OS error: 71
InnoDB: Operating system error number 2 in a file operation.
InnoDB: The error means the system cannot find the path specified.

只要最后出现 160822 21:52:11 completed OK! 就是成功的

官方文档中的解释

You may see warnings in the output about tables that don’t exist. This is because InnoDB -based engines stores its data dictionary inside the tablespace files besides the .frm files. innobackupex will use xtrabackup to remove the missing tables (those who weren’t selected in the partial backup) from the data dictionary in order to avoid future warnings or errors:

111225 0:54:06 InnoDB: Error: table ‘mydatabase/mytablenotincludedinpartialb’
InnoDB: in InnoDB data dictionary has tablespace id 6,
InnoDB: but tablespace with that id or name does not exist. It will be removed from data dictionary.

You should also see the notification of the creation of a file needed for importing (.exp file) for each table included in the partial backup:

xtrabackup: export option is specified.
xtrabackup: export metadata of table ‘employees/departments’ to file .//departments.exp (2 indexes
xtrabackup: name=PRIMARY, id.low=80, page=3
xtrabackup: name=dept_name, id.low=81, page=4

需要注意的是,你可以对一个已经prepare的备份再一次执行 –apply-log –export来生产.exp文件

Restoring Partial Backups

在5.6版本前,即便你的innodb表开启了innodb_file_per_table 独立表空间,你也无法通过直接cp数据文件 来在server间复制表
但是有了PerconaXtrabackup,你懂的

首先export表
innobackupex –apply-log –export /path/to/backup
和之前的prepare是一样的,这个过程中会为每个innodb表创建.exp文件

[mysql@master backup]$ find /data/mysqldata/backup/db_list/ -name dept.*
/data/mysqldata/backup/db_list/fandb/dept.ibd
/data/mysqldata/backup/db_list/fandb/dept.frm
/data/mysqldata/backup/db_list/fandb/dept.cfg
/data/mysqldata/backup/db_list/fandb/dept.exp

其中除了.frm文件,剩下的三个文件是import过程中需要的

导入表:
1.创建表create table ..
2.discard tablespace
3.cp .ibd .cfg .exp文件到相应的目录中
4.import tablespace

(mysql@localhost) [(none)]> use fandb;
Database changed
(mysql@localhost) [fandb]> select * from dept;
+--------+------------+----------+
| deptno | dname      | loc      |
+--------+------------+----------+
|     10 | ACCOUNTING | NEW YORK |
|     20 | RESEARCH   | DALLAS   |
|     30 | SALES      | CHICAGO  |
|     40 | OPERATIONS | BOSTON   |
+--------+------------+----------+
4 rows in set (0.01 sec)

(mysql@localhost) [fandb]> drop table dept;
Query OK, 0 rows affected (0.01 sec)

CREATE TABLE `dept` (
  `deptno` int(11) NOT NULL,
  `dname` varchar(14) DEFAULT NULL,
  `loc` varchar(13) DEFAULT NULL,
  PRIMARY KEY (`deptno`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8;

ALTER TABLE dept DISCARD TABLESPACE;

cp /data/mysqldata/backup/db_list/fandb/dept.ibd /data/mysqldata/3306/data/fandb/
cp /data/mysqldata/backup/db_list/fandb/dept.cfg /data/mysqldata/3306/data/fandb/
cp /data/mysqldata/backup/db_list/fandb/dept.exp /data/mysqldata/3306/data/fandb/

ALTER TABLE dept IMPORT TABLESPACE;

(mysql@localhost) [fandb]> select * from dept;
+--------+------------+----------+
| deptno | dname      | loc      |
+--------+------------+----------+
|     10 | ACCOUNTING | NEW YORK |
|     20 | RESEARCH   | DALLAS   |
|     30 | SALES      | CHICAGO  |
|     40 | OPERATIONS | BOSTON   |
+--------+------------+----------+
4 rows in set (0.00 sec)

导入与备份时不同的库也是可以的

(mysql@localhost) [test]> drop table dept;
Query OK, 0 rows affected (0.01 sec)

(mysql@localhost) [test]> CREATE TABLE `dept` (
    ->   `deptno` int(11) NOT NULL,
    ->   `dname` varchar(14) DEFAULT NULL,
    ->   `loc` varchar(13) DEFAULT NULL,
    ->   PRIMARY KEY (`deptno`)
    -> ) ENGINE=InnoDB DEFAULT CHARSET=utf8
    -> 
    -> ;
Query OK, 0 rows affected (0.00 sec)

(mysql@localhost) [test]> ALTER TABLE dept DISCARD TABLESPACE;
Query OK, 0 rows affected (0.01 sec)

cp /data/mysqldata/backup/db_list/fandb/dept.ibd /data/mysqldata/3306/data/test/
cp /data/mysqldata/backup/db_list/fandb/dept.cfg /data/mysqldata/3306/data/test/
cp /data/mysqldata/backup/db_list/fandb/dept.exp /data/mysqldata/3306/data/test/

(mysql@localhost) [test]> ALTER TABLE dept IMPORT TABLESPACE;
Query OK, 0 rows affected (0.01 sec)

(mysql@localhost) [test]>  select * from dept;
+--------+------------+----------+
| deptno | dname      | loc      |
+--------+------------+----------+
|     10 | ACCOUNTING | NEW YORK |
|     20 | RESEARCH   | DALLAS   |
|     30 | SALES      | CHICAGO  |
|     40 | OPERATIONS | BOSTON   |
+--------+------------+----------+
4 rows in set (0.00 sec)
Fan_-_
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
基于xtrabackup2.4(innobackupex)的数据库可配置的备份脚本
08-19
基于xtrabackup2.4的数据库备份脚本，支持全库备份、指定库备份、压缩备份。备份规则：周一至周六增量备份，周日全库备份，自动管理备份数据和备份日志。如果有格式问题，应该是windows的空格和换行不同于Linux，可以复制到新的shell文件中。
浅谈python标准库--functools.partial
09-19
Python的`functools`模块是标准库中的一部分，它包含了一些高级函数，这些函数主要用于操作其他函数。本文重点讨论`functools.partial`，这是一个非常实用的功能，它允许我们预设函数的一部分参数，从而创建出新的、...
xtrabackup部分备份数据库 Partial Backups
weixin_30266829的博客
12-18 79
官方文档： 部分备份： http://www.percona.com/doc/percona-xtrabackup/2.1/innobackupex/partial_backups_innobackupex.html http://www.percona.com/doc/percona-xtrabackup/2.1/innobackupex/restoring_individual_tabl...
Percona XtraBackup的部分备份与恢复/单库备份/单表备份/指定库备份/指定表备份
热门推荐
zhu19774279的专栏
11-09 1万+
本文介绍了如何使用Percona XtraBackup进行指定库、表的备份及恢复。
xtrabackup 备份mysql数据库三：partial backup 部分备份及恢复
weixin_33788244的博客
06-22 148
innobackup 部分备份恢复实验 三种方式： ## Using the --include option The command above will create a timestamped directory with the usual files that innobackupex creates, but only the data files ...
Percona Xtrabackup备份mysql全库及指定数据库(完整备份与增量备份)
weixin_30752699的博客
01-13 198
原文地址：http://www.tuicool.com/articles/RZRnq2 Xtrabackup简介 Percona XtraBackup是开源免费的MySQL数据库热备份软件，它能对InnoDB和XtraDB存储引擎的数据库非阻塞地备份（对于MyISAM的备份 同样需要加表锁）。XtraBackup支持所有的Percona Server、MySQL、MariaDB和Drizzle...
Fully automatic multi-atlas segmentation of CTA for partial volume correction in cardiac SPECT/CT
02-06
Anatomical-based partial volume correction (PVC) has been shown to improve image quality and quantitative accuracy in cardiac SPECT/CT. However, this method requires manual segmentation of various ...
Python库 | print_partial_datasets-0.2.3.tar.gz
03-09
"print_partial_datasets"是一个Python库，根据其名称，我们可以推测它主要用于帮助用户在处理大数据集时打印或查看部分数据，这在调试、数据分析或教学场景中非常有用。 这个库的版本为0.2.3，表明它可能已经经过...
C# partial关键字说明
09-02
【C# partial关键字说明】 C#中的`partial`关键字是一个非常实用的功能，它允许开发者将一个类、结构或接口的定义分散到多个源文件中，从而提高代码组织性和可维护性。局部类型（即使用`partial`关键字声明的类型）...
Ubuntu/Linux 系统备份
10-26
克隆或备份时会自动跳过 /mnt/* 、/media/* 、 /proc 、/sys 、/tmp 以及缓存 /var/cache/apt/archives/*.deb 、 /var/cache/apt/archives/partial/* 。如果有其它挂载点如 /windows/* 、 /home/*/win_c 之类，可...
SQL Server 2005新特性，部分备份（partial backup）
WaveYang的专栏
12-30 1345
也是SQL Server 2005带来的新特性，部分备份（partial backup）自动创建数据库中主文件组和所有激活读写功能的文件组的备份。如果备份存在只读文件组的数据库，部分备份将只对主文件组进行备份。这个选项对于那些存在只读文件组的超大型数据库是理想的，它不需要像那些可写的文件组备份得那么频繁。除了需要指定READ_WRITE_FILEGROUPS选项外，执行部分备份的语法几乎和完整
xtrabackup备份数据库
天涯君落
02-21 1596
xtrabackup备份数据库 介绍 一般来说，在生产部署服务的时候，需要考虑，生产数据库需要备份，在主从之外，恢复数据的话，需要可以手动配置的机制，防止出现极端情况，主从全崩。 本文主要参考：https://www.cnblogs.com/linuxk/p/9372990.html这位大佬的操作记录，根据自己实际操作的情况，对命名做了一些补充。具体参考本文的话，可以两个博客对照着看。 Xtrabackup中主要包含两个工具： xtrabackup：是用于热备innodb，xtradb表中数据的工具，不
通过XtraBackup进行数据库表备份和表空间传输实例
m0_38130105的博客
07-09 371
一．安装教程      1.XtraBackup简介XtraBackup有很多功能和优点：例如支持全备、增量备份、部分备份；支持压缩备份；备份不影响数据读写、事务等，但是也有缺陷不足：例如不支持脱机备份、不支持直接备份到磁带设备、不支持Cloud Back，MyISAM的备份也会阻塞。XtraBackup只支持Linux平台。      2.安装包将percona-xtrabackup-2.4.9...
使用Xtrabackup进行MySQL备份
weixin_33985679的博客
05-17 235
本文系原创，转载请务必保留如下链接信息： http://www.magedu.com http://mageedu.blog.51cto.com   一、安装   1、简介   Xtrabackup是由percona提供的mysql数据库备份工具，据官方介绍，这也是世界上惟一一款开源的能够对innodb和xtradb数据库进行热备的工具。特点： (1)备份过程快速、可靠； (2...
MySQL建表枚举分区SQL,【mysql备份】02、Xtrabackup备份mysql
weixin_29061997的博客
03-18 135
一、Xtrabackup概述1、Xtrabackup简介Xtrabackup是由percona提供的mysql数据库备份工具，据官方介绍，这也是世界上惟一一款开源的能够对innodb和xtradb数据库进行热备的工具。官网：https://www.percona.com/InnoDB存储引擎支持热备，完全备份、增量备份MyISAM温备，完全备份，不支持增量备份，物理备份，速度快特点：1)备份过程快...
mysql xtrabackup 部分复制
weixin_43931625的博客
06-11 295
mysql xtrabackup 部分复制
使用Xtrabackup完整备份中恢复单表
weixin_34245749的博客
12-12 659
MySQL目前采取的备份策略都是xtrabackup全备+binlog备份，如果当某天某张表意外的删除，那么如何快速从xtrabackup全备中恢复单表呢？从MySQL 5.6版本开始，支持可传输表空间（Transportable Tablespace），那么利用这个功能就可以实现单表的恢复，同样利用这个功能还可以把innodb表移动到另外一台服务器...
利用Xtrabackup进行单库备份，增备
最新发布
大脸猫脸大
08-08 625
Percona XtraBackup打包备份使用注意。利用Xtrabackup进行单库备份、单表恢复实例。#第一种方法指定备份文件夹。
partial:partials/_navbar.html 怎么引入
05-31
在使用Django的模板语言时，可以使用 `{% include %}` 标签来引入其他模板文件。在这种情况下，你可以在需要引入 `_navbar.html` 的模板文件中使用以下代码： ``` {% include 'partials/_navbar.html' %} ``` 其中，`partials/_navbar.html` 是 `_navbar.html` 文件的相对路径。请确保路径是正确的，并且模板文件存在于正确的位置。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值