mysql5.7备份工具_MySQL 5.7 mysqlpump 备份工具说明

MySQL5.7之后多了一个备份工具:mysqlpump。它是mysqldump的一个衍生,mysqldump就不多说明了,现在看看mysqlpump到底有了哪些提升,可以查看

官方文档

,这里针对如何使用做下说明。

mysqlpump和mysqldump一样,属于逻辑备份,备份以SQL形式的文本保存。逻辑备份相对物理备份的好处是不关心undo log的大小,直接备份数据即可。它最主要的特点是:

并行备份

数据库和数据库中的对象的,加快备份过程。

更好的控制数据库和数据库对象(表,存储过程,用户帐户)的备份。

备份用户账号作为帐户管理语句(CREATE USER,GRANT),而不是直接插入到MySQL的系统数据库。

备份出来直接生成压缩后的备份文件。

备份进度指示(估计值)。

重新加载(还原)备份文件,先建表后插入数据最后建立索引,减少了索引维护开销,加快了还原速度。

备份可以排除或则指定数据库。

参数:

绝大部分参数和mysqldump一致,顺便复习一下。对于mysqlpump参数会用背景色

标记出来。

DROP DATABASE IF EXISTS `...`;

2:

--add-drop-table

:在建表之前先执行删表操作。

DROP TABLE IF EXISTS `...`.`...`;

3:

注意:

这个参数需要和

DROP USER 'backup'@'192.168.123.%';

4:

--add-locks

:备份表时,使用LOCK TABLES和UNLOCK TABLES。

注意:

这个参数不支持并行备份,需要关闭并行备份功能:

=0

LOCK TABLES `...`.`...` WRITE;

...

UNLOCK TABLES;

6:

--bind-address

:指定通过哪个网络接口来连接Mysql服务器(一台服务器可能有多个IP),防止同一个网卡出去影响业务。

7:

--complete-insert

:dump出包含所有列的完整insert语句。

8:

--compress

: 压缩客户端和服务器传输的所有的数据,-C。

9:

shell> mysqlpump --compress-output=LZ4 > dump.lz4

shell> lz4_decompress dump.lz4 dump.txt

shell> mysqlpump --compress-output=ZLIB > dump.zlib

shell> zlib_decompress dump.zlib dump.txt

10:

--databases

:手动指定要备份的库,支持多个数据库,用空格分隔,-B。

12:

注意:

每个线程的备份步骤是:先create table但不建立二级索引(主键会在create table时候建立),再写入数据,最后建立二级索引。

13:

--skip--defer-table-indexes

14:

--events

:备份数据库的事件,默认开启,关闭使用--skip-events参数。

mysqlpump --exclude-databases=mysql,sys    #备份过滤mysql和sys数据库mysqlpump --exclude-tables=rr,tt   #备份过滤所有数据库中rr、tt表mysqlpump -B test --exclude-tables=tmp_ifulltext,tt #备份过滤test库中的rr、tt表...

注意:

要是只备份数据库的账号,需要添加参数

--users

,并且需要过滤掉所有的数据库,如:

mysqlpump --users --exclude-databases=sys,mysql,db1,db2 --exclude-users=dba,backup  #备份除dba和backup的所有账号。

17:

--insert-ignore

:备份用insert ignore语句代替insert语句。

18:

--log-error-file

:备份出现的warnings和erros信息输出到一个指定的文件。

19:

--max-allowed-packet

:备份时用于client/server直接通信的最大buffer包的大小。

20:

--net-buffer-length

:备份时用于client/server通信的初始buffer大小,当创建多行插入语句的时候,mysqlpump 创建行到N个字节长。

21:

--no-create-db

:备份不写CREATE DATABASE语句。要是备份多个库,需要使用参数-B,而使用-B的时候会出现create database语句,该参数可以屏蔽create database 语句。

22:

--no-create-info

:备份不写建表语句,即不备份表结构,只备份数据,-t。

23:

--hex-blob

: 备份binary字段的时候使用十六进制计数法,受影响的字段类型有BINARY、VARBINARY、BLOB、BIT。

24:

--host

:备份指定的数据库地址,-h。

25:

mysqlpump --parallel-schemas=4:vs,aa --parallel-schemas=3:pt   #4个线程备份vs和aa,3个线程备份pt。通过show processlist 可以看到有7个线程。mysqlpump --parallel-schemas=vs,abc --parallel-schemas=pt  #默认2个线程,即2个线程备份vs和abc,2个线程备份pt

####当然要是硬盘IO不允许的话,可以少开几个线程和数据库进行并行备份

26:

--password

:备份需要的密码。

27:

--port

:备份数据库的端口。

29:

--replace

:备份出来replace into语句。

30:

--routines

:备份出来包含存储过程和函数,默认开启,需要对

mysql.proc表有查看权限。生成的文件中会包含CREATE PROCEDURE 和 CREATE FUNCTION语句以用于恢复,关闭则需要用--skip-routines参数。

31:

--triggers

:备份出来包含触发器,默认开启,使用

31:

--set-charset

:备份文件里写SET NAMES default_character_set 到输出,此参默认开启。 -- skip-set-charset禁用此参数,不会在备份文件里面写出set names...

32:

--single-transaction

:该参数在事务隔离级别设置成Repeatable Read,并在dump之前发送start transaction 语句给服务端。这在使用innodb时很有用,因为在发出start transaction时,保证了在不阻塞任何应用下的一致性状态。对myisam和memory等非事务表,还是会改变状态的,当使用此参的时候要确保没有其他连接在使用ALTER TABLE、CREATE TABLE、DROP TABLE、RENAME TABLE、TRUNCATE TABLE等语句,否则会出现不正确的内容或则失败。--add-locks和此参互斥,在mysql5.7.11之前,--default-parallelism大于1的时候和此参也互斥,必须使用--default-parallelism=0。5.7.11之后解决了--single-transaction和--default-parallelism的互斥问题。

33:

34:

注意:

mysqldump支持--no-data,mysqlpump不支持--no-data

35:

--socket

:对于连接到localhost,Unix使用套接字文件,在Windows上是命名管道的名称使用,-S。

36:

--ssl

:--ssl参数将要被去除,用

--ssl-mode

取代。关于ssl相关的备份,请看

官方文档

37:

--tz-utc

:备份时会在备份文件的最前几行添加

SET

TIME_ZONE=

'+00:00'。

注意:

如果还原的服务器不在同一个时区并且还原表中的列有timestamp字段,会导致还原出来的结果不一致。默认开启该参数,用

38:

--user

:备份时候的用户名,-u。

39:

mysqlpump --exclude-databases=% --users    #过滤掉所有数据库

40:

使用说明:

mysqlpump的架构如下图所示

7d3b0bca1f08249d77d8fc76288ba339.png

mysqlpump支持基于库和表的并行导出,mysqlpump的并行导出功能的架构为:队列+线程,允许有多个队列(

mysqlpump的备份是基于表并行的,对于每张表的导出只能是单个线程的

,这里会有个限制是如果某个数据库有一张表非常大,可能大部分的时间都是消耗在这个表的备份上面,并行备份的效果可能就不明显。这里可以利用

mydumper

其是以chunk的方式批量导出,即

mydumper支持一张表多个线程以chunk的方式批量导出

。但是相对于mysqldump还是有了很大的提升。

  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
好的,针对您的问题,我可以为您提供以下步骤来自动备份 MySQL 5.7 数据库并在需要时进行恢复。 1. 安装 MySQL 5.7 首先,您需要安装 MySQL 5.7。您可以使用以下命令在 CentOS 7.4 上安装 MySQL 5.7: ``` sudo yum install mysql-server ``` 2. 配置 MySQL 5.7 接下来,您需要配置 MySQL 5.7。您可以使用以下命令打开 MySQL 5.7 配置文件: ``` sudo vi /etc/my.cnf ``` 在 [mysqld] 部分中添加以下配置: ``` max_allowed_packet=16M innodb_file_per_table=1 innodb_buffer_pool_size=2G innodb_log_file_size=512M innodb_flush_log_at_trx_commit=2 ``` 然后重启 MySQL 5.7 以应用更改: ``` sudo systemctl restart mysqld ``` 3. 创建备份脚本 接下来,您需要创建一个备份脚本。创建一个名为“backup.sh”的文件并将以下内容添加到文件中: ``` #!/bin/bash # MySQL备份脚本 # 设置变量 MYSQL_USER="your_mysql_username" MYSQL_PASSWORD="your_mysql_password" MYSQL_HOST="localhost" MYSQL_PORT="3306" BACKUP_DIR="/path/to/backup/directory" DATE=$(date +%Y%m%d%H%M%S) # 创建备份目录 mkdir -p $BACKUP_DIR # 备份数据库 mysqldump -u $MYSQL_USER -p$MYSQL_PASSWORD -h $MYSQL_HOST -P $MYSQL_PORT --all-databases | gzip > $BACKUP_DIR/$DATE.sql.gz # 删除30天前的备份 find $BACKUP_DIR/* -mtime +30 -exec rm {} \; ``` 请确保将“your_mysql_username”和“your_mysql_password”替换为您的 MySQL 用户名和密码,并将“/path/to/backup/directory”替换为您要将备份文件保存的目录的路径。 保存并退出文件后,运行以下命令将其设置为可执行文件: ``` sudo chmod +x backup.sh ``` 4. 自动备份 接下来,您需要将备份脚本设置为每天自动运行一次。您可以使用以下命令将其添加到 crontab 中: ``` sudo crontab -e ``` 在文件末尾添加以下行: ``` 0 0 * * * /path/to/backup.sh ``` 这将在每天的午夜自动运行备份脚本。 5. 恢复备份 如果需要恢复备份,您可以使用以下命令: ``` gunzip < backup_file.sql.gz | mysql -u username -p database_name ``` 请确保将“backup_file.sql.gz”替换为您要恢复的备份文件的名称,将“username”替换为您的 MySQL 用户名,将“database_name”替换为要恢复备份的数据库的名称。 希望这些步骤能够帮助您自动备份和恢复 MySQL 5.7 数据库!
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值