MySQL Shell实用备份程序

最新推荐文章于 2023-12-12 23:15:33 发布
最新推荐文章于 2023-12-12 23:15:33 发布
阅读量970 收藏 1
点赞数
分类专栏： 数据库 文章标签： mysql mysql shell util dumpInstance dumpSchemas
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/L835311324/article/details/107846050
版权

文章目录

简介

MySQL Shell提供了util.dumpInstance() 和util.dumpSchemas()用于导出数据，支持导出所有的schema或者选择部分schame到本地文件中，后续可以通过util.loadDump()进行恢复。支持多线程并行转储和文件压缩，这些都是mysqldump备份不提供的。

可以指定schema进行备份，默认不备份information_schema, mysql, ndbinfo, performance_schema, 和 sys schemas

使用核心要求如下:

  • MySQL5.7或更新的版本
  • 实例/schema的对象名称必须是latin1 或 utf8 字符集.
  • 只有使用InnoDB存储引擎的表才能保证数据一致性。

语法格式

# 备份实例
util.dumpInstance(outputUrl[, options]) 
# 备份schema
util.dumpSchemas(schemas, outputUrl[, options])

示例

util.dumpInstance()备份整个实例

# 使用msyqlsh连接实例
# mysqlsh root@127.0.0.1:3306
# 备份整个实例
 MySQL  127.0.0.1:3306  JS > util.dumpInstance('/tmp/instanceDump',{"threads":4})
Acquiring global read lock
All transactions have been started
Locking instance for backup
Global read lock has been released
Writing global DDL files
Writing users DDL
Preparing data dump for table `monitor`.`digests_prev`
Writing DDL for schema `monitor`
Writing DDL for view `monitor`.`my_statements`
Writing DDL for table `monitor`.`digests_prev`
Writing DDL for schema `sbtest`
WARNING: Could not select a column to be used as an index for table `monitor`.`digests_prev`. Chunking has been disabled for this table, data will be dumped to a single file.
Preparing data dump for table `sbtest`.`sbtest1`
Data dump for table `sbtest`.`sbtest1` will be chunked using column `id`
Preparing data dump for table `sbtest`.`sbtest10`
Data dump for table `sbtest`.`sbtest10` will be chunked using column `id`
Preparing data dump for table `sbtest`.`sbtest2`
Data dump for table `sbtest`.`sbtest2` will be chunked using column `id`
Preparing data dump for table `sbtest`.`sbtest3`
Writing DDL for table `sbtest`.`sbtest1`
Writing DDL for table `sbtest`.`sbtest10`
Data dump for table `sbtest`.`sbtest3` will be chunked using column `id`
Preparing data dump for table `sbtest`.`sbtest4`
Data dump for table `sbtest`.`sbtest4` will be chunked using column `id`
Preparing data dump for table `sbtest`.`sbtest5`
Data dump for table `sbtest`.`sbtest5` will be chunked using column `id`
Preparing data dump for table `sbtest`.`sbtest6`
Data dump for table `sbtest`.`sbtest6` will be chunked using column `id`
Preparing data dump for table `sbtest`.`sbtest7`
Data dump for table `sbtest`.`sbtest7` will be chunked using column `id`
Preparing data dump for table `sbtest`.`sbtest8`
Data dump for table `sbtest`.`sbtest8` will be chunked using column `id`
Preparing data dump for table `sbtest`.`sbtest9`
Writing DDL for table `sbtest`.`sbtest2`
Data dump for table `sbtest`.`sbtest9` will be chunked using column `id`
Running data dump using 4 threads.
NOTE: Progress information uses estimated values and may not be accurate.
Writing DDL for table `sbtest`.`sbtest3`
Writing DDL for table `sbtest`.`sbtest4`
Writing DDL for table `sbtest`.`sbtest5`
Writing DDL for table `sbtest`.`sbtest6`
Writing DDL for table `sbtest`.`sbtest7`
Writing DDL for table `sbtest`.`sbtest8`
Writing DDL for table `sbtest`.`sbtest9`
Data dump for table `monitor`.`digests_prev` will be written to 1 file
Data dump for table `sbtest`.`sbtest1` will be written to 1 file
Data dump for table `sbtest`.`sbtest4` will be written to 3 files
Data dump for table `sbtest`.`sbtest2` will be written to 3 files
Data dump for table `sbtest`.`sbtest10` will be written to 3 files
Data dump for table `sbtest`.`sbtest3` will be written to 3 files
Data dump for table `sbtest`.`sbtest5` will be written to 3 files
Data dump for table `sbtest`.`sbtest7` will be written to 3 files
Data dump for table `sbtest`.`sbtest8` will be written to 3 files
Data dump for table `sbtest`.`sbtest6` will be written to 3 files
Data dump for table `sbtest`.`sbtest9` will be written to 3 files
1 thds dumping - 113% (4.58M rows / ~4.05M rows), 70.94K rows/s, 13.69 MB/s uncompressed, 6.20 MB/s compressed
Duration: 00:01:53s
Schemas dumped: 2
Tables dumped: 11
Uncompressed data size: 883.48 MB
Compressed data size: 400.76 MB
Compression ratio: 2.2
Rows written: 4582747
Bytes written: 400.76 MB
Average uncompressed throughput: 7.78 MB/s
Average compressed throughput: 3.53 MB/s

util.dumpInstance()备份整个实例

# 使用msyqlsh连接实例
# mysqlsh root@127.0.0.1:3306
# 只备份sbtest库
 MySQL  127.0.0.1:3306  sbtest  JS >  util.dumpSchemas(['sbtest'], '/tmp/sbtest',{"threads":8})
Acquiring global read lock
All transactions have been started
Locking instance for backup
Global read lock has been released
Writing global DDL files
Preparing data dump for table `sbtest`.`sbtest1`
Writing DDL for schema `sbtest`
Writing DDL for table `sbtest`.`sbtest1`
Writing DDL for table `sbtest`.`sbtest10`
Writing DDL for table `sbtest`.`sbtest2`
Writing DDL for table `sbtest`.`sbtest3`
Writing DDL for table `sbtest`.`sbtest4`
Writing DDL for table `sbtest`.`sbtest5`
Writing DDL for table `sbtest`.`sbtest6`
Data dump for table `sbtest`.`sbtest1` will be chunked using column `id`
Preparing data dump for table `sbtest`.`sbtest10`
Data dump for table `sbtest`.`sbtest10` will be chunked using column `id`
Preparing data dump for table `sbtest`.`sbtest2`
Data dump for table `sbtest`.`sbtest2` will be chunked using column `id`
Preparing data dump for table `sbtest`.`sbtest3`
Data dump for table `sbtest`.`sbtest3` will be chunked using column `id`
Preparing data dump for table `sbtest`.`sbtest4`
Data dump for table `sbtest`.`sbtest4` will be chunked using column `id`
Preparing data dump for table `sbtest`.`sbtest5`
Data dump for table `sbtest`.`sbtest5` will be chunked using column `id`
Preparing data dump for table `sbtest`.`sbtest6`
Data dump for table `sbtest`.`sbtest6` will be chunked using column `id`
Preparing data dump for table `sbtest`.`sbtest7`
Data dump for table `sbtest`.`sbtest7` will be chunked using column `id`
Preparing data dump for table `sbtest`.`sbtest8`
Data dump for table `sbtest`.`sbtest8` will be chunked using column `id`
Preparing data dump for table `sbtest`.`sbtest9`
Data dump for table `sbtest`.`sbtest9` will be chunked using column `id`
Running data dump using 8 threads.
NOTE: Progress information uses estimated values and may not be accurate.
Writing DDL for table `sbtest`.`sbtest7`
Writing DDL for table `sbtest`.`sbtest8`
Writing DDL for table `sbtest`.`sbtest9`
Data dump for table `sbtest`.`sbtest1` will be written to 1 file
Data dump for table `sbtest`.`sbtest3` will be written to 3 files
Data dump for table `sbtest`.`sbtest10` will be written to 3 files
Data dump for table `sbtest`.`sbtest2` will be written to 3 files
Data dump for table `sbtest`.`sbtest5` will be written to 3 files
Data dump for table `sbtest`.`sbtest6` will be written to 3 files
Data dump for table `sbtest`.`sbtest4` will be written to 3 files
Data dump for table `sbtest`.`sbtest9` will be written to 3 files
Data dump for table `sbtest`.`sbtest7` will be written to 3 files
Data dump for table `sbtest`.`sbtest8` will be written to 3 files
1 thds dumping - 113% (4.58M rows / ~4.05M rows), 99.32K rows/s, 19.15 MB/s uncompressed, 8.69 MB/s compressed
Duration: 00:00:32s
Schemas dumped: 1
Tables dumped: 10
Uncompressed data size: 883.46 MB
Compressed data size: 400.76 MB
Compression ratio: 2.2
Rows written: 4582718
Bytes written: 400.76 MB
Average uncompressed throughput: 27.58 MB/s
Average compressed throughput: 12.51 MB/s

参考文档

  • https://dev.mysql.com/doc/mysql-shell/8.0/en/mysql-shell-utilities-dump-instance-schema.html
十五十六
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
mysql util_新特性解读 | MySQL 8.0 shell util 特性
weixin_42118701的博客
01-27 379
作者：杨涛涛本文介绍 MySQL8.0 shell 子模块 Util 的两个导入特性 importTable/import_table(JS和python 版本的命名差异)、importJson/import_json的使用方法。其中import_table 是通过传统 MySQL 协议来通信，Import_json 是通过 X 插件协议来通信。MySQL 一直以来提供导入文件 SQL 命令 lo...
MYSQL 数据迁移利器 MYSQLSH
最新发布
霍然的专栏
05-17 822
将数据库从mysql5.7 迁移到mysql8.0. mysqlsh 支持mysql5.7以上版本。
十大shell脚本任务（二）备份和恢复脚本
Bobowen的博客
12-12 1226
备份脚本可以自动化这一过程，确保数据的连续性和完整性。：在数据丢失或损坏的情况下，备份脚本可以与恢复脚本结合使用，快速恢复数据。：脚本可以定制以满足特定需求，例如选择备份频率、指定备份文件的类型和位置。通过脚本化，可以轻松调整这些参数，而无需手动处理。一旦设置，脚本可以在无需额外干预的情况下运行，从而减少了对人力资源的需求。例如，在crontab中添加一条规则，可以每天晚上自动运行备份脚本。：这些命令用于生成文件的哈希值，可以用来验证备份文件的完整性。是一个用于快速同步文件的工具，可以用于创建备份。
mysql的util_新特性解读 | MySQL 8.0 shell util 特性
weixin_36003504的博客
01-28 423
作者：杨涛涛本文介绍 MySQL8.0 shell 子模块 Util 的两个导入特性 importTable/import_table(JS和python 版本的命名差异)、importJson/import_json的使用方法。其中import_table 是通过传统 MySQL 协议来通信，Import_json 是通过 X 插件协议来通信。MySQL 一直以来提供导入文件 SQL 命令 lo...
新特性解读 | MySQL 8.0 shell util 特性
ActionTech的博客
09-24 545
作者：杨涛涛 本文介绍 MySQL8.0 shell 子模块 Util 的两个导入特性 importTable/import_table(JS和python 版本的命名差异)、importJson/import_json的使用方法。其中import_table 是通过传统 MySQL 协议来通信，Import_json 是通过 X 插件协议来通信。 MySQL 一直以来提供导入文件 SQL 命...
MySQL Shell 8.0的Dump Utility备份与恢复
Sebastien23的博客
04-09 1152
MySQL Shell 8.0的Dump Utility特性支持实例、Schema、数据表三个级别的MySQL数据导出功能。MySQL Shell的实例备份特性可用于导出多个用户和Schema的数据。MySQL中的Schema可以近似理解为Database的概念。MySQL Shell的loadDump特性用于导入使用Dump Utility导出的备份。MySQL Shell的Schema备份特性可用于导出指定的多个库的多张表数据。MySQL Shell的表级别备份特性可用于导出指定的单个库的多张表数据。
MYSQL mysqlshell 新的备份MYSQL的方式，更快，更强，更高
sql server的专栏
07-08 365
MYSQL 从MYSQL 8 后，整体的管理方式相较于MYSQL 5.7 都有了大幅度的改变，在备份的方面MYSQL 8.021 后推出的备份方式，或者说导出的方式，通过新的方式来替换原来的mysqldump 。这里主要有几个模块1 table export utility2table export utiltity3parallel table impor...
linux下mysql数据库备份脚本
12-05
`mysqldump`是一个用于备份数据库的实用程序，它能将数据库结构和数据导出为SQL语句。 2. **选择要备份的数据库**：在脚本中指定需要备份的数据库名称，或者使用通配符（如`--all-databases`）备份所有数据库。 3....
shell实现自动备份mysql、整站数据的两个脚本分享
09-10
`mysqldump`是一个命令行实用程序，用于备份数据库或表。在脚本中，我们设置了数据库的相关参数，如用户名、密码、数据库名，然后使用`date`命令获取当前日期以便命名备份文件。备份文件被压缩成`.tar.gz`格式以节省...
mysql数据库自动定时备份
04-16
这个命令行实用程序能够创建数据库的SQL脚本，从而实现备份。以下是基本的`mysqldump`语法： ```bash mysqldump -u [username] -p[password] [database_name] > [backup_file.sql] ``` 在这里，`[username]`是你的...
shell脚本定时备份MySQL数据库数据并保留指定时间
09-08
`mysqldump`是一个实用程序，用于从MySQL服务器获取数据库或表的结构和数据的转储（即备份）。在本例中，我们看到一个名为`backupDB.sh`的脚本，它包含了备份过程的完整逻辑。 脚本中的变量定义了数据库连接信息，...
mysql备份方法
02-13
基于mysql-sh> util.dumpInstance（），percona xtrabackup和mysqldump进行mysql备份的示例和比较。 在当前示例中，备份存储在Azure blob容器中，并且带有日志文件的通知通过电子邮件发送。 mysql官方也存在mysqbackup实用程序，但是有可能仅在Enterprice许可下使用它，因此我目前无法比较mysqlbackup实用性速度。 但是如果需要的话-您可以使用rsync进行mysql datadir备份...作为最后一点:) 您可能会发现基于基于4个cpu，4GB RAM虚拟测试服务器上托管的950MB数据库的时间度量，并在文件中包含纯ssd存储 time-metrics-tests.txt 简而言之：mysqldump在单个线程中运行，对于生产中的大型数据库，最好使用mysql-sh util或percona xtr
mysqldump java远程备份mysql数据库 cmd备份
06-22
MySQL是世界上最流行的关系型数据库管理系统之一，而mysqldump工具是MySQL提供的一个命令行实用程序，用于备份数据库或导出数据。在这个5.6.12版本中，我们可以利用它进行远程数据库备份，这对于数据库管理和维护至...
MySQL史上最快逻辑备份工具
qq_40907977的博客
08-18 1626
MySQL Shell 8.0.21 增加了一种新的逻辑备份恢复方法，有更快的备份恢复效率，支持zstd实时压缩，支持分块并行导出，load data并行导入，还能备份到OCI的对象存储。 util.dumpInstance() 用于备份整个实例 util.dumpSchemas() 用于备份指定schema util.loadDump() 用于恢复备份 做了个对比测试，在零负载下mysql配置参数不变，备份/恢复相同schema，其中混合了大表和小表，看下这几种方式的实际效果如何。 对比结果 结论
mysqlShell常用汇总（管理mgr集群、备份恢复、导入导出）
liuzhijian2008x的专栏
11-18 2892
mysqlShell MGR
pm961 mysql_MySQL史上最快逻辑备份工具-爱可生
weixin_42372963的博客
01-28 620
原标题：MySQL史上最快逻辑备份工具-爱可生 MySQL Shell 8.0.21 增加了一种新的逻辑备份恢复方法，有更快的备份恢复效率，支持zstd实时压缩，支持分块并行导出，load data并行导入，还能备份到OCI的对象存储。util.dumpInstance() 用于备份整个实例util.dumpSchemas() 用于备份指定schemautil.loadDump() 用于恢复备份做...
gridcontrol值为0时设置为空_汇总：MySQL 8.0 运维便捷命令
weixin_39806288的博客
11-28 87
有人说目前为止8.0是最好的版本，我们来看看在运维方面MySQL 8.0带来了哪些便捷命令。自MySQL 8.0 GA版本发布以来，MySQL生态发生了很大的变化，推出了很多功能 ，有人说目前为止8.0是最好的版本。随之而来的在运维方面带来了很多便捷命令。下面选出日常运维常用的最便捷的4个命令：RESTART，PERSIST，RETAIN CURRENT PASSWORD，EXPLAIN。REST...
备份：关于mysqi的一些对比
Sean.Pu的专栏
11-13 368
mysqli->fetch_all 后面有三个参数，参数对比的返回结果如下： MYSQLI_BOTH:     [0] => Array         (             [0] => 1011             [ID] => 1011             [1] => Kudus             [Name] => Kudus
MySQL中如何选择合适的备份策略和备份工具
互联网架构小马的博客
10-28 257
数据库备份的重要性毋庸置疑，可以说，它是数据安全的最后一道防线。鉴于此，对于备份，我们通常会做以下要求： 多地部署对于核心数据库，我们通常有两地三中心的部署要求。对于备份来说，也是如此。一个备份应该有多个副本，每个副本存储在不同区域。 多介质部署一个备份的多个副本应存储在不同介质上，如磁盘和磁带，防止单一介质失效。 定期检查备份的有效性备份只是在做正确的事情，有没有把事情做对，还得依靠备份的有效性检查。 前两项，在条件允许的情况下，建议做。第三项必须做。 接下来，我们聊聊备份的相关话题，主要包括以下
shell脚本备份mysql_shell脚本备份MySQL数据库
08-28
### 回答1： 好的，以下是一个备份MySQL数据库的Shell脚本示例： ```bash #!/bin/bash # MySQL数据库备份脚本 # 设置备份文件名和目录 BACKUP_DIR="/var/backups/mysql" DATE=$(date +%Y-%m-%d_%H-%M-%S) DB_NAME="mydatabase" FILENAME="$BACKUP_DIR/$DB_NAME-$DATE.sql" # 设置MySQL登录信息 MYSQL_USER="root" MYSQL_PASSWORD="password" # 执行备份 mysqldump -u $MYSQL_USER -p$MYSQL_PASSWORD $DB_NAME > $FILENAME # 压缩备份文件 gzip $FILENAME # 删除7天前的备份文件 find $BACKUP_DIR -type f -name "*.gz" -mtime +7 -exec rm {} \; ``` 上述脚本将会备份名为 "mydatabase" 的MySQL数据库，并将备份文件保存在 "/var/backups/mysql" 目录下。脚本将创建一个新的备份文件名，格式为 "mydatabase-YYYY-MM-DD_HH-MM-SS.sql"，其中 "YYYY-MM-DD_HH-MM-SS" 是当前日期和时间。备份完成后，脚本将使用 gzip 压缩备份文件，并删除7天前的备份文件。 请注意，为了安全起见，建议将MYSQL_USER和MYSQL_PASSWORD的值设置为有效的MySQL用户名和密码，而不是将其硬编码在脚本中。 ### 回答2： shell脚本备份MySQL数据库是一种自动化的数据库备份方式，它通过编写shell脚本来实现备份任务的执行。下面是一个简单的用于备份MySQL数据库的shell脚本示例： #!/bin/bash # 设置备份目录 BACKUP_DIR="/opt/backup/db" # 设置MySQL登录信息 DB_USER="root" DB_PASSWORD="yourpassword" # 设置备份文件名 BACKUP_FILE="db_backup_$(date +%Y%m%d%H%M%S).sql" # 创建备份目录 mkdir -p $BACKUP_DIR # 备份MySQL数据库到指定目录 mysqldump -u $DB_USER -p$DB_PASSWORD --all-databases > $BACKUP_DIR/$BACKUP_FILE # 判断备份是否成功 if [ $? -eq 0 ]; then echo "MySQL数据库备份成功，备份文件名为：$BACKUP_FILE" else echo "MySQL数据库备份失败" fi 在上述脚本中，首先定义了备份目录、MySQL登录信息和备份文件名的变量。然后，通过mkdir命令创建备份目录。接下来，使用mysqldump命令将MySQL数据库备份到指定目录，并将备份文件命名为当前日期和时间。最后，通过判断mysqldump命令执行的返回值来确定备份是否成功，并输出相应的提示信息。 使用该脚本进行MySQL数据库备份只需在终端中执行bash命令加上脚本路径即可，如：bash /path/to/backup_mysql.sh。执行完毕后，备份文件将保存在指定的备份目录中。 这种shell脚本备份MySQL数据库的方式可以自动化执行备份任务，提高工作效率，同时也方便了备份文件的管理和查找。 ### 回答3： shell脚本备份MySQL数据库是通过编写一个脚本文件来实现自动备份和恢复MySQL数据库的操作。下面是一个简单的示例： #!/bin/bash # Shell脚本备份MySQL数据库 # 定义备份存储目录和时间戳 backup_dir="/path/to/backup" timestamp=$(date +%Y%m%d%H%M%S) # 定义MySQL数据库的连接参数 db_user="root" db_password="password" db_host="localhost" db_name="database_name" # 创建备份目录 if [ ! -d "$backup_dir" ]; then mkdir -p $backup_dir fi # 使用mysqldump命令备份数据库 mysqldump -u$db_user -p$db_password -h$db_host $db_name > $backup_dir/${db_name}_${timestamp}.sql # 检查备份是否成功 if [ $? -eq 0 ]; then echo "数据库备份成功！" else echo "数据库备份失败！" fi # 清理过期备份（保留最新的N个备份） backup_count=$(ls -l $backup_dir | grep -c "^-" 2>/dev/null) if [ $backup_count -gt 10 ]; then oldest_backup=$(ls -tr $backup_dir | head -1) rm -f $backup_dir/$oldest_backup fi # 恢复MySQL数据库（如果需要） # mysql -u$db_user -p$db_password -h$db_host -e "DROP DATABASE $db_name;" # mysql -u$db_user -p$db_password -h$db_host -e "CREATE DATABASE $db_name;" # mysql -u$db_user -p$db_password -h$db_host $db_name < $backup_dir/latest.sql 这个脚本的功能是备份指定的MySQL数据库，将备份文件保存到指定的目录中，并可根据需要恢复数据库。脚本中使用了mysqldump命令来导出数据库，并使用mysql命令来恢复数据库。备份文件保留最新的10个，超过数量的将自动删除最旧的备份文件。可以根据实际需求修改备份目录、数据库连接参数和保留备份数量等设置。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值