编写备份MySQL 脚本

已于 2024-06-01 16:24:50 修改
阅读量553 收藏 8
点赞数 3
分类专栏： 云原生 MySQL 文章标签： mysql 数据库 运维 linux
于 2024-06-01 15:24:26 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_68398469/article/details/139262213
版权

目录

环境准备

增量备份

增量备份和差异备份

完整代码如下

测试脚本是否正常

星期天运行脚本（完全备份）

星期一运备份脚本（增量备份）

星期二备份数据（其他天--增量备份）

星期三备份数据（差异备份）

使用第三方工具percona-xtrabackup


基于Innobackupex的MySQL备份脚本

环境准备

  • 操作系统: Linux（CentOS 7.9）。
  • MySQL: 已安装并运行着MySQL 5.7.35。
  • Innobackupex: Percona XtraBackup套件的一部分，用于物理备份InnoDB和MyISAM表。
  • Shell脚本: 将编写的自动化脚本。

增量备份


具体要求：

1、周日全备
2、周一至周六增量备份
3、备份使用backup用户

标题：自动化的MySQL数据库备份策略：结合Shell脚本与Innobackupex的实践

引言

在现代数据驱动的世界里，定期备份数据库是维护业务连续性和数据安全不可或缺的一环。本文将介绍一种利用Shell脚本和Percona XtraBackup工具中的innobackupex命令来实现MySQL数据库自动化备份的策略。我们的目标是设置一个灵活的备份计划，其中周日执行全量备份，而其他日子则执行增量备份，从而高效地管理存储空间并加快恢复速度。

Shell脚本详解

首先，让我们深入理解所提供的脚本。该脚本主要包含以下几个部分：

日期变量设置:

whichday=$(date +%u)  # 获取当前是一周中的第几天（1-7）
today=$(date +%F)     # 设置今日日期格式为YYYY-MM-DD
yesterday=$(date -d '-1 day' +%F)  # 计算昨日日期
Login='--user=backup --password=Openlab123! --no-timestamp'  # 定义备份用户认证信息

定义备份功能:

  • FULL(): 执行全量备份，使用innobackupex命令，备份保存到/db/full_YYYY-MM-DD目录。
  • INCR(): 执行增量备份，需要指定基于哪个目录的增量，这里使用前一天的全量或增量备份作为基础。

逻辑判断:

  • 如果今天是周日 (whichday 等于7)，执行FULL()函数，创建全量备份。
  • 如果今天是周一 (whichday 等于1)，执行INCR()函数，基于上周日的全量备份进行增量备份。
  • 其他日子，同样执行INCR()函数，但基于前一天的增量备份。

脚本执行与监控

  • 执行脚本: 将上述脚本保存为可执行文件，例如inno_bak.sh，并通过cron定时任务在每天的固定时间执行。
  • 日志与监控: 确保innobackupex的执行过程中产生的日志得到妥善保存和监控，以便于及时发现并解决问题。

注意事项

  • 权限与安全性: 确保用于备份的用户具有足够的权限，同时注意保护好备份脚本中的敏感信息，比如数据库用户名和密码。
  • 备份验证: 定期检查备份文件的完整性和可恢复性，避免灾难发生时才发现备份不可用。

完整代码：

#!/bin/bash

# 获取今天是一周中的第几天，1代表星期一，7代表星期日
whichday=$(date +%u)

# 获取今天的日期，格式为YYYY-MM-DD
today=$(date +%F)

# 计算并获取昨天的日期
yesterday=$(date -d '-1 day' +%F)

# 设置备份时使用的MySQL登录信息，包括用户名、密码及不使用时间戳的选项
Login='--user=backup --password=Openlab123! --no-timestamp'

# 定义函数：执行全量备份
function FULL()
{
    # 使用innobackupex命令执行全量备份，备份存放路径包含今天的日期
    innobackupex ${Login}  /db/full_${today}
}

# 定义函数：执行增量备份
function INCR()
{
    # 使用innobackupex命令执行增量备份，指定增量备份的存储路径和基于哪个目录的增量
    innobackupex --incremental ${Login} /db/incr_${today} --incremental-basedir=$1
}

# 根据今天是周中的哪一天来决定执行哪种备份
if [ ${whichday} -eq 7 ]  # 如果是周日
then
    FULL               # 执行全量备份
elif [ ${whichday} -eq 1 ]  # 如果是周一
then
    INCR /db/full_${yesterday}  # 执行增量备份，基于上周日的全量备份
else
    INCR /db/incr_${yesterday}  # 其他日子执行增量备份，基于前一天的增量备份
fi

[root@localhost db] ls  --检查要备份的目录是否有文件存在

 要想进行增量备份的前提是要有一次完全备份

先从周天开始

[root@localhost script] date -s "$(date -d '+1 day' +'%F %T')"
2024年 06月 02日 星期日 00:00:05 CST

# 该命令的目的是通过Shell脚本调整系统当前时间到明天的同一时刻。
# 为了实现这个目的，采用了两步走的策略：
# 第一步，计算明天的日期和当前时间；
# 第二步，使用计算出的日期时间设置系统时钟。

# 1. 使用 'date -d '+1 day'' 计算明天的日期：
#    - `date -d`: 是date命令中的一个选项，允许我们指定一个相对时间字符串来计算新的日期和时间。
#    - `'+1 day'`: 指定了时间偏移量，即从当前时间起加1天，用来计算明天的日期。

# 2. 结合 '%F %T' 格式化输出日期和时间：
#    - `'%F'`: 代表完整的日期格式，即年-月-日（例如，2024-06-02）。
#    - `'%T'`: 代表时间格式，即小时:分钟:秒（例如，00:00:05）。
#    这意味着我们不仅需要明天的日期，还需要保持当前的时间部分不变。

# 3. 使用命令替换（命令嵌套）：
#    - `$(...)` 是命令替换结构，它允许我们把一个命令的输出作为另一个命令的参数。
#    在这里，我们用明天的日期和时间（由内部的date命令计算得出）作为外部date命令的参数。

# 4. 最终执行 'date -s' 设置系统时间：
#    - `date -s`: 用于设置系统时间的选项，后面跟具体的日期和时间字符串。
#    - 通过前面的命令替换，我们现在有了一个精确的日期时间字符串（明天的日期加上当前时间），
#      并将其传递给这个选项，从而实现设置系统时间为明天相同时间的目的。

# 综上所述，整个命令的作用是将当前系统时间设置为明天此刻的时间，即在不影响当前时间的情况下，将日期向前推进一天。

运行脚本

查看是否成功备份

[root@localhost db] ls
full_2024-06-02

更改时间为星期一

[root@localhost script] date -s "$(date -d '+1 day' +'%F %T')"
2024年 06月 03日 星期一 00:02:42 CST

#再次运行脚本
[root@localhost script] bash inno_bak.sh 
full_2024-06-02  incr_2024-06-03


#星期二
[root@localhost script]# date -s "$(date -d '+1 day' +'%F %T')"
2024年 06月 04日 星期二 00:31:40 CST

[root@localhost db]# ls
full_2024-06-02  incr_2024-06-03  incr_2024-06-04

增量备份和差异备份

要求二：

周日完全备份
    周1-2增量备份
    周3差异备份
    周4-6增量备份

# 备份脚本
[root@localhost script] cp inno_bak.sh inno_bak_v2.sh
[root@localhost script] vim inno_bak_v2.sh

完整代码如下

判断语句改为case语句，因为是同一个变量判断不同值

#!/bin/bash

# 获取今天是一周中的第几天，1表示星期一，7表示星期日
whichday=$(date +%u)

# 获取今天的日期，格式为YYYY-MM-DD
today=$(date +%F)

# 计算并获取昨天的日期
yesterday=$(date -d '-1 day' +%F)

# 设置数据库备份时使用的登录信息，包括用户名、密码以及禁用时间戳的选项
Login='--user=backup --password=Openlab123! --no-timestamp'

# 定义全量备份函数
function FULL() {
    # 使用innobackupex执行全量备份到/db目录下以今天的日期为名称的子目录中
    innobackupex ${Login} /db/full_${today}
}

# 定义增量备份函数，需要传入上次备份的目录作为增量基础
function INCR() {
    # 执行增量备份到/db目录下以今天的日期为名称的子目录中，并指定增量的基准目录
    innobackupex --incremental ${Login} /db/incr_${today} --incremental-basedir=$1
}

# 根据今天是一周中的哪一天来选择执行相应的备份操作
case ${whichday} in
 7) # 如果是周日
    FULL    # 执行全量备份
    ;;
 1) # 如果是周一
    INCR /db/full_${yesterday}  # 执行基于上周日全量备份的增量备份
    ;;
 3) # 如果是周三
    INCR /db/full_$(date -d '-3 day' +'%F')  # 执行基于上上周五全量备份的增量备份
    ;;
 *) # 其他日子
    INCR /db/incr_${yesterday}  # 执行基于前一天增量备份的增量备份
    ;;
esac

该脚本设计了一套策略来自动执行MySQL数据库备份：

周日：执行一次全量备份，这是一周的起始点，为后续的增量备份提供基础。

周一：执行基于上周日全量备份的增量备份。

周三：特殊调整，执行基于上上周五的全量备份的增量备份，这个设定可能根据特定的业务需求或备份窗口制定。

其余日子：执行基于前一天增量备份的增量备份，保持每天的数据变化得到记录。

测试脚本是否正常

星期天运行脚本（完全备份）

# 设置时间
[root@localhost script] date -s "$(date -d '+1 day' +'%F %T')"
2024年 06月 02日 星期日 01:09:02 CST
# 删除之前备份的数据
[root@localhost script] rm -rf /db/
[root@localhost script] bash inno_bak_v2.sh 

# 查看是否备份成功
[root@localhost script] ls /db/
full_2024-06-02

星期一运备份脚本（增量备份）

增加数据

mysql> insert into aa(id) values(11);
Query OK, 1 row affected (0.00 sec)

mysql> select * from aa;
+------+
| id   |
+------+
|    1 |
|    2 |
|    3 |
|    4 |
|    5 |
|    6 |
|    7 |
|    8 |
|    9 |
|   10 |
|   11 |
+------+

# 设置时间
[root@localhost script] date -s "$(date -d '+1 day' +'%F %T')"
2024年 06月 03日 星期一 01:18:10 CST

# 运行脚本
[root@localhost script] bash inno_bak_v2.sh

# 检查是否备份成功
[root@localhost script] ls /db/
full_2024-06-02  incr_2024-06-03

星期二备份数据（其他天--增量备份）

增加数据

mysql> insert into aa(id) values(12);
Query OK, 1 row affected (0.00 sec)

运行脚本

# 设置时间
[root@localhost script] date -s "$(date -d '+1 day' +'%F %T')"
2024年 06月 04日 星期二 01:22:29 CST

# 运行脚本
[root@localhost script] bash inno_bak_v2.sh

# 查看是否备份成功
[root@localhost script] ls /db/
full_2024-06-02  incr_2024-06-03  incr_2024-06-04

星期三备份数据（差异备份）

增加数据

mysql> insert into aa(id) values(13);
Query OK, 1 row affected (0.00 sec)

运行脚本

# 设置时间
[root@localhost script] date -s "$(date -d '+1 day' +'%F %T')"
2024年 06月 05日 星期三 01:25:39 CST

# 运行脚本
[root@localhost script] bash inno_bak_v2.sh

# 查看脚本是否备份成功
[root@localhost script] ls /db/
full_2024-06-02  incr_2024-06-03  incr_2024-06-04  incr_2024-06-05

妍妍的宝贝
关注
专栏目录
【14】bat脚本备份mysql数据
欢迎你们到来，希望能帮到大家
05-20 311
bat脚本备份windows的mysql数据库，对sql语句进行压缩，并且保留30个备份文件，超过30个备份文件定期删除
mysql备份脚本mysql备份脚本
最新发布
03-13
MySQL数据库在IT行业中扮演...了解`mysqldump`工具，编写有效备份脚本，设置合理的备份策略，并结合自动化工具，可以为您的数据安全提供坚实保障。在实际操作中，还应注意安全性，如使用加密存储、限制脚本执行权限等。
定时备份的数据表 shell脚本（非常实用）
12-05
定时备份的数据表 shell脚本（非常实用），并且加上linux crontab。满足日常需求 ~~
mysql表备份脚本
weixin_34232363的博客
12-20 150
今天看了老男孩库表份脚本的视频，自己整理了一下#!/bin/bash HOSTNAME=root MYPASS=abcd1234 SOCK=/var/lib/mysql/mysql.sock DATE=$(date +%F) MYCMD="mysql -u$HOSTNAME -p$MYPASS -S $SOCK" MYDUMP="mysqldump -u$HOSTNAME -...
Mysql 数据库自动备份Shell脚本
天道酬勤
05-21 150
#!/bin/bash   #Shell Command For Backup MySQL Database Everyday Automatically By Crontab       USER=root   PASSWORD="123456"   DATABASE="test"   HOSTNAME="192.168.156.61"       WEBMASTER=tes...
MySQL数据库定时自动备份脚本
weixin_30819085的博客
11-14 425
Web系统，最重要的事项就是数据库的安全性和完整性。 定时做好备份，非常重要，千万不要在这个问题上偷懒。如果你的重要数据丢失了，会让你欲哭无泪。导出表结构和数据mysqldump -uroot -pmypassword --databases fansunion --result-file=/var/www/backup/fansunion-table-and-data.sql只导出表结...
mysql创建备份表脚本_MySQL 备份脚本（单库/分库分表）
weixin_42250528的博客
01-18 327
MySQL数据库分库备份数据库密码保存在/etc/my.cnf文件中，所以在执行与mysql相关的命令不需要输入密码分库备份思路：mysqldump db1 >db1.sql.gzmysqldump db2 >db2.sql.gz拿到库名mysql -e 'show databases' |sed '1d' |grep -v "_schema"1.注释版#!/bin/bash# ...
Linux自动备份MySQL数据库脚本代码
12-15
本文将深入探讨如何使用Linux脚本来自动备份MySQL数据库，以及这个特定的脚本代码的工作原理。 首先，我们要理解脚本的结构和功能。脚本的开头定义了两个变量：`mysql_pwd`用于存储MySQL的root用户的密码，`mysql_...
Windows服务器如何编写多个MySQL数据库定时备份脚本
02-23
1.Windows服务器下 2、设置每日定时备份多个数据库 3、备份到执行目录下 4、记录数据库状态及日志备份日志 5、可支持删除多少天前的备份
每天定时备份指定数据库并删除旧的备份
wqs_1994的博客
06-11 448
shell脚本： #! /bin/bash # MySQL用户 username="root" # MySQL密码 password="Rh123456" # 需要定时备份的数据表列表 dbNames=(dofront-mjj rh-ad rh-sq) # 每次的备份数据以日期创建文件夹存放，同时删除过期备份 DATE=`date -d "now" +%Y%m%d%H` ODATE=`date -d "-1 day" +%Y%m%d%H` backup_dir=/www/backup newdir=/w
数据库自动备份脚本
07-05
数据库自动备份脚本
oracle 数据库自动备份脚本
08-29
实现oracle 数据库自动备份+保留最新的7天数据+另一机器拷贝备份的脚本
oracle数据库自动备份脚本
09-01
racle数据库自动备份脚本
mysql创建备份表脚本_实现mysql单表备份的脚本总结
weixin_35500243的博客
01-18 317
1、备份ＤＢ中的数据到单表，以防止增加表后少备份了。 (Perl)#!/usr/bin/perl#　mysql meg#　wubxuse strict;use DBI;my $host='172.16.100.1';my $port='3306';my $user='root;my $passwd='';my $dsn="dbi:mysql:hostname=$host:port=$port";m...
【数据库表备份脚本参考】
guaiwuVC的博客
06-21 255
Mysql 表备份
mysql创建备份表脚本,MySQL备份脚本，应该这么写
weixin_31653131的博客
03-23 280
前言：数据库备份的重要性不言而喻，特别是在生产环境，任何数据的丢失都可能产生严重的后果。所以，无论什么环境，我们都应该有相应的备份策略来定时备份数据库。在 MySQL 中，比较常用的逻辑备份工具是 mysqldump，本篇文章将介绍 MySQL 定时备份的方法。1.制定合适的备份策略对于不同的数据库环境，我们应该考虑不同的备份策略。制定备份策略时，应考虑以下几点因素：物理备份还是逻辑备份。这个可以...
自动备份数据库脚本
努力在追梦的路上
05-27 1038
因为有很长时间没有备份数据库的数据，致使服务器瘫痪之后只能恢复到一个月前的数据，造成很多BookMark使用者的不便，所以决定写一个脚本来实现如下的功能
编写mysql定时备份脚本
03-25
在 Linux 系统下，我们可以基于 crontab 实现 MySQL 数据库的定时备份。在终端输入 crontab -e 命令可以进入 crontab 的编辑界面，接着输入以分、时、天、月、年组成的定时参数和备份的脚本执行命令，如下所示： ``...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

妍妍的宝贝

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值