【MySQL】MySQL分库定时备份脚本

原创 已于 2024-04-30 11:43:09 修改 · 1.2k 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#mysql #linux #centos #dba

于 2022-10-28 15:22:41 首次发布
博客介绍了在Ubuntu 22.04和OpenEuler系统下创建MySQL备份脚本，OpenEuler因不能在命令行显示输入密码而需用--defaults-extra-file参数引入选项文件登录。还设置了每天凌晨3:00的定时自动备份任务，以及创建备份记录库和记录表。

MySQL分库定时备份脚本

这个脚本在 Ubuntu 22.04 系统上运行没有问题，但是在 OpenEuler 总是提示访问失败。跟踪了一下，原来是不能再命令行显示的输入密码

一、创建一个 shell脚本文件

在 Ubuntu 22.04 运行的脚本

vim mysqb_ackup.sh

#!/bin/bash

# 以下配置信息请自己修改
mysql_user="root" #MySQL备份用户
mysql_password="*******" #MySQL备份用户的密码
mysql_host="localhost"
mysql_port="3306"
mysql_charset="utf8" #MySQL编码
backup_db_arr=("s_community_hc" "s_community_tt" "test_s_community" "test_tt") #要备份的数据库名称，多个用空格分开隔开 如("db1" "db2" "db3")
backup_location=/data/backup  #备份数据存放位置，末尾请不要带"/",此项可以保持默认，程序会自动创建文件夹
expire_backup_delete="ON" #是否开启过期备份删除 ON为开启 OFF为关闭
expire_days=60 #过期时间天数 默认为三天，此项只有在expire_backup_delete开启时有效

# 本行开始以下不需要修改
backup_time=`date +%Y%m%d%H%M`  #定义备份详细时间
backup_Ymd=`date +%Y-%m-%d` #定义备份目录中的年月日时间
backup_3ago=`date -d '3 days ago' +%Y-%m-%d` #3天之前的日期
backup_dir=$backup_location/$backup_Ymd  #备份文件夹全路径
welcome_msg="Welcome to use MySQL backup tools!" #欢迎语

# 判断MYSQL是否启动,mysql没有启动则备份退出
mysql_ps=`ps -ef |grep mysql |wc -l`
mysql_listen=`netstat -an |grep LISTEN |grep $mysql_port|wc -l`
if [ [$mysql_ps == 0] -o [$mysql_listen == 0] ]; then
        echo "ERROR:MySQL is not running! backup stop!"
        exit
else
        echo $welcome_msg
fi

# 连接到mysql数据库，无法连接则备份退出
mysql -h$mysql_host -P$mysql_port -u$mysql_user -p$mysql_password <<end
use mysql;
select host,user from user where user='root' and host='localhost';
exit
end

flag=`echo $?`

if [ $flag != "0" ]; then
        echo "ERROR:Can't connect mysql server! backup stop!"
        exit
else
        echo "MySQL connect ok! Please wait......"
        # 判断有没有定义备份的数据库，如果定义则开始备份，否则退出备份
        if [ "$backup_db_arr" != "" ];then
                #dbnames=$(cut -d ',' -f1-5 $backup_database)
                #echo "arr is (${backup_db_arr[@]})"
                logId=`mysql -h$mysql_host -P$mysql_port -u$mysql_user -p$mysql_password -sN -Dmysql_backup -e "INSERT INTO mysql_backup_log (mysql_host, start_time,  host) VALUES ('127.0.0.1', now(),  '127.0.0.1');SELECT LAST_INSERT_ID();"`

                for dbname in ${backup_db_arr[@]}
                do
                        echo "database $dbname backup start..."

                        `mkdir -p $backup_dir`
                        `mysqldump -h$mysql_host -P$mysql_port -u$mysql_user -p$mysql_password $dbname --default-character-set=$mysql_charset | gzip > $backup_dir/$dbname.sql.gz`
                        flag=`echo $?`
                        if [ $flag == "0" ];then
                                echo "database $dbname success backup to $backup_dir/$dbname.sql.gz"
                        else
                                echo "database $dbname backup fail!"
                        fi
                        
                done
                
                files=`ls $backup_dir|awk 'BEGIN{ret=""}{ret=ret","$0}END{print substr(ret,2)}'`
                mysql -h$mysql_host -P$mysql_port -u$mysql_user -p$mysql_password -sN -Dmysql_backup -e "update mysql_backup_log set end_time=now(),note='${files}' where id=$logId"


        else
                echo "ERROR:No database to backup! backup stop"
                exit
        fi
        # 如果开启了删除过期备份，则进行删除操作
        if [ "$expire_backup_delete" == "ON" -a  "$backup_location" != "" ];then
                 #`find $backup_location/ -type d -o -type f -ctime +$expire_days -exec rm -rf {} \;`
                 `find $backup_location/ -type d -mtime +$expire_days | xargs rm -rf`
                 echo "Expired backup data delete complete!"
        fi
        echo "All database backup success! Thank you!"
        exit
fi

在 OpenEuler 运行的脚本

OpenEuler 总是提示访问失败。跟踪了一下，原来是不能再命令行显示的输入密码 。只能通过 --defaults-extra-file 参数，引入 MySQL 选项文件，实现登录 。

vim my_file.cnf  
[client]
user=root
password=******
host=localhost


vim mysqb_ackup.sh

#!/bin/bash

# 以下配置信息请自己修改
mysql_user="root" #MySQL备份用户

mysql_password="******" #MySQL备份用户的密码
mysql_host="localhost"
mysql_port="3306"
mysql_charset="utf8" #MySQL编码
backup_db_arr=("db1" "db2" "db3") #要备份的数据库名称，多个用空格分开隔开 如("db1" "db2" "db3")
backup_location=/data/mysql_backup  #备份数据存放位置，末尾请不要带"/",此项可以保持默认，程序会自动创建文件夹
expire_backup_delete="ON" #是否开启过期备份删除 ON为开启 OFF为关闭
expire_days=60 #过期时间天数 默认为三天，此项只有在expire_backup_delete开启时有效

# 本行开始以下不需要修改
backup_time=`date +%Y%m%d%H%M`  #定义备份详细时间
backup_Ymd=`date +%Y-%m-%d` #定义备份目录中的年月日时间
backup_3ago=`date -d '3 days ago' +%Y-%m-%d` #3天之前的日期
backup_dir=$backup_location/$backup_Ymd  #备份文件夹全路径
welcome_msg="Welcome to use MySQL backup tools!" #欢迎语

# 判断MYSQL是否启动,mysql没有启动则备份退出
mysql_ps=`ps -ef |grep mysql |wc -l`
mysql_listen=`netstat -an |grep LISTEN |grep $mysql_port|wc -l`
if [ [$mysql_ps == 0] -o [$mysql_listen == 0] ]; then
        echo "ERROR:MySQL is not running! backup stop!"
        exit
else
        echo $welcome_msg
fi

# 确保选项文件的路径正确
MYSQL_OPT_FILE=~/my_file.cnf

# 检查选项文件是否存在
if [ ! -f "$MYSQL_OPT_FILE" ]; then
    echo "MySQL 选项文件不存在: $MYSQL_OPT_FILE"
    exit 1
fi

# 连接到mysql数据库，无法连接则备份退出

# echo "mysql -h${mysql_host}  -u${mysql_user} -p${mysql_password}"

# mysql -h$mysql_host  -u$mysql_user -p$mysql_password <<end
# use mysql;
# select host,user from user where user='root' and host='localhost';
# exit
# end


mysql --defaults-extra-file="$MYSQL_OPT_FILE" <<end
use mysql;
select host,user from user where user='root' and host='localhost';
exit
end

flag=`echo $?`

if [ $flag != "0" ]; then
        echo "ERROR:Can't connect mysql server! backup stop!"
        exit
else
        echo "MySQL connect ok! Please wait......"
        # 判断有没有定义备份的数据库，如果定义则开始备份，否则退出备份
        if [ "$backup_db_arr" != "" ];then
                #dbnames=$(cut -d ',' -f1-5 $backup_database)
                #echo "arr is (${backup_db_arr[@]})"
                logId=`mysql --defaults-extra-file="$MYSQL_OPT_FILE"  -sN -Dmysql_backup -e "INSERT INTO mysql_backup_log (mysql_host, start_time,  host) VALUES ('127.0.0.1', now(),  '127.0.0.1');SELECT LAST_INSERT_ID();"`

                for dbname in ${backup_db_arr[@]}
                do
                        echo "database $dbname backup start..."

                        `mkdir -p $backup_dir`
                        `mysqldump --defaults-extra-file="$MYSQL_OPT_FILE" -B $dbname --default-character-set=$mysql_charset | gzip > $backup_dir/$dbname.sql.gz`
                        flag=`echo $?`
                        if [ $flag == "0" ];then
                                echo "database $dbname success backup to $backup_dir/$dbname.sql.gz"
                        else
                                echo "database $dbname backup fail!"
                        fi
                        
                done
                
                files=`ls $backup_dir|awk 'BEGIN{ret=""}{ret=ret","$0}END{print substr(ret,2)}'`
                mysql --defaults-extra-file="$MYSQL_OPT_FILE"  -sN -Dmysql_backup -e "update mysql_backup_log set end_time=now(),note='${files}' where id=$logId"


        else
                echo "ERROR:No database to backup! backup stop"
                exit
        fi
        # 如果开启了删除过期备份，则进行删除操作
        if [ "$expire_backup_delete" == "ON" -a  "$backup_location" != "" ];then
                 #`find $backup_location/ -type d -o -type f -ctime +$expire_days -exec rm -rf {} \;`
                 `find $backup_location/ -type d -mtime +$expire_days | xargs rm -rf`
                 echo "Expired backup data delete complete!"
        fi
        echo "All database backup success! Thank you!"
        exit
fi

二、 定时任务

设置每天凌晨3:00定时自动备份

crontab -e

00 03 * * * /root/mysql_backup.sh

三、创建备份记录库和记录表

create  database mysql_backup

CREATE TABLE `mysql_backup_log` (
  `id` bigint(20) NOT NULL AUTO_INCREMENT,
  `mysql_host` varchar(30) NOT NULL,
  `start_time` datetime DEFAULT NULL,
  `end_time` datetime DEFAULT NULL,
  `host` varchar(30) DEFAULT NULL,
  `note` varchar(255) DEFAULT NULL,
  PRIMARY KEY (`id`)
) ;
Mysql定时备份脚本
u013938578的博客
10-20 1156
#!/bin/bash mysql_user="root" #MySQL备份用户 mysql_password="123456" #MySQL备份用户的密码 mysql_host="222.74.0.138" mysql_port="3306" mysql_charset="utf8" backup_db_arr=("workport" "jeecms20201201") backup_location=/home/mysqlback expire_backup_delete="ON" ...
linux mysql定时增量备份脚本_MySQL全量备份和增量备份的脚本实现定时计划任务，以及分库备份脚本...
weixin_42099151的博客
01-19 577
全量备份脚本注：有些路径可根据自己的实际情况加以修改[root@centos7 ~/mysqlbakup]#vim quanbei.sh#! /bin/bashSTORE_NAME=`date +%m%d`STORE_DIR='/data/mysqlbackup'#定义备份的目录exec1>/data/mysqlbackup/bak.log 2>&1echo mysqlbak ...
mysql定时备份脚本
08-11
用于Linux系统下的mysql数据库定时备份
【运维】【实战】[数据备份]----定时备份公司重要mysql数据库（windows脚本）
最新发布
朱朱博客，分享技术
09-18 533
│├── mysql_backup_schedule.bat # 调度程序，负责任务调度，定时执行–> 备份程序1 、备份程序2├── mysql_backup1.bat #备份程序1├── mysql_backup2.bat #备份程序2 （可以复制配置多个 3/4/5/6/7）
mysql定时备份(linux脚本).zip
08-10
linux中mysql定时备份shell脚本,生产环境中使用过，只需要脚本中相应的ip地址、端口、账号和密码就可以使用
Linux定时备份MYSQL数据
热门推荐
exodus3的博客
10-27 1万+
创建文件夹 存放脚本 和 备份sql mkdir backup cd backup mkdir data vi backup.sh #!/bin/bash # 以下配置信息请自己修改 mysql_user="USER" #MySQL备份用户 mysql_password="PASSWORD" #MySQL备份用户的密码 mysql_host="localhost" mysql_port="...
MySQL定时备份脚本
weixin_33750452的博客
03-15 116
2019独角兽企业重金招聘Python工程师标准>>> ...
linux定时备份MySQL数据库并删除以前的备份文件(推荐)
09-08
【Linux定时备份MySQL数据库并删除旧备份】 在Linux系统中，定期备份MySQL数据库是一项重要的维护工作，以确保数据的安全性和可恢复性。本教程将详细讲解如何设置Linux定时任务来自动备份MySQL数据库，并且在备份...
MySQL（Docker） 自动备份 Shell 脚本
10-23
今天这个备份分二个版本一个是linux上直接安装的mysql，另一种是docker上安装的mysql。基本操作都一样只是备份sql语句不同而已。可以选择设置需要备份的库，自动备份压缩，自动删除 7 天前的备份，需要使用 crontab ...
mysql数据库每天凌晨3点备份数据库的脚本
01-15
总的来说，这个`DB_backup.sh`脚本结合Linux的`crontab`服务，提供了一个简单但实用的MySQL数据库定时备份解决方案。通过调整脚本，可以根据实际需求进行定制，比如备份频率、备份保留天数、备份类型（全量或增量）...
MySQL定时备份（全量备份+增量备份）
mzl_sx的博客
03-17 1366
说明产品上线后，数据非常非常重要，万一哪天数据被误删，那么就gg了，准备跑路吧。所以要对线上的数据库定时做。增量备份的优点是没有重复数据，备份量不大，时间短。但缺点也很明显，需要建立在上次完全备份及完全备份之后所有的增量才能恢复。MySQL没有提供直接的增量备份方法，但是可以通过mysql二进制日志间接实现增量备份。
MySQL分库备份脚本
Testder探索者
07-13 359
MySQL分库备份 #!/bin/bash #Date: 2018/7/13 #Author: Testder #Mail: 10000@testder.cn #Version: 1.0 # Each database that needs to be backed up cat &amp;amp;amp;amp;amp;amp;amp;amp;gt; /tmp/bak.txt &amp;amp;amp;amp;amp;amp;amp;amp;lt;&amp;amp;amp;am
mysql 数据备份和还原
weixin_30532369的博客
03-14 238
使用mysqldump命令备份 使用root用户备份test数据库下的person表 mysqldump -u root -p test person > D:\backup.sql 备份多个数据库 语法： mysqldump -u username -p --databases dbname2 dbname2 > Backup.sql 加上了--databases选项，然后后...
MySQL数据库定时备份脚本
weixin_45100257的博客
12-29 2939
MySQL数据库定时备份脚本
mysql数据定时备份脚本
fmi110的博客
09-22 359
定时备份运行在docker容器中的mysql数据库，保留最近10天的备份。
mysql定时脚本_MySql定时备份脚本
weixin_29092031的博客
01-20 423
shell脚本mysql_backup_test_backup.sh#!/bin/bash# 设置mysql的登录用户名和密码(根据实际情况填写)mysql_user="***"mysql_password="****"mysql_host="localhost"mysql_port="3306"mysql_charset="utf8mb4"# 备份文件存放地址(根据实际情况填写)backup_l...
Mysql 定时备份脚本
qiqj的博客
11-21 826
mysql备份原理：mysqldump -uroot -p pass db > xxx.sql 定时备份即是在Mysql的生产环境中启动一个定时任务，每隔一段时间使用mysqldump工具执行一次备份。1.安装crontab crontab命令用来将crontab文件提交给cron进程执行 yum install -y vixie-cronyum install -y crontabs 等到操
评论 5
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

iHero

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值