在数据库的日常维护工作中,除了保证业务的正常运行以外,就是要对数据库进行备份,以免造成数据库的丢失,从而给企业带来重大经济损失。通常备份可以按照备份时数据库状态分为热备和冷备,按照备份数据库文件的大小分为增量备份、差异备份和全量备份。其中热备可以通过mysql replication主从复制进行实时备份,percona的xtrabackup以及mysql自带的mysqldump等,可以根据不同需求使用不同的备份方案。虽然在生产环境已经使用mysql replication主从复制,但是还需要在计划任务中添加运行shell脚本在夜间业务不繁忙时进行数据库的全量备份,以便在发生主从复制失败时,主从数据库大量数据不一致后的主从复制的重做,同时进行完全备份可以更加保证数据库的安全性。以下是我在生产环境中使用的一个全备脚本,它的基本功能:1.自动压缩备份mysql数据库.2.自动删除近10天前的备份文件
3.删除时显示删除进度(可选).
#!/bin/bash #Author absolutely.xu@gmail.com MAXIMUM_BACKUP_FILES=10 #最大备份文件数 BACKUP_FOLDERNAME="database_backup" #数据库备份文件的主目录 DB_HOSTNAME="localhost" #mysql所在主机的主机名 DB_USERNAME="root" #mysql登录用户名 DB_PASSWORD="123456" #mysql登录密码 DATABASES=( "openfire" "csp" #备份的数据库名 ) #========= echo "Bash Database Backup Tool" #CURRENT_DATE=$(date +%F) CURRENT_DATE=$(date +%F) #定义当前日期为变量 BACKUP_FOLDER="${BACKUP_FOLDERNAME}_${CURRENT_DATE}" #存放数据库备份文件的目录 mkdir $BACKUP_FOLDER #创建数据库备份文件目录 #统计需要被备份的数据库 count=0 while [ "x${DATABASES[count]}" != "x" ];do count=$(( count + 1 )) done echo "[+] ${count} databases will be backuped..." #循环这个数据库名称列表然后逐个备份这些数据库 for DATABASE in ${DATABASES[@]};do echo "[+] Mysql-Dumping: ${DATABASE}" echo -n " Began: ";echo $(date) if $(mysqldump -h ${DB_HOSTNAME} -u${DB_USERNAME} -p${DB_PASSWORD} ${DATABASE} > "${BACKUP_FOLDER}/${DATABASE}.sql");then echo " Dumped successfully!" else echo " Failed dumping this database!" fi echo -n " Finished: ";echo $(date) done echo echo "[+] Packaging and compressing the backup folder..." tar -cv ${BACKUP_FOLDER} | bzip2 > ${BACKUP_FOLDER}.tar.bz2 && rm -rf $BACKUP_FOLDER BACKUP_FILES_MADE=$(ls -l ${BACKUP_FOLDERNAME}*.tar.bz2 | wc -l) BACKUP_FILES_MADE=$(( $BACKUP_FILES_MADE - 0 )) #把已经完成的备份文件数的结果转换成整数数字 echo echo "[+] There are ${BACKUP_FILES_MADE} backup files actually." #判断如果已经完成的备份文件数比最大备份文件数要大,那么用已经备份的文件数减去最大备份文件数,打印要删除旧的备份文件 if [ $BACKUP_FILES_MADE -gt $MAXIMUM_BACKUP_FILES ];then REMOVE_FILES=$(( $BACKUP_FILES_MADE - $MAXIMUM_BACKUP_FILES )) echo "[+] Remove ${REMOVE_FILES} old backup files." #统计所有备份文件,把最新备份的文件存放在一个临时文件里,然后删除旧的文件,循环出临时文件的备份文件从临时目录里移到当前目录 ALL_BACKUP_FILES=($(ls -t ${BACKUP_FOLDERNAME}*.tar.bz2)) SAFE_BACKUP_FILES=("${ALL_BACKUP_FILES[@]:0:${MAXIMUM_BACKUP_FILES}}") echo "[+] Safeting the newest backup files and removing old files..." FOLDER_SAFETY="_safety" if [ ! -d $FOLDER_SAFETY ] then mkdir $FOLDER_SAFETY fi for FILE in ${SAFE_BACKUP_FILES[@]};do mv -i ${FILE} ${FOLDER_SAFETY} done rm -rf ${BACKUP_FOLDERNAME}*.tar.bz2 mv -i ${FOLDER_SAFETY}/* ./ rm -rf ${FOLDER_SAFETY} #以下显示备份的数据文件删除进度,一般脚本都是放在crontab里,所以我这里只是为了显示效果,可以不选择这个效果。 CHAR='' for ((i=0;$i<=100;i+=2)) do printf "Removing:[%-50s]%d%%\r" $CHAR $i sleep 0.1 CHAR=#$CHAR done echo fi
第1天备份数据库功能测试如下
10天以后,会自动保留最近10天的备份,10天以上会自动删除
模拟测试脚本功能,创建31天的备份文件如下
每天计划任务定时执行脚本保留最近10天的备份