最近有几台线上数据库,硬盘比较吃紧,但是又不方便扩容和转移到其它机器。但是数据又比较重要,需要经常备份出来。

最早的做法是,在本地备份出完整的库,把备份库和binlog一并推到远程的某台备份主机上。但是因为最近空间吃紧,而备份库需要占用不小的空间。有没有其它的解决办法呢?

查看了mysqldump具备远程备份的功能,可以直接将远程数据备份到本地来,这样就可以大大的节省了远程数据库的磁盘空间。

所以我尝试写了一个备份脚本,再配合crontab定时执行,目前看来效果还不错。

线上环境稍加修改可直接使用,如有问题可以联系我O(∩_∩)O~

注意:此法多适用于内网,外网的话需要考虑数据量大小和带宽等网络因素。

脚本内容如下:

 
  
  1. #by cuiyuanrong  
  2. #QQ:295749093  
  3. #远程备份mysql数据和binlog日志到本地!  
  4.  
  5. mysql_user="admin" 
  6. mysql_password="admin_password" 
  7. remote_ips=`cat /data/shell_files/ips.txt`  
  8. mysql_port="3306" 
  9. TIME=`date '+%Y%m%d'`   
  10.  
  11. source /etc/profile  
  12. rm -f /data/shell_files/db.list   
  13. #循环每个IP 
  14. for remote_ip in $remote_ips  
  15. do
  16. #读取每个远程mysql服务器中的库名  
  17. echo "=========== $remote_ip `date '+%Y_%m_%d-%H:%M:%S'` ===========" >> /data/shell_files/history_mysql_backup.log  
  18. /app/mysql/bin/mysql --host="$remote_ip" --port="$mysql_port" --user="$mysql_user" --password="$mysql_password" << EOF > /data/shell_files/db.list  
  19. show databases;  
  20. exit  
  21. EOF  
  22. #用sed过滤掉无需备份的库 
  23.    sed -i '/Database\|information_schema\|performance_schema\|test/d' /data/shell_files/db.list  
  24. #创建所需的备份目录
  25.    mkdir -p /data/mysql_backup/$TIME/$remote_ip/data/  
  26.    mkdir -p /data/mysql_backup/$TIME/$remote_ip/binlog/  
  27. #循环备份每个库
  28.    for DB in `cat /data/shell_files/db.list`  
  29.    do  
  30.    echo "begin dump $DB `date '+%Y_%m_%d-%H:%M:%S'`" >> /data/shell_files/history_mysql_backup.log  
  31.    /app/mysql/bin/mysqldump --host="$remote_ip" --port="$mysql_port" --user="$mysql_user" --password="$mysql_password" --opt --flush-logs --master-data=2 --single-transaction --default-character-set=utf8 $DB | gzip -f > /data/mysql_backup/$TIME/$remote_ip/data/$DB.sql.gz  
  32.    echo "end dump $DB " >> /data/shell_files/history_mysql_backup.log  
  33.    done  
  34. #备份binlog日志文件          
  35.    echo "begin rsync binlogs $remote_ip" >> /data/shell_files/history_mysql_backup.log  
  36.    rsync -e 'ssh -p 22 -o StrictHostKeyChecking=no' -avz --progress --delete root@$remote_ip:/data/mysql/binlog/ /data/mysql_backup/$TIME/$remote_ip/binlog/  
  37.    echo "end rsync binlogs $remote_ip" >> /data/shell_files/history_mysql_backup.log  
  38.           
  39.    sleep 60  
  40. done