1、数据备份的重要性
■ 在生产环境中,数据的安全性至关重要
■ 任何数据的丢失都可能产生严重的后果
■ 造成数据丢失的原因
● 程序错误
● 人为操作错误
● 运算错误
● 磁盘故障
● 灾难(如火灾、地震)和盗窃
1.1、数据库备份的分类
■ 从物理与逻辑的角度,备份可分为
● 物理备份:对数据库操作系统的物理文件(如数据文件、日志文件等)的备份
◆ 物理备份方法
冷备份(脱机备份) : 是在关闭数据库的时候进行的
热备份(联机备份) : 数据库处于运行状态,依赖于数据库的日志文件
温备份:数据库锁定表格(不可写入但可读)的状态下进行备份操作
● 逻辑备份:对数据库逻辑组件(如:表等数据库对象)的备份
■ 从数据库的备份策略角度,备份可分为
● 完全备份:每次对数据库进行完整的备份
● 差异备份:备份自从上次完全备份之后被修改过的文件
● 增量备份:只有在上次完全备份或者增量备份后被修改的文件才会被备份
1.2、常见的备份方法
■ 物理冷备
● 备份时数据库处于关闭状态,直接打包数据库文件
● 备份速度快,恢复时也是最简单的
■ 专用备份工具mydump或mysqlhotcopy
● mysqldump常用的逻辑备份工具
● mysqlhotcopy仅拥有备份MyISAM和ARCHIVE表
■ 启用二进制日志进行增量备份
● 进行增量备份,需要刷新二进制日志
● 日志生成条件:1.服务重启,2.刷新日志,3.超过存储容量
■ 第三方工具备份
● 免费的MySQL热备份软件Percona XtraBackup
1.21、MySQL完全备份
■ 是对整个数据库、数据库结构和文件结构的备份
■ 保存的是备份完成时刻的数据库
■ 是差异备份与增量备份的基础
■ 优点
● 备份与恢复操作简单方便
■ 缺点
● 数据存在大量的重复
● 占用大量的备份空间
● 备份与恢复时间长
1.3、数据库完全备份分类
■ 物理冷备份与恢复
● 关闭MySQL数据库
● 使用tar命令直接打包数据库文件夹
● 直接替换现有MySQL目录即可
■ mysqldump备份与恢复
● MySQL自带的备份工具,可方便实现对MySQL的备份
● 可以将指定的库、表导出为SQL脚本
● 使用命令mysql导入备份的数据
1.3.1、MySQL物理冷备份及恢复
■ 物理冷备份
[root@localhost ~]# systemctl stop mysqld #先关闭数据库,之后打包备份
[root@localhost ~]# mkdir /backup
[root@localhost ~]# tar zcf /backup/mysql all-$(date +%F).tar.gz /usr/local/mysql/data/
■ 恢复数据库
[root@localhost ~]# mkdir bak
[root@localhost ~]# mv /usr/local/mysql/data/ /bak/
[root@localhost ~]# mkdir restore
[root@localhost ~]# tar zxf /backup/mysql all-2020-01-02.tar.gz -C restore/ #恢复数据库,采用将备份数据,mv成线上库文件夹的方式
[root@localhost ~]# mv restore/usr/local/mysql/data/ /usr/local/mysqI/
[root@localhost ~]# systemctl start mysqld
■ 备份及恢复流程
1.3.1.1、 创建数据库数据
mysql> create database bf; #创建数据库
mysql> use bf; #使用数据库
mysql> create table a(id int(5)); #创建表并设置数据
mysql> desc a; #描述表的结构
mysql> exit #退出
1.3.1.2、 打包备份数据库数据
[root@mysql1 ~]# systemctl stop mysqld #关闭数据库
[root@mysql1 ~]# tar zcvf /opt/mysql_all-$(date +%F).tar.gz /usr/local/mysql/data #对当天的文件进行打包,前面时文件目标地址,后面是文件来源,中间是当天日期
[root@mysql1 ~]# cd /opt/
[root@mysql1 opt]# ls -lh
1.3.1.3、模拟数据库损坏
[root@mysql1 opt]# systemctl start mysqld #开启数据库
[root@mysql1 opt]# mysql -uroot -p123456 #登录数据库
mysql> show databases; #查看数据库
mysql> drop database bf; #删除数据库
mysql> show databases; #查看数据库
mysql> exit #退出数据库
1.3.1.4、 恢复数据
[root@mysql1 opt]# systemctl stop mysqld #关闭数据库
[root@mysql1 opt]# tar zxvf mysql_all-2020-12-28.tar.gz #解压缩之前备份的数据库文件
[root@mysql1 opt]# ls -lh
[root@mysql1 opt]# mkdir mysql_old #创建目录
[root@mysql1 opt]# mv /usr/local/mysql/data/ mysql_old/ #剪切备份的文件
[root@mysql1 opt]# mv usr/local/mysql/data/ /usr/local/mysql/ #剪切破坏后产生的新的数据文件
[root@mysql1 opt]# cd /usr/local/mysql/
[root@mysql1 mysql]# ls -lh
[root@mysql1 mysql]# cd data
[root@mysql1 data]# ls -lh
[root@mysql1 data]# date
[root@mysql1 data]# cd
[root@mysql1 ~]# systemctl start mysqld #开启数据库
[root@mysql1 ~]# mysql -uroot -p123456 #登录数据库
mysql> show databases; #查看数据库
mysql> use bf; #使用数据库
mysql> show tables; #查看数据库中的表
mysql> desc a; #查看表结构
mysql> exit
1.3.2、mysqldump备份数据库
■ mysqldump命令对单个库进行完全备份
mysqldump -u用户名-p [密码] [选项] [数据库名] > /备份路径/备份文件名
■ 单库备份的示例
mysqldump -u root -p auth > /backup/auth.sql
mysqldump -u root -p mysql > /bakcup/mysql.sql
■ mysqldump命令对多个库进行完全备份
mysqldump -u用户名-p [密码] [选项] --databases 库名1 [库名2]... >
/备份路径/备份文件名
■ 多库备份的示例
mysqldump -u root -p --databases auth mysql > /backup/databases-
auth-mysql.sql
■ 对所有库进行完全备份
mysqldump -u用户名-p [密码] [选项] -all-databases > /备份路径/备份文件名
■ 所有库备份的示例
mysqldump -u root -p --all-databases > /backup/all-data.sql
■ 备份及恢复流程
1.3.2.1、创建数据库数据
mysql> show databases; #查看数据库
mysql> use bf; #使用数据库
mysql> show tables; #查看表
mysql> insert into a values(1); #插入数据记录
mysql> insert into a values(2); #插入数据记录
mysql> select * from a; #查询表中所有字段
mysql> show databases;
mysql> use aaa;
mysql> show tables;
mysql> select * from cj;
1.3.2.2、备份数据
mysql> exit
[root@mysql1 ~]# mkdir /backup
[root@mysql1 ~]# mysqldump -uroot -p123456 aaa > /backup/aaa-$(date +%F).sql
mysqldump: [Warning] Using a password on the command line interface can be insecure. # 带明文密码,所以提示不安全
[root@mysql1 ~]# mysqldump -uroot -p --all-databases > /backup/all-databases-$(date +%F).sql
Enter password: #不带密码,所以要输出密码
[root@mysql1 ~]# cd /backup
[root@mysql1 backup]# ls -lh
[root@mysql1 backup]# vi aaa-2020-12-28.sql #查看数据库'aaa'的备份信息
[root@mysql1 backup]# vi all-databases-2020-12-28.sql #查看备份的所有数据库信息
1.3.3 恢复数据库
■ 使用mysqldump导出的脚本,可使用导入的方法
● source命令
● mysql命令
■ 使用source恢复数据库的步骤
● 登录到MySQL数据库
● 执行source备份sql脚本的路径
■ source 恢复的示例
MySQL [(none)]> source /backup/all-data.sql
1.3.3.1、使用source命令恢复数据
1.3.3.2、模拟数据库损坏
[root@mysql1 ~]# mysql -uroot -p123456 #登录数据库
mysql> show databases; #查看数据库
mysql> drop database aaa; #删除数据库'aaa'
mysql> show databases; #查看数据库
1.3.3.3、恢复数据
mysql> create database aaa; #创建同名数据库
mysql> use aaa; #使用这个数据库
Database changed
mysql> source /backup/aaa-2020-12-28.sql #使用source命令恢复数据
mysql> show databases;
mysql> use aaa;
Database changed
mysql> show tables;
mysql> select * from cj;
1.3.4、使用mysql命令恢复数据
■ 使用mysql命令恢复数据
mysql -u 用户名 -p [密码] <库备份脚本的路径
■ mysqI命令恢复的示例
mysql -u root -p < /backup/all-data.sql
1.3.4.1、模拟数据库损坏
mysql> show databases; #查看数据库
mysql> drop database aaa; #删除'aaa'数据库
mysql> show databases; #查看数据库
mysql> create database aaa; #新建同名数据库
mysql> exit
1.3.4.2、恢复数据
[root@mysql1 ~]# mysql -uroot -p123456 < /backup/all-databases-2020-12-28.sql
[root@mysql1 ~]# mysql -uroot -p123456
mysql> show databases;
mysql> use aaa;
mysql> show tables;
mysql> select * from cj;
2、恢复表的操作
■ 恢复表时同样可以使用source或者mysql命令
■ source恢复表的操作与恢复库的操作相同
■ 当备份文件中只包含表的备份,而不包括创建库的语句时,必须指定库名,且目标库必须存在
mysql -u 用户名 -p [密码] < 表备份脚本的路径
mysql -u root -p mysql < /backup/mysql-user.sql
■ 在生产环境中,可以使用Shell脚本自动实现定时备份
2.1、备份及恢复表的流程
2.1.1、 创建数据库数据
mysql> show databases;
mysql> use aaa;
mysql> create table b(id int(1));
mysql> insert into b values(1),(2);
mysql> select * from b;
mysql> show tables;
mysql> exit
2.1.2、 备份数据并模拟数据库损坏删除表b
[root@mysql1 ~]# mysqldump -uroot -p123456 aaa b > /opt/aaa-b.sql #备份数据库中的表b到opt目录下生成.sql的文件
[root@mysql1 ~]# mysql -uroot -p123456 #登录数据库
mysql> use aaa; #使用数据库
mysql> show tables;
mysql> drop table b; #删除表b
mysql> show tables;
2.1.3、恢复数据
mysql> source /opt/aaa-b.sql #使用source恢复数据
mysql> select * from b;
mysql> show tables;
注:备份库里的某张表时,应该针对损坏的表删除,使用原来数据库,重新source备份的sql可以实现,不需要删除整个库,只需删除相应的表就行了,进行备份。
3、MySQL增量备份
■ 使用mysqldump进行完全备份存在的问题
● 备份数据中有重复数据
● 备份时间与恢复时间过长
■ 是自上一次备份后增加/变化的文件或者内容
■ 特点
● 没有重复数据,备份量不大,时间短
● 恢复需要上次完全备份及完全备份之后所有的增量备份才能恢复,而且要对所有增量备份进行逐个反推恢复
■ MySQL没有提供直接的增量备份方法
■ 可通过MySQL提供的二进制日志间接实现增量备份
■ MySQL二进制日志对备份的意义
● 二进制日志保存了所有更新或者可能更新数据库的操作
● 二进制日志在启动MySQL服务器后开始记录,并在文件达到max_binlog_ size所设置的大小或者接收到fush logs命令后,或者服务重启会重新创建新的日志文件
● 只需定时执行flush logs方法重新创建新的日志,生成二进制文件序列,并及时把这些日志保存到安全的地方就完成了一个时间段的增量备份
3.1、MySQL数据库增量恢复
■ 一般恢复
● 将所有备份的二进制日志内容全部恢复
■ 基于位置恢复
● 数据库在某一时间点可能既有错误的操作也有正确的操作
● 可以基于精准的位置跳过错误的操作
■ 基于时间点恢复
● 跳过某个发生错误的时间点实现数据恢复
3.1.1、基于时间点恢复数据实验
3.1.1.1、开启二进制日志文件
[root@mysql1 ~]# vi /etc/my.cnf #编辑配置文件
[root@mysql1 ~]# systemctl restart mysqld #重启服务,生成日志文件
[root@mysql1 ~]# cd /usr/local/mysql/data #切换目录,查看日志
[root@mysql1 data]# ls -lh
3.1.1.2、查看二进制日志内容
[root@mysql1 data]# cd
[root@mysql1 ~]# mysqlbinlog --no-defaults --base64-output=decode-rows -v /usr/local/mysql/data/mysql_bin.000001
--no-defaults:解决utf-8报错
--base64-output=decode-rows:解决日志乱码
-v:输出文件指向
3.1.1.3、进入数据库,创建数据
[root@mysql1 ~]# mysql -uroot -p123456 #登录数据库
mysql> show databases; #查看数据库
mysql> use aaa; #使用数据库
mysql> show tables; #查看所有表
mysql> select * from cj; #查询表中所有字段
mysql> insert into cj values(5,18,'zhuqi',70); #插入数据记录
mysql> insert into cj values(8,19,'zhanglin',60); #插入数据记录
mysql> select * from cj; #查询表中所有字段
mysql> exit #退出
3.1.1.4、对数据进行完全备份
[root@mysql1 ~]# mysqldump -uroot -p123456 aaa > /backup/aaa-cj.sql #对数据库进行完全备份
[root@mysql1 ~]# cd /backup #查看备份信息
[root@mysql1 backup]# ls -lh
[root@mysql1 backup]# mysqladmin -uroot -p flush-logs #刷新日志,产生新的日志
[root@mysql1 backup]# cd /usr/local/mysql/data/ #查看新生成的日志
[root@mysql1 data]# ls -lh
3.1.1.5、在完全备份基础上对数据进行增量备份(进行误操作)
[root@mysql1 data]# cd
[root@mysql1 ~]# mysql -uroot -p123456 #进入数据库
mysql> use aaa; #选择数据库
mysql> insert into cj values(11,18,'wanglin',80); #插入数据记录
mysql> delete from cj where name='zhousan'; #删除数据记录(误操作)
mysql> insert into cj values(12,19,'panqin',90); #插入数据记录
mysql> select * from cj;
mysql> exit
3.1.1.6、刷新并查看新生成的二进制日志文件
[root@mysql1 ~]# mysqladmin -uroot -p flush-logs #刷新日志
Enter password:
[root@mysql1 ~]# cd /usr/local/mysql/data/ #查看产生的日志信息
[root@mysql1 data]# ls -lh
3.1.1.7、查看日志信息(找到错误时间点和正确时间点)
[root@mysql1 data]# cd
[root@mysql1 ~]# mysqlbinlog --no-defaults --base64-output=decode-rows -v /usr/local/mysql/data/mysql_bin.000002
3.1.1.8、模拟数据损坏
[root@mysql1 ~]# mysql -uroot -p123456 #登录数据库
mysql> show databases; #查看数据库
mysql> drop database aaa; #删除数据库'aaa'
mysql> show databases; #查看数据库
mysql> create database aaa; #创建同名空的数据库
mysql> show databases;
mysql> use aaa;
mysql> source /backup/aaa-cj.sql #还原完全备份的数据库
mysql> select * from cj;
mysql> exit
3.1.1.9、恢复数据
[root@mysql1 ~]# mysqlbinlog --no-defaults --stop-datetime='2020-12-28 23:43:18' /usr/local/mysql/data/mysql_bin.000002 | mysql -uroot -p #停止在错误时间点为 2020-12-28 23:43:18
Enter password:
[root@mysql1 ~]# mysqlbinlog --no-defaults --start-datetime='2020-12-28 23:43:52 ' /usr/local/mysql/data/mysql_bin.000002 | mysql -uroot -p #开始在正确的时间点为 2020-12-28 23:43:52
Enter password:
[root@mysql1 ~]# mysql -uroot -p123456
mysql> use aaa;
mysql> select * from cj;
3.1.2、基于位置点恢复数据实验
3.1.2.1、设置数据库数据(进行误操作,找到正确位置点停止和正确位置点开始)
[root@mysql1 ~]# mysql -uroot -p123456
mysql> use aaa;
mysql> select * from cj;
mysql> delete from cj where name='panqin'; #删除数据信息
mysql> delete from cj where name='wangwu'; #删除数据信息
mysql> exit
[root@mysql1 ~]# mysqlbinlog --no-defaults --base64-output=decode-rows -v /usr/local/mysql/data/mysql_bin.000003 #查看日志信息
3.1.2.2、恢复数据
[root@mysql1 ~]# mysqlbinlog --no-defaults --stop-position='10348' /usr/local/mysql/data/mysql_bin.000003 | mysql -uroot -p
Enter password:
[root@mysql1 ~]# mysqlbinlog --no-defaults --start-position='10723' /usr/local/mysql/data/mysql_bin.000003 | mysql -uroot -p
Enter password:
[root@mysql1 ~]# mysql -uroot -p123456
mysql> use aaa;
mysql> select * from cj;