目录
7.2增量备份过程(全备+增备)【增量备份都是与二进制文件的内容相关的】
引言
在生产环境中,数据的安全性至关重要,任何数据的丢失都可能产生严重的后果,那么对于数据的备份就将显的十分重要。对于MySQL而言,在其备份中,日志起到了很重要的作用。
一.MySQL日志管理
MySQL的日志默认保存位置为:/usr/local/mysql/data下
配置文件位于:/etc/my.cnf文件中的[mysqld]内
1.1日志分类
1.1.1错误日志
用来记录当MySQL启动、停止或运行时发生的错误信息,默认开启。
log-error=/usr/local/mysql/data/mysql_error.log
1.1.2通用查询日志
用来记录MySQL的所有连接和语句,默认是关闭的。
general_log=ON
general_log_file=/usr/local/mysql/data/mysql_general.log
1.1.3二进制日志
用来记录所有更新了数据或者已经潜在更新了数据的语句,记录了数据的更改,可用于数据恢复,默认已开启。
log_bin=mysql-bin
或 log-bin=mysql-bin
1.1.4慢查询日志
用来记录所有执行时间超过long_query_time秒的语句,可以找到哪些查询语句执行时间长,以便于优化,默认是关闭的。
slow_query_log=ON
slow_query_log_file=/usr/local/mysql/data/mysql_slow_query.log
long_query_time=5 单位时间为s,缺省时为10s
慢查询日志也可用来查询哪些搜索的字段超时,可以选择是否需要增加索引,加快查询速度。
1.1.5中继日志
一般情况下,它在MySQL主从同步(复制)、读写分离集群的从节点开启,主节点一般不需要这个日志。
1.2日志配置
修改配置文件
vim /etc/my.conf
#错误日志
log-error=/usr/local/mysql/data/mysql_error.log
#通用查询日志
general_log=ON
general_log_file=/usr/local/mysql/data/mysql_general.log
#二进制日志
log-bin=mysql-bin
#慢查询日志
slow_query_log=ON
slow_query_log_file=/usr/local/mysql/data/mysql_slow_query.log
long_query_time=5
#配置文件添加完后需要重启MySQL
systemctl restart mysql
修改my.cnf配置文件,在[mysqld]中添加如下内容
重启服务
1.3日志查询
登入MySQL数据库,查询日志是否开启
#variables 表示变量
#like 表示模糊查询
#%xxx,以什么结尾,xxx%以什么开头,%xxx%包含
#查看通用查询日志是否开启
show variables like 'general%';
#查看二进制日志是否开启
show variables like 'log_bin%';
#查看慢查询日功能是否开启
show variables like '%slow%';
#查看慢查询时间设置
show variables like 'long_query_time';
#在数据库中设置开启慢查询的方法
set global slow_query_log=ON;
1.3.1查询通用日志是否开启
show variables like ‘general%’;
3.2 查询二进制日志是否开启
show variables like 'log_bin%';
3.3 查看慢查询日志是否开启
show variables like 'slow%';
3.4 查询慢查询日志超时时间
show variables like 'long_query_time';
或者
show variables like 'long%';
二.MySQL数据备份
在生产环境中,数据的安全性至关重要,任何数据的丢失都可能产生严重的后果,数据备份的主要目的是灾难恢复
2.1数据备份的重要性
在企业中,数据的价值至关重要,数据保障了企业业务的正常运行。因此,数据的安全性及数据的可靠性是运维的重中之重,任何数据的吊事都可能对企业产生严重的后果。
通常情况下,造成数据丢失的原因有一下几种:
- 程序错误
- 人为操作错误
- 运算错误
- 磁盘故障
- 灾难(火灾、地震、盗窃等)
2.2数据备份类型
从物理与逻辑的角度,备份分为物理备份和逻辑备份
从数据库的备份策略角度,备份可分为完全备份、差异备份和增量备份
2.3物理备份
- 物理备份是对数据库操作系统的物理文件(如数据文件、日志文件等)的备份。
- 物理备份适用于在出现问题时需要快速恢复的大型重要数据库。
- 物理备份又可以分为冷备份(脱机备份)、热备份(联机备份)和温备份。
- 冷备份(脱机备份):是在关闭数据库的时候进行的。(tar)
- 热备份(联机备份):数据库处于运行状态,依赖于数据库的日志文件。(mysqldump)
- 温备份:数据库锁定表格(不可写入但可读)的状态下进行备份操作。
2.4逻辑备份
对数据库逻辑组件的备份,表示为逻辑数据库结构,此类型备份适用于可以编辑数据值或表结构
逻辑备份分类:
完全备份
- 每次对数据进行完整备份,即对整个数据库、数据库结构和文件结构的备份,保存的是备份完成时刻的数据库,是差异备份与增量备份的基础完全备份的备份与恢复操作都非常简单方便,但是数据存在大量的重复并且会占用大量的磁盘空间,备份的时间也很长
- 每次都进行完全备份,会导致备份文件占用空间巨大,并且有大量的重复数据,恢复时,直接使用完全备份的文件即可
差异备份
-
备份那些自从上次完全备份之后被修改过的所有文件,备份的时间节点是从上次完整备份起,备份数据量会越来越大。恢复数据时只需要恢复上次的完全备份与最佳的一次差异备份
-
每次差异备份,都会备份上一次完全备份之后的数据,可能会出现重复数据。恢复时,先恢复完全备份的数据,再恢复差异备份的数据
增量备份
- 只有那些在上次完全备份或者增量备份后被修改的文件才会被备份以上次完整备份或上次增量备份的时间为时间点,仅备份期间内的数据变化,因而备份的数据量小,占用空间小,备份速度快
- 但恢复时,需要从上一次的完整备份开始到最后一次增量备份之间的所有增量依次恢复,如中间某次的备份数据损坏,将导致数据的丢失
- 每次增量备份都是在备份在上一次完成全备份
- 每次增量备份都是备份在上一次完全备份或者增量备份之后的数据,不会出现重复数据的情况,也不会占用额外的磁盘空间