Redo Log工作原理

最新推荐文章于 2024-08-29 17:00:41 发布

geXingW

最新推荐文章于 2024-08-29 17:00:41 发布

阅读量273

点赞数

文章标签： mysql InnoDb Redo Log

本文链接：https://blog.csdn.net/for_happy123/article/details/132621905

版权

本文探讨了数据库如何通过硬盘IO持久化数据，重点介绍了MySQL的RedoLog和WriteAheadLogging(WAL)机制，包括它们在事务提交、性能优化和故障恢复中的作用。同时提及了DoubleWriteBuffer在防止页损坏的重要性。

摘要由CSDN通过智能技术生成

数据库如何持久化数据？

数据库一般都需要硬盘来进行数据持久化，数据库在持续提供对外服务的过程会不断的进行写入操作（增、删、改），为了保证每次成功的写入都能落盘，就需要每次进行写入操作都调用fsync操作进行磁盘写入。操作系统的fsync将在硬盘写入成功后返回，确保数据落盘成功。
以上方式在修改成功落盘之后再提交事务，就可以确保一次提交成功事务的持久化。但是这种方式往往受硬盘IO性能的影响，况且很多情况下修改的数据都需要进行随机IO，性能更差。
内存的写入与读取性能远远高于磁盘，于是MySQL引入了各种Buffer，减少硬盘IO次数。引入Buffer后用户的查询和写入操作都可以直接操作Buffer，性能大幅度提升。但是Buffer中的数据会在系统重启后丢失，所以也需要进行落盘。又回到了前边提到的落盘受IO性能影响导致吞吐量下降。
在此基础上引入异步分批写入可以保证数据库的高性能，但是异步存在一个致命问题是事务已经提交了，后续的异步落盘写入失败，就违背了ACID中的持久性特性。
于是MySQL使用了一种折中的方式预写入(WAL)，通过及时落盘保证持久性，通过顺序写和精简日志保证写入效率。其中包括redo log、undo log及binlog。

Redo Log是什么？

Redo Log一种物理日志，记录对数据页的修改内容，用于保证事务的持久性和数据库或操作系统崩溃后的故障恢复。内部记录了需要修改的数据页、页中数据的偏移量、修改的字段和修改的值。

Redo Log 的写入

MySQL在事务提交之前，本次事务修改的Redo log会被写入到硬盘，并且只有在写入成功后，事务才能提交成功。这样就确保了成功提交的事务被持久化到了硬盘中。
不过Redo Log的写入是先写入Redo Log Buffer，然后根据具体的Redo Log刷盘策略，写入磁盘。可以通过更改innodb_flush_log_at_trx_commit参数控制刷盘策略：

设置为0，每秒将Redo log buffer写入到操作系统的page cache中，并执行fsync刷盘，极端情况本规下丢失一秒的数据；
默认为1，每次事务提交将Redo log buffer写入到操作系统的Page Cache中，并执行fsync输盘，性能稍差，但是不会丢失已提交数据；
设置为2，每次事务提交将Redo log buffer写入到操作系统的Page Cache中，然后每秒执行刷盘策略，极端情况下丢失一秒的数据。

对于0和2中的设置，并不是严格的一秒一次，会受到其他操作的影响提前触发，例如执行DDL语句。

Redo Log的故障恢复

当系统或数据库崩溃时，InnoDB会使用Redo Log中的记录进行数据恢复。根据Redo log记录的页号、偏移量和修改内容修改数据页的内容，并根据每个redo log中的全局唯一增量日志序列号lsn避免日志被重复执行。

因为Redo log是基于页的修改，在InnoDB中每个页默认16K，操作系统每次写入文件的大小为4K，这4K可以保证原子性，但是无法确保16K分4次写入的原子性，16K写入不完整时就会出现页损坏，Redo Log无法恢复损坏的页，需要先通过Dobule Write Buffer文件恢复完整的数据页，再执行Redo log。Redo Log在事务执行修改的过程中，会进行写入，而Doubule Write在事务提交之前，将产生的脏页写入Double Write中，然后再将脏页落盘。