binlog 和 redolog 的持久化问题


对于 MySQL 来说,只要 binlog 和 redolog 都能正确持久化到磁盘上,就可以保证数据不丢失了。

binlog

binlog cache—>page cache—> disk

cache 到 cache 是write的过程,page cache到disk是fsync

write 和 fsync 的时机,是由参数 sync_binlog 控制的:

sync_binlog = 0,每次提交事务的时候,只进行 write,不进行 fsync
sync_binlog = 1,每次提交事务的时候,执行 write 和 fsync
sync_binlog = N(N>1),每次提交事务的时候,执行 write,累积 N 个事务后再执行 fsync
可以看出来,如果业务场景涉及到的 IO 操作很多的话,可以适当增大 sync_binlog 的值,提高性能。但是也存在一定的风险,比如你设置成 100,万一在第 80个事务提交的时候数据库宕机了,那这些事务的 binlog 日志由于没有执行 fsync,也就丢失了。

redolog

redolog 也有这样一块内存区域,叫作 redolog buffer
不同于 binlog cache 每个线程都有一个,redolog buffer 只有那么一个

redolog buffer—>page cache—> disk

为了控制 redo log 的写入策略,InnoDB 提供了 innodb_flush_log_at_trx_commit 参数,它有三种可能取值:

innodb_flush_log_at_trx_commit = 0,每次事务提交的时候,都只是把 redolog 留在 redolog buffer 中
innodb_flush_log_at_trx_commit = 1,每次事务提交的时候,都执行 fsync 将 redolog 直接持久化到磁盘
innodb_flush_log_at_trx_commit = 2,每次事务提交的时候,都只执行 write 将 redolog 写到文件系统的 page cache 中

问题:没提交的事务redo/binlog也会被持久到磁盘吗?

三种可能:

  1. InnoDB 有一个后台线程,每隔 1 秒轮询一次,具体的操作是这样的:调用 write 将 redolog buffer 中的日志写到文件系统的 page cache,然后调用 fsync 持久化到磁盘。而在事务执行中间过程的 redolog 都是直接写在 redolog buffer 中的,也就是说,一个没有提交的事务的 redolog,也是有可能会被后台线程一起持久化到磁盘的。

  2. innodb_flush_log_at_trx_commit 设置是 1,这样并行的某个事务提交的时候,就会顺带将这个事务的 redolog buffer 持久化到磁盘
    举个例子,假设事务 A 执行到一半,已经写了一些 redolog 到 redolog buffer 中,这时候有另外一个事务 B 提交,按照 innodb_flush_log_at_trx_commit = 1 的逻辑,事务 B 要把 redolog buffer 里的日志全部持久化到磁盘,这时候,就会带上事务 A 在 redolog buffer 里的日志一起持久化到磁盘

  3. redo log buffer 占用的空间达到 redolo buffer 大小(由参数 innodb_log_buffer_size 控制,默认是 8MB)一半的时候,后台线程会主动写盘。不过由于这个事务并没有提交,所以这个写盘动作只是 write 到了文件系统的 page cache,仍然是在内存中,并没有调用 fsync 真正落盘

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值