undo、redo、bin log和mvcc

已于 2022-12-20 09:55:45 修改
阅读量257 收藏 1
点赞数
分类专栏： Mysql 文章标签： 数据库
于 2022-12-12 23:24:18 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_33457548/article/details/128294363
版权

架构

内存架构

buffer pool

change buffer

自适应哈希

log buffer

磁盘架构

sql执行流程图

死锁

锁

表锁

意向锁

在对某一个数据加行锁时，会先加一个表级别的意向锁；另一个事务若需要添加表级别的锁时，会与意向锁判断看是否有冲突。

行锁

间隙锁

主要用来解决幻读

插入意向锁

插入意向锁，听起来似乎跟前面的表级别意向锁有些类似，但实际上插入意向锁是一种间隙锁，这种锁是一种隐式锁，也就是咱们无法手动的获取这种锁。通常在MySQL中插入数据时，是并不会产生锁的，但在插入前会先简单的判断一下，当前事务要插入的位置有没有存在间隙锁或临键锁，如果存在的话，当前插入数据的事务则需阻塞等待，直到拥有临键锁的事务提交。

作者：竹子爱熊猫
链接：https://juejin.cn/post/7153869469394305061
来源：稀土掘金
著作权归作者所有。商业转载请联系作者获得授权，非商业转载请注明出处。

undo log 撤销日志

MVCC 

由来

基于读-写并存的场景，推出了MVCC机制，在线程安全问题和加锁串行化之间做了一定取舍，让两者之间达到了很好的平衡，即防止了脏读、不可重复读及幻读问题的出现，又无需对并发读-写事务加锁处理。

做到即使有读写冲突时，也可以不加锁解决，从而确保了任何时刻的读操作都是非阻塞的

仅在RC读已提交级别、RR可重复读级别才会使用MVCC机制

原理

多版本依赖Undo-log版本链，并发控制通过表的隐藏字段+ReadView快照来实现。

隐藏字段

row_id：如果没有主键，会默认添加一个递增的row_id。（原因：聚簇索引需要）

deleted_bit：删除标识，并不是真正的删除

trx_id：记录改动某条数据的事务id

roll_ptr：回滚指针，指向这条数据的老数据版本（老数据在undo log中）

undo log版本链

readView

一个事务在尝试读取一条数据时，MVCC基于当前MySQL的运行状态生成的快照，也被称之为读视图。 

  • creator_trx_id：代表创建当前这个ReadView的事务ID。
  • trx_ids：表示在生成当前ReadView时，系统内活跃的事务ID列表。
  • up_limit_id：活跃的事务列表中，最小的事务ID。
  • low_limit_id：表示在生成当前ReadView时，系统中要给下一个事务分配的ID值。

RC级别下，MVCC机制是会在每次select语句执行前，都会生成一个ReadView。

RR级别中，一个事务只会在首次执行select语句时生成快照，后续所有的select操作都会基于这个ReadView来判断。

隔离级别

①Read uncommitted/RU：读未提交

②Read committed/RC：读已提交

③Repeatable read/RR：可重复读（默认）

幻读问题

select 某记录是否存在，不存在，准备插入此记录，但执行insert时发现此记录已存在，无法插入。

④Serializable：序列化/串行化

redo log 

流程：数据先写入redo log（先写道redo log buffer中，再根据策略落redo log），然后再写入内存中，后台线程将根据redo log中（write pos和check point）的数据落到表中。

Innode 引擎才有

内存写入数据前，会先写日志

两阶段提交

redo log buffer落盘时机：


为何不直接落磁盘，而是先写redo log再写入内存，再落盘？

  1. 重启情况，内存中数据丢失，可以恢复。
  2. redo log尾部直接追加，顺序写入，落盘是随机写入，比较慢。

Binlog

所有引擎都有

记录所有对数据库表结构变更和表数据修改的操作

redo 和bin log区别

①生效范围不同，Redo-log是InnoDB专享的，Bin-log是所有引擎通用的。

②写入方式不同，Redo-log是用两个文件循环写，而Bin-log是不断创建新文件追加写。

③文件格式不同，Redo-log中记录的都是变更后的数据，而Bin-log会记录变更SQL语句。

④使用场景不同，Redo-log主要实现故障情况下的数据恢复，Bin-log则用于数据灾备、同步。

参考：

(十一)MySQL日志篇之undo-log、redo-log、bin-log.....傻傻分不清！ - 掘金

聊聊redo log是什么？ - 知乎

彻底搞懂MySQL的redo log，binlog，undo log - 掘金

(九)MySQL之MVCC机制：为什么你改了的数据我还看不见？ - 掘金

(七)MySQL事务篇：ACID原则、事务隔离级别及事务机制原理剖析 - 掘金​​​​​​​

MySQL幻读详解及解决方法_学而不思则忘的博客-CSDN博客_mysql 幻读

(八)MySQL锁机制：高并发场景下该如何保证数据读写的安全性？ - 掘金

(十)全解MySQL之死锁问题分析、事务隔离与锁机制的底层原理剖析 - 掘金

西堂AI编程提效
关注
专栏目录
Mysql redo、undo、bin、relay log 区别
JineD的博客
10-20 5116
redo log 和 undo log undo log： 为了实现事务原子性，要么全部完成commit，要么全部回滚rollback，Innodb用于实现mvcc（多版本并发控制） 例如：将user=’A’ 改为 user=’B’，则undo log中会记录下user=’A’和事务版本等信息 一旦事务完成，所有修改必须被记录下，保证数据一致性（后面redo log解释） redo log： 如果使用undo log作为持久化数据，意味着修改数据和undo log必须同时写入磁盘持久化，这必定带来
MySQL事务，从redo log、bin log、undo log说起...
Java Punk
07-20 832
通过本讲，你将学到redo log、bin log、undo log日志系统的产生、释放过程，作用，以及与事务（ACID）的关系
*bin log,redo log 和 undo log
林竹清_清清清
06-01 318
1、redo log 和 undo log innodb 事务日志包括 redo log 和 undo log redo log ：重做日志，提供前滚操作 ，保证事务的持久性。 undo log ：回滚日志，提供回滚操作，保证事务的原子性。 redo log 声明周期 事务开始之后，就开始产生 redo log 日志了，在事务执行的过程中，redo log 开始逐步落盘。当对应事务的脏页写入到磁盘之后，redo log 的使命就完成了，它所占用的空间也就可以被覆盖了。 存储内容 .
mysql 事务的实现原理
璟矢
12-01 635
相信大家都用过事务以及了解他的特点，如原子性(Atomicity),一致性(Consistency),隔离型(Isolation)以及持久性(Durability)等。 　 　今天想跟大家一起研究下事务内部到底是怎么实现的，在讲解前我想先抛出个问题： 　事务想要做到什么效果？ 　 　按我理解，无非是要做到可靠性以及并发处理 　　 　下面我首先讲实现事务功能的三个技术，分别是日志文件(redo l...
Mysql Innodb中undo-log和MVCC多版本一致性读 的实现
06-26 383
http://blog.sina.com.cn/s/blog_4673e603010111ty.html 本文主要介绍mysql中innodb引擎undo-log和事务中MVCC多版本一致性读的实现。 1. 概述 Innodb引擎的undo日志是记录在表空间中单独的回滚段中。当...
mysql的undo log、redo log、binlog和MVCC
BLF2
06-14 498
Mysql的undo log、redo log、binlog和MVCC 本文试图解释undo log，redo log，bin log的作用，以及Innodb的MVCC机制 undo log undo log 记录的是sql语句执行更新前的数据，这里的更新是泛指，除了select其它都算更新。在读已提交和可重复读的隔离级别下，会记录事务中某条数据的修改版本链，用来支持MVCC，详细参考MVCC章节。 redo log redo log的设计是为了提高性能，如果没有redo log，数据库更新一条数据的过程大
MySQL的redo log、undo log、binlog
12-14
MySQL数据库中有多种日志文件，其中最重要的三种是重做日志（redo log）、回滚日志（undo log）和二进制日志（binlog）。重做日志确保事务的持久性，回滚日志用于事务回滚，而二进制日志则用于数据复制和恢复。 1. ...
【mysql】-- Mysql的undo log、redo log、bin log日志
寻梦友的博客
05-16 791
这里写自定义目录标题一、mysql的日志文件二、undo log日志--InnoDB特有2.1、undo log日志介绍2.2、undo log原理2.3、insert操作的内部机制2.4、delete/update操作的内部机制三、redo log日志--InnoDB特有3.1、redo log文件存在意义3.2、redo log原理3.3、write ahead Log策略3.4、 redolog的覆盖和innodb_log_buffer刷入磁盘参数配置3.5、redolog的数据恢复策略四、bin l
(十一)MySQL日志篇之undo-log、redo-log、bin-log.....傻傻分不清！
BASK2311的博客
10-26 1498
叨叨絮絮下来，就大致将MySQL中的一些常见、较为重要的日志讲明白啦，其实重点搞清楚undo-log：主要用于实现事务ACID原则中的原子性和MVCC机制。redo-log：主要用于实现事务原则中的持久性，确保事务提交后就不会丢失。bin-log：主要结合redo-log实现事务原则中的一致性，确保事务提交前后，数据的一致。对于其他几类日志，在本篇中也仅讲明了大概，毕竟后面的章节中会再出现，而对于上述三大日志也就基本上不会提到了，因此剖析的较为全面，那么咱们下篇见~，下面准备讲：《MySQL。
MySQL 三大日志：binlog、redo log 和 undo log 使用与原理
Panda的学习日常
09-17 828
文章目录binlogbinlog日志格式binlog 使用场景binlog 刷盘时机查看 binlog 日志redo logredo log日志格式redo log使用场景redo log刷盘时机LSNredo log与binlog区别为什么 binlog 没有 crash-safe 能力两阶段提交怎么保证两份日志之间的逻辑一致组提交undo log事务提交undo log处理过程insert undo logupdate undo logpurge 线程的清理过程MySQL 崩溃恢复 日志是mysql数
一文读懂MySQL7大日志（slow、redo、undo、bin、relay、general、error）
最新发布
weixin_42100387的博客
03-09 1379
重做日志，记录了数据库中发生的每次修改，如增、删、改、对数据页的更改。这些修改被记录在 redo 日志中，以便在数据库崩溃或意外关闭时能够恢复到最近的一致状态。回滚日志，用于记录事务所做的更改，以便在事务回滚或发生回滚操作时能够撤销事务中的修改。如果使用undo log回滚，这个回滚的动作，也会产生redo log，用于保证数据的高可用。二进制日志，记录所有DDL、DML的日志，用于主从服务器之间的数据同步。也可用于MySQL意外停止情况下的数据恢复。
redo log、undo log 以及mysql mvcc 实现原理
a001807的博客
03-10 834
redo log、undo log 以及mysql mvcc 实现原理 欢迎使用Markdown编辑器 你好！ 这是你第一次使用 Markdown编辑器 所展示的欢迎页。如果你想学习如何使用Markdown编辑器, 可以仔细阅读这篇文章，了解一下Markdown的基本语法知识。 新的改变 我们对Markdown编辑器进行了一些功能拓展与语法支持，除了标准的Markdown编辑器功能，我们增加了如下几点新功能，帮助你用它写博客： 全新的界面设计 ，将会带来全新的写作体验； 在创作中心设置你喜爱的代码高亮样式
除了MVCC，Undo Log 还有哪些作用？｜原创
Daniel的博客
11-23 206
本文详细讲解了Undo Log的三大核心作用和原理。点击上方“后端开发技术”，选择“设为星标” ，优质资源及时送达之前已经讲过了 Redo log，Binlog，并且很详细，请自行阅读，这次我们把最后一个重要日志 Undo Log 补上。「原创」不会没事！带你深入理解binlog写入机制2022-06-04 「原创」竟然redolog写入机制都不懂…怎么破？2022-06-03Undo Log 就...
redo/undo log、binlog 的详解及其区别
didixiao_的博客
09-23 293
https://www.jianshu.com/p/57c510f4ec28
MVCC和undo log
qq_42120843的博客
06-15 1036
没有解决幻读是因为每次select都会产生一次新的数据快照，其他事务增加了新的记录行并且已成功提交，导致当前事务以同样条件查询时，出现记录数的改变了。理论实现隔离级别的方式，用于实现已提交读和可重复读隔离级别的实现，也经常称为多版本数据库。提供了两个读取操作：锁定读 和 非锁定读，MVCC提供了一个快照读，依赖于底层的undo log 即回滚日志。MVCC：每一行记录实际上有多个版本，每个版本的记录除了数据本身之外，增加了其它字段。，可实时反馈到当前事务的select中，所以解决了脏读问题。
bin log,redo log以及undo log详解
yxg520s的博客
12-30 4082
1 bin log 1.1 定义 bin log应该说是Mysql里最核心的日志，是MySQL数据库级别的文件，记录对MySQL数据库各种引擎下执行修改的所有操作（包括DDL和DML语句），不会记录select和show语句,主要用于恢复数据库和同步数据库（主从同步）。 1.2 bin log的三种日志格式 binlog 有三种记录格式，分别是ROW、STATEMENT、MIXED。 1、ROW： 基于变更的数据行进行记录，如果一个update语句修改一百行数据，那么这种模式下就会记录100行对应的记录日志
MYSQL之redolog、undolog、binlog以及MVCC原理
qq_40223516的博客
07-28 1280
MYSQL之redolog、undolog、binlog以及MVCC原理
MySQL中的重做日志（redo log），回滚日志（undo log），以及二进制日志（binlog）的简单总结...
weixin_33805992的博客
01-28 1835
  MySQL中有六种日志文件，分别是：重做日志（redo log）、回滚日志（undo log）、二进制日志（binlog）、错误日志（errorlog）、慢查询日志（slow query log）、一般查询日志（general log），中继日志（relay log）。其中重做日志和回滚日志与事务操作息息相关，二进制日志也与事务操作有一定的关系，这三种日志，对理解MySQL中的事务操作有着重...
redo log、undo log和bin log的区别
03-23
redo log、undo log和bin log都是MySQL数据库中的日志文件，但是它们的作用不同。 redo log是用来恢复数据的，记录了所有的修改操作，包括插入、更新和删除等，以便在数据库崩溃后进行恢复。 undo log是用来回滚事务的，记录了所有的修改操作的反向操作，以便在事务回滚时进行恢复。 bin log是用来记录所有的修改操作，包括插入、更新和删除等，以便在主从复制时进行同步。 因此，redo log、undo log和bin log的作用不同，但它们都是MySQL数据库中非常重要的日志文件。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值