InnoDB存储引擎核心特性:MVCC

MVCC概念

多版本并发控制(Multiversion Concurrency Control)指的是一种提高并发性能的技术。最早的数据库系统,只有读读之间可以并发,读写、写读、写写都要被阻塞。引入MVCC之后,只有写写之间相互阻塞,其它三种操作都可以并行,这样就大幅提高InnoDB存储引擎的并发性能。
在内部实现中,InnoDB存储引擎通过undo log保存每条数据的多个版本,并且能够找回数据历史版本提供给用户读,每个事务读到的数据版本可能是不一样的。在同一个事务中,用户只能看到该事务创建快照之前已经提交的修改和该事务本身做的修改。
MVCC只在"Read Committed"和"Repeatable Read"两个隔离级别下工作
MySQL的InnoDB存储引擎默认事务隔离级别是RR(可重复读),是通过"行级锁+MVCC"一起实现的,正常读的时候不加锁,写的时候加锁。而MVCC的实现依赖:隐藏字段、Undo log中的版本链和Read View

隐藏字段

首先需要知道的是,InnoDB存储引擎会默认在表中的每行数据的后面添加了三个隐藏字段:

  • DB_ROW_ID:行ID,随着新行插入而单调递增的行ID。InnoDB存储引擎的B*树索引特性要求每个表必须要有一个主键。如果没有设置的话,会自动寻找第一个不包含NULL的唯一索引列作为主键。如果还找不到,就会在这个DB_ROW_ID上自动生成一个唯一值,以此来当作主键
  • DB_TRX_ID:事务ID,记录的是当前事务在做"insert"或"update"语句操作时的事务ID。至于"delete"操作,InnoDB存储引擎认为是一个特殊的"update"操作,不过会更新一个删除位,将行表示为"deleted",并非真正删除
  • DB_ROLL_PTR:回滚指针,通过它可以将不同的版本串联起来,形成版本链。相当于链表的next指针

ReadView(快照)

ReadView一致性试图主要由两部分组成:所有未提交的事务的ID数组已经创建的最大事务ID组成(实际上ReadView还有其它的字段,但是不影响这里对MVCC的讲解)。
比如:[100,200],300
事务100和200是当前未提交的事务,而事务300是当前创建的最大事务(已经提交了)。当执行"select"语句的时候会创建ReadView,但是在"Read Committed"和"Repeatable Read"两个隔离级别下,生成ReadView的策略是不一样的

  • "Read Committed"隔离级别:事务在begin之后,执行每条"select"语句时,Read View都会被重新创建一次
  • "Read Repeatable"隔离级别:只有事务在begin之后,执行第一条"select"时,才会创建一个Read View,将当前系统中活跃的其它事务记录起来;并且事务之后都是使用这个Read View(即使事务开始后有更新的语句,也会继续沿用),不会重建创建,直到事务结束。

Undo log

Undo log中存储的是老版数据,当一个事务需要读取记录时,如果当前记录不可见,可以顺着Undo log中的版本链找到满足其可见性条件的记录行版本。
大多数对数据的变更操作包括"insert/update/delete",在InnoDB存储引擎中,Undo log分为如下两类:

  • insert undo log:事务对"insert"新纪录时产生的undo log,只在事务回滚时需要,并且在事务提交后就可以立即丢弃。
  • update undo log:事务对记录进行"delete"和"update"操作时产生的undo log,不仅在事务回滚时需要,快照读也需要,只有当数据库所使用的快照中不涉及该日志记录,对应的回滚日志才会被purge线程删除。
purge线程:为了实现InnoDB存储引擎的MVCC机制,更新或者删除操作都是只设置一下旧纪录的deleted_bit,并不是真正将旧纪录删除。
为了节省磁盘空间,InnoDB存储引擎有专门的purge线程来清理deleted_bit为true的记录。purge线程自己也维护了一个read view,如果某个记录的deleted_bit为true,并且DB_TRX_ID相对于purge线程的read view可见,那么这条记录一定是可以被安全清除的。

记录修改的具体流程

假设有一条记录如下,字段有Name和Honor,值分别为"curry"和"mvp",最新修改这条记录的事务ID为1。
在这里插入图片描述
1、现在事务A(事务ID为2)对该记录的Honor字段做出了修改,将Honor字段改为"fmvp":

  1. 事务A先对该行加排它锁
  2. 然后把该行数据拷贝到undo log中,作为旧版本
  3. 拷贝完毕后,修改该行的Honor字段的值为"fmvp",并且修改DB_TRX_ID为2(事务A的ID),回滚指针指向拷贝到undo log中的旧版本。(然年还会将修改后的最新数据写入redo log)
  4. 事务提交、释放排它锁
    在这里插入图片描述

2、接着事务B(事务ID为3)修改同一个记录行,将Name字段的值修改为"iguodala":

  1. 事务B先对该行加排它锁
  2. 然后把该行数据拷贝到undo log中,作为旧版本
  3. 拷贝完毕后,修改该行Name字段的值为"iguodala",并且修改DB_TRX_ID为3(事务B的ID),回滚指针指向拷贝到undo log最新的旧版本。
  4. 事务提交,释放排它锁
    在这里插入图片描述
    从上面可以看出,不同事务或者相同事务对同一记录行的修改,会使该记录行的undo log成为一条链表,undo log的链首就是最新的旧纪录,链尾就是最早的旧纪录。

可见性比较算法

在InnoDB存储引擎中,创建一个新事物后,执行第一个select语句的时候,InnoDB存储引擎会创建一个Read View(快照),快照中会保存系统当前所有未提交的事务的ID数组(即trx_ids)和已经创建的最大事务ID。但用户在这个事务中要读取某个记录行的时候,InnoDB存储引擎会将该记录行的DB_TRX_ID与Read View中的一些变量进行比较,判断是否满足可见性条件。
假设当前事务要读取某一个记录行,该记录行的DB_TRX_ID(即最新修改该行的事务ID)为trx_id,Read View中所有未提交事务ID数组trx_ids中最早的事务ID为"up_limit_id"(源码中的一个参数),将在生成这个Read View时系统出现过的最大的事务ID+1记为"low_limit_id"(即还未分配的事务ID)。
具体的比较算法如下:

  1. 如果trx_id < up_limit_id,那么表明"最新修改该行的事务"在"当前事务"创建快照之前就已经提交了,所以该记录行的值对当前事务是可见的。跳到步骤5

  2. 如果trx_id >= low_limit_id,那么表明"最新修改行的事务"在"当前事务"创建快照之后才修改该行,所以该记录行的值对当前事务不可见。跳到步骤4。

  3. 如果up_limit_id <= trx_id <=low_limit_id,表明"最新修改行的事务"在"当前事务"创建快照的时候可能处于"活跃状态"或者"已提交状态";所以就要对Read View中未提交的事务列表trx_ids进行查找(源码中是二分查找,因为是有序的):
    (1)如果在Read View中未提交事务列表trx_ids中能够找到ID为trx_id的事务,有两种情况:一、在 “当前事务” 创建快照前,“该记录行的值” 被 "id号为trx_id的事务"修改了,但是没有提交;二、在 “当前事务” 创建快照后,“该记录行的值” 被 “id号为trx_id的事务"修改了(不关有无提交);这两种情况下,这个记录行的值对当前事务都是不可见的,跳到步骤4;
    (2)在Read View中未提交事务列表中找不到,则表明"id为trx_id的事务” 在修改 "该记录行的值"后,在"当前事务"创建快照前就已经提交了,所以记录行对当前事务可见,跳到步骤5。

  4. 在该记录行的DB_ROLL_PTR指针所指向的undo log回滚段中,取出最新的旧事物号DB_TRX_ID,将它赋值给trx_id,然后跳到步骤1重新开始判断。

  5. 将该可见行的值返回。

当前读和快照读

  • 快照读(snapshot read):普通的"select"查询语句就是快照读
  • 当前读(current read):所谓当前读就是从表中读取当前的数据,“select … lock in share mode”、’'select … for update"、“insert”、“update”、"delete"语句都是当前读,读取的是表中最新数据

只靠MVCC实现RR隔离级别,可以保证重复读,还可能防止部分幻读,但是并不是完全防止。

比如事务A开始后,执行了普通"select"语句,创建了Read View ;之后事务B执行"insert"语句;然后事务A再执行普通"select"语句,得到的还是之前事务B没有"insert"过的数据。因为这时候事务A读的数据是符合快照可见性条件的数据。这样就防止不可重复读

但是,如果事务A执行的不是普通"select"查询语句,而是"select … for update"等语句,这时候,事务A是当前读,每次执行此类语句时都是获取最新的数据。也就是说,在只有MVCC时,事务A先执行"select … where id between 1 and 10 … for update",然后事务B再执行"insert … id=5 …",最后事务A再执行"select … where id between 1 and 10 … for update"就会发现多了一条事务B"insert"进去的记录(因为"select … for update"等语句获取的是表中当前数据)。这就产生了幻读了。所以单靠MVCC并不能完全防止幻读

因此,InnoDB存储引擎在实现RR隔离级别是,不仅使用了MVCC,还会对"当前读语句"读取的记录行加上行锁和间隙锁,来防止幻读。也就是前文说的"行级锁+MVCC".

参考文章:
https://blog.csdn.net/Waves___/article/details/105295060
https://blog.csdn.net/weixin_30342639/article/details/107552255

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
### 回答1: MySQL技术内幕:InnoDB存储引擎是一本关于MySQL数据库中最常用的存储引擎InnoDB的技术指南。该书由一线数据库专家撰写,系统地介绍了InnoDB存储引擎的内部原理、架构和实现细节。读者可以通过阅读该书,深入了解和掌握InnoDB存储引擎核心知识,提升对MySQL的理解和应用。 其中,本书的主要内容包括了以下几个方面: 1. InnoDB存储引擎的基本概念和设计思想:介绍了InnoDB存储引擎的概述、体系结构和设计理念,包括了数据结构、内存管理、存储结构和索引等方面的介绍。读者可以通过了解InnoDB的设计思想,更好地理解其实现机制和使用方法。 2. 事务和锁机制:详细介绍了InnoDB支持的事务和锁机制,包括了并发控制、锁类型、死锁和事务隔离级别等内容。通过学习事务和锁机制,读者可以了解InnoDB在多线程并发访问中如何保证数据的一致性和并发性。 3. 缓冲池和日志系统:重点介绍了InnoDB的缓冲池管理和日志系统。缓冲池是InnoDB用于管理内存页和磁盘页之间的数据交换的重要组件,而日志系统则负责记录和恢复数据的更改。通过深入了解缓冲池和日志系统的原理和机制,读者可以优化数据库的性能和可靠性。 4. 各种存储引擎之间的对比和选择:对比了InnoDB与其他存储引擎,如MyISAM、MEMORY和NDB等,并分析了不同场景下的适用性和性能差异。读者可以根据实际需求,选择合适的存储引擎,以达到最佳的性能和可靠性。 通过阅读MySQL技术内幕:InnoDB存储引擎,读者可以深入了解MySQL的核心存储引擎InnoDB的设计原理和实现机制,从而更好地利用和优化数据库系统。无论是对于MySQL开发者、DBA还是对于需要处理大规模数据的系统工程师来说,该书都是一本非常实用的参考资料。 ### 回答2: MySQL技术内幕InnoDB存储引擎是一本介绍MySQL数据库内部原理的重要参考书。这本书由巴赫曼大咖撰写,内容详实,透彻地探讨了InnoDB存储引擎的架构、设计和实现细节,对于理解MySQL的工作原理以及性能调优和故障排查具有重要的指导意义。 这本书首先介绍了MySQL的架构和存储引擎的分类,然后重点深入讲解了InnoDB存储引擎。通过阅读这本书,读者可以了解到InnoDB如何管理数据、索引和事务,并深入理解它的多版本并发控制MVCC)机制。此外,书中还详细探讨了InnoDB的锁机制、缓冲池管理、日志系统和崩溃恢复等关键组成部分。 该书还提供了一些实用的案例和示例,帮助读者更好地理解InnoDB存储引擎的工作原理。同时,它还涵盖了性能调优和故障排查的相关技术,如如何选择合适的硬件配置、优化查询性能以及定位和解决常见的故障问题。 总体而言,MySQL技术内幕InnoDB存储引擎是一本值得推荐的MySQL数据库相关的技术书籍。它不仅为读者提供了深入了解InnoDB存储引擎的机会,还为读者提供了一些实用的技术指导,使他们能够更好地理解和优化MySQL数据库的性能。无论是MySQL数据库的使用者,还是希望提升数据库技术水平的开发人员和DBA,都将从这本书中受益匪浅。 ### 回答3: 《MySQL技术内幕InnoDB存储引擎》是一本介绍MySQL InnoDB存储引擎的技术书籍。InnoDB是MySQL数据库中最常用的存储引擎之一,也是MySQL默认的事务引擎。 这本书主要从存储引擎的架构、事务处理、并发控制、锁机制、日志系统、缓冲池管理等方面,详细介绍了InnoDB存储引擎的内部原理和工作机制。 在架构方面,本书首先介绍了InnoDB存储引擎与MySQL的整体架构,并详细解释了InnoDB存储引擎的各个组件及其相互之间的关系。 在事务处理方面,本书介绍了InnoDB存储引擎的事务ACID特性,事务的提交和回滚机制,以及隔离级别对并发控制的影响。 在并发控制方面,本书详细介绍了InnoDB存储引擎的多版本并发控制MVCC)机制,通过读取一致性非锁定读(consistent non-locking read)来实现高并发的读取操作。 在锁机制方面,本书解释了InnoDB存储引擎的各种锁类型,如行锁、表锁和页面锁,以及它们的应用场景和使用方式。 在日志系统方面,本书介绍了InnoDB存储引擎的日志系统,包括重做日志(redo log)和回滚日志(undo log),以及它们在事务处理和崩溃恢复中的作用。 在缓冲池管理方面,本书详细介绍了InnoDB存储引擎的缓冲池管理机制,包括缓存页的管理和替换策略,以及如何提高缓冲池的效率和性能。 总的来说,这本书通过深入浅出的方式,系统地介绍了InnoDB存储引擎的内部原理和工作机制,对于想深入理解MySQL数据库的开发人员和DBA来说,是一本非常有价值的参考书。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值