MySQL事务原理、MVCC详解

最新推荐文章于 2024-10-01 17:33:05 发布
最新推荐文章于 2024-10-01 17:33:05 发布
阅读量988 收藏 1
点赞数
分类专栏： MySQL进阶 文章标签： mysql 事务 mvcc
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/dougongzi/article/details/132585545
版权

事务原理

1 事务基础

1). 事务

事务 是一组操作的集合，它是一个不可分割的工作单位，事务会把所有的操作作为一个整体一起向系 统提交或撤销操作请求，即这些操作要么同时成功，要么同时失败。

2). 特性

  • 原子性（Atomicity）：事务是不可分割的最小操作单元，要么全部成功，要么全部失败。

  • 一致性（Consistency）：事务完成时，必须使所有的数据都保持一致状态。

  • 隔离性（Isolation）：数据库系统提供的隔离机制，保证事务在不受外部并发操作影响的独立环 境下运行。

  • 持久性（Durability）：事务一旦提交或回滚，它对数据库中的数据的改变就是永久的。

那实际上，我们研究事务的原理，就是研究MySQL的InnoDB引擎是如何保证事务的这四大特性的。

而对于这四大特性，实际上分为两个部分。 其中的原子性、一致性、持久化，实际上是由InnoDB中的 两份日志来保证的，一份是redo log日志，一份是undo log日志。

而隔离性是通过数据库的锁， 加上MVCC来保证的。
在这里插入图片描述

我们在讲解事务原理的时候，主要就是来研究一下redolog，undolog以及MVCC。

redo log

​ 重做日志，记录的是事务提交时数据页的物理修改，是用来实现事务的持久性。 该日志文件由两部分组成：

重做日志缓冲（redo log buffer）以及重做日志文件（redo log file）,前者是在内存中，后者在磁盘中。当事务提交之后会把所有修改信息都存到该日志文件中, 用于在刷新脏页到磁盘,发生错误时, 进行数据恢复使用。

如果没有redolog，可能会存在什么问题的？ 我们一起来分析一下。

我们知道，在InnoDB引擎中的内存结构中，主要的内存区域就是缓冲池，在缓冲池中缓存了很多的数据页。

  1. 当我们在一个事务中，执行多个增删改的操作时，InnoDB引擎会先操作缓冲池中的数据，如果缓冲区没有对应的数据，会通过后台线程将磁盘中的数据加载出来，存放在缓冲区中，然后将缓冲池中的数据修改，修改后的数据页我们称为----脏页。

  2. 而脏页则会在一定的时机，通过后台线程刷新到磁盘中，从而保证缓冲区与磁盘的数据一致。

  3. 而缓冲区的脏页数据并不是实时刷新的，而是一段时间之后将缓冲区的数据刷新到磁盘中，假如刷新到磁盘的过程出错了，而提示给用户事务提交成功，而数据却没有持久化下来，这就出现问题了，没有保证事务的持久性。
    在这里插入图片描述
    那么，如何解决上述的问题呢？ 在InnoDB中提供了一份日志 redo log，接下来我们再来分析一 下，通过redolog如何解决这个问题。
    在这里插入图片描述

  • 有了redolog之后，当对缓冲区的数据进行增删改之后，会首先将操作的数据页的变化，记录在redo log buffer中。

    • 在事务提交时，会将redo log buffer中的数据刷新到redo log磁盘文件中。

  • 过一段时间之后，如果刷新缓冲区的脏页到磁盘时，发生错误，此时就可以借助于redo log进行数据恢复，这样就保证了事务的持久性。

    • 而如果脏页成功刷新到磁盘 或 或者涉及到的数据已经落盘，此时redolog就没有作用了，就可以删除了，所以存在的两个redolog文件是循环写的。

那为什么每一次提交事务，要刷新redo log 到磁盘中呢，而不是直接将buffer pool中的脏页刷新 到磁盘呢 ?

因为在业务操作中，我们操作数据一般都是随机读写磁盘的，而不是顺序读写磁盘。 而redo log在 往磁盘文件中写入数据，由于是日志文件，所以都是顺序写的。顺序写的效率，要远大于随机写。 这 种先写日志的方式，称之为 WAL（Write-Ahead Logging）。

undo log

回滚日志，用于记录数据被修改前的信息 , 作用包含两个 :

  • 提供回滚(保证事务的原子性)
  • 和 MVCC(多版本并发控制) 。

undo log和redo log记录物理日志不一样，它是逻辑日志。可以认为当delete一条记录时，undo log中会记录一条对应的insert记录，反之亦然，当update一条记录时，它记录一条对应相反的update记录。

当执行rollback时，就可以从undo log中的逻辑记录读取到相应的内容并进行回滚。

Undo log销毁：undo log在事务执行时产生，事务提交时，并不会立即删除undo log，因为这些 日志可能还用于MVCC。

Undo log存储：undo log采用段的方式进行管理和记录，存放在前面介绍的 rollback segment 。回滚段中，内部包含1024个undo log segment。

MVCC

1 基本概念

1). 当前读

​ 读取的是记录的最新版本，读取时还要保证其他并发事务不能修改当前记录，会对读取的记录进行加锁。

对于我们日常的操作，如：select … lock in share mode(共享锁)，select … for update、update、insert、delete(排他锁)都是一种当前读。

测试：
在这里插入图片描述
​ 在测试中我们可以看到，即使是在默认的RR隔离级别下，事务A中依然可以读取到事务B最新提交的内 容，因为在事务A第二次的查询语句后面加上了 lock in share mode 共享锁，此时是当前读（最新版本的数据）操作。当然，当我们 加排他锁的时候，也是当前读操作。

注意：如果没有加锁，就会符合可重复读，2次查询数据一样（读取不到事务B提交的内容）。

2). 快照读

​ 简单的select（不加锁）就是快照读，快照读，读取的是记录数据的可见版本，有可能是历史数据， 不加锁，是非阻塞读。

• Read Committed：每次select，都生成一个快照读。

• Repeatable Read：开启事务后第一个select语句才是快照读的地方。

• Serializable：快照读会退化为当前读。

在这里插入图片描述
在测试中,我们看到即使事务B提交了数据,事务A中也查询不到。 原因就是因为普通的select是快照 读，而在当前默认的RR隔离级别下，开启事务后第一个select语句才是快照读的地方，后面执行相同 的select语句都是从快照中获取数据，可能不是当前的最新数据，这样也就保证了可重复读。

3). MVCC

​ 全称 Multi-Version Concurrency Control，多版本并发控制。指维护一个数据的多个版本， 使得读写操作没有冲突，快照读为MySQL实现MVCC提供了一个非阻塞读功能。

​ MVCC的具体实现，还需 要依赖于数据库记录中的三个隐式字段、undo log日志、readView。

​ 接下来，我们再来介绍一下InnoDB引擎的表中涉及到的隐藏字段 、undolog 以及 readview，从 而来介绍一下MVCC的原理。

隐藏字段

1 介绍

在这里插入图片描述
当我们创建了上面的这张表，我们在查看表结构的时候，就可以显式的看到这三个字段。 实际上除了 这三个字段以外，InnoDB还会自动的给我们添加三个隐藏字段及其含义分别是：
在这里插入图片描述
而上述的前两个字段是肯定会添加的， 是否添加最后一个字段DB_ROW_ID，得看当前表有没有主键， 如果有主键，则不会添加该隐藏字段。

undolog

1 介绍

​ 回滚日志，在insert、update、delete的时候产生的便于数据回滚的日志。

当insert的时候，产生的undo log日志只在回滚时需要，在事务提交后，可被立即删除。

而update、delete的时候，产生的undo log日志不仅在回滚时需要，在快照读时也需要，不会立即被删除。

2 版本链

有一张表原始数据为：
在这里插入图片描述

DB_TRX_ID : 代表最近修改事务ID，记录插入这条记录或最后一次修改该记录的事务ID，是自增的。
DB_ROLL_PTR ： 由于这条数据是才插入的，没有被更新过，所以该字段值为null。指向上一个版本

然后，有四个并发事务同时在访问这张表。

A. 第一步

在这里插入图片描述
当事务2执行第一条修改语句时，会记录undo log日志，记录数据变更之前的样子;

然后更新记录， 并且记录本次操作的事务ID，回滚指针，回滚指针用来指定如果发生回滚，回滚到哪一个版本。
在这里插入图片描述
在这里插入图片描述
B.第二步
在这里插入图片描述当事务3执行第一条修改语句时，也会记录undo log日志，记录数据变更之前的样子; 然后更新记 录，并且记录本次操作的事务ID，回滚指针，回滚指针用来指定如果发生回滚，回滚到哪一个版本。
在这里插入图片描述

C. 第三步
在这里插入图片描述
当事务4执行第一条修改语句时，也会记录undo log日志，记录数据变更之前的样子; 然后更新记 录，并且记录本次操作的事务ID，回滚指针，回滚指针用来指定如果发生回滚，回滚到哪一个版本。
在这里插入图片描述
最终我们发现，不同事务或相同事务对同一条记录进行修改，会导致该记录的undolog生成一条 记录版本链表，链表的头部是最新的旧记录，链表尾部是最早的旧记录。

readview

ReadView（读视图）是 快照读 SQL执行时MVCC提取数据的依据，记录并维护系统当前活跃的事务 （未提交的）id。

ReadView中包含了四个核心字段：

在这里插入图片描述
而在readview中就规定了版本链数据的访问规则：

trx_id 代表当前undolog版本链对应事务ID。

在这里插入图片描述
后面会有案例解释这张图

不同的隔离级别，生成ReadView的时机不同：

  • READ COMMITTED ：在事务中每一次执行快照读时生成ReadView。

  • REPEATABLE READ：仅在事务中第一次执行快照读时生成ReadView，后续复用该ReadView。

原理分析

1 RC隔离级别

RC隔离级别下，在事务中每一次执行快照读时生成ReadView。

我们就来分析事务5中，两次快照读读取数据，是如何获取数据的?

在事务5中，查询了两次id为30的记录，由于隔离级别为Read Committed，所以每一次进行快照读 都会生成一个ReadView，那么两次生成的ReadView如下。

在这里插入图片描述
A. 先来看第一次快照读具体的读取过程：
在这里插入图片描述

  1. m_ids是当前活跃的事务id集合，在当前箭头这行，事务2已经提交，所以当前活跃事务集合是3,4,5
  2. min_trx_id是最小活跃事务 那就是3
  3. max_trx_id是预分配的事务id 就是当前最大事务的id+1
  4. creator_trx_id是ReadView创建者事务id，在当前事务（查询id为30的记录）事务id是5

在进行匹配时（事务5查询id为30的记录），会从undo log的版本链，从上到下进行挨个匹配：

在这里插入图片描述
在这里插入图片描述

RR隔离级别

RR隔离级别下，仅在事务中第一次执行快照读时 生成的ReadView，后续复用该ReadView。 而RR 是可 重复读，在一个事务中，执行两次相同的select语句，查询到的结果是一样的。 那MySQL是如何做到可重复读的呢? 我们简单分析一下就知道了
在这里插入图片描述
我们看到，在RR隔离级别下，只是在事务中第一次快照读时生成ReadView，后续都是复用该ReadView，那么既然ReadView都一样， ReadView的版本链匹配规则也一样， 那么最终快照读返 回的结果也是一样的。

所以呢，MVCC的实现原理就是通过 InnoDB表的隐藏字段、UndoLog 版本链、ReadView来实现的。

而MVCC 加 锁，则实现了事务的隔离性。 而一致性则是由redolog 与 undolog保证。
在这里插入图片描述

豆恭梓
关注
专栏目录
MySQL事务与MVCC详解
Hi，我是sharkchili，CSDN Java领域博客专家，开源项目JavaGuide维护人员，我想写一些有意思的东西，希望对你有帮助。
09-03 1248
某个逻辑报错数据库连接中断某台服务器突然宕机这时候我们数据库执行的操作可能才到一半，所以为了避免这种一半一半的情况，我们就需要事务来保证数据一致性。所以事务就是当作一个原子的逻辑组操作，要么全都成功执行，要么全部都失败。事务有分分布式事务和数据库事务，如果没有特指，我们平时所说的事务都是数据库事务，也就是本文探讨的话题。
MySQL事务MVCC详解
qq_33807380的博客
10-17 1120
MVCC (MultiVersion Concurrency Control) 叫做多版本并发控制机制。主要是通过数据多版本来实现读-写分离，做到即使有读写冲突时，也能做到不加锁，非阻塞并发读，从而提高数据库并发性能。MVCC只在已提交读（Read Committed）和可重复读（Repeatable Read）两个隔离级别下工作，其他两个隔离级别和MVCC是不兼容的。因为未提交读，总数读取最新的数据行，而不是读取符合当前事务版本的数据行。而串行化（Serializable）则会对读的所有数据多加锁。
MySQL 事务与 MVCC 原理 详解
C/C++Linux、音视频、DPDK
08-16 370
什么是事务？ 数据库事务指的是一组数据操作，事务内的操作要么就是全部成功，要么就是全部失败，什么都不做，其实不是没做，是可能做了一部分但是只要有一步失败，就要回滚所有操作，有点一不做二不休的意思。 在 MySQL 中，事务支持是在引擎层实现的。MySQL 是一个支持多引擎的系统，但并不是所有的引擎都支持事务。比如 MySQL 原生的 MyISAM 引擎就不支持事务，这也是 MyISAM 被 InnoDB 取代的重要原因之一。 1、 四大特性 原子性（Atomicity）：事务开始后所有操作，要么全部做完
MySQL MVCC底层原理详解
天瑕的博客
07-25 2万+
MySQL MVCC底层原理详解
mysql的mvcc详解
健康平安的活着的专栏
09-28 5696
1。即通过数据行的多个版本管理来实现数据库的并发控制，使得在InnoDB事务隔离级别下执行一致性读操作有了保障。2.mysql中的InnoDB中实现了，大大提高数据库的并发度。3..MySQl中只有InnoDB支持MVCC，其他存储引擎不支持4.为了查询一些正在被其他事务更新的值的时候，能够查到它们被更新之前的值，这样做就能在查询的时候不必等待更新事务的提交。
MySQL之MVCC原理详解
KKK
04-03 1万+
MVCC详解
MySQL事务隔离级别及MVCC详解
Counter-Strike大牛
03-19 1091
C事务读id为1的数据，由于是可重复读隔离级别，所以不再生成新的ReadView，还是用之前的，m_ids=[100, 200]，min_trx_id=100, max_trx_id=201，creator_trx_id=0。C事务读id为1的数据，再次生成ReadView，m_ids=[200]，min_trx_id=200，max_trx_id=201，creator_trx_id=0。ReadView中有m_ids、min_trx_id、max_trx_id、creator_trx_id。
MySql MVCC 详解
MrLee的博客
05-27 6589
MVCC 是多版本并发控制（Multiversion Concurrency Control）的缩写。它是一种数据库事务管理技术，用于解决并发访问数据库的问题。MVCC 通过创建多个版本的同一数据，每个版本与一个事务关联，来实现并发控制。数据库在执行更新操作时，会保留之前版本的数据，以便其他正在执行事务的用户可以访问这些数据。每个事务都能看到一个稳定的数据快照，并且仅接触到他们自己的版本，这意味着每个事务可以独立地读取和写入数据，而不会干扰其它事务。
MySQL事务及实现原理
热门推荐
张彦峰的博客
01-17 81万+
MySQL事务简单介绍+事务特性分析+事务隔离级别+事务实现原理
MySQL事务以及MVCC详解
qq_44161695的博客
04-12 2472
MySQL事务以及MVCC什么是事务事务的特性（ACID）Innodb的隔离性有哪些每个隔离性会造成什么问题事务特性是怎么保证的事务怎么保证一致性事务怎么保证原子性事务怎么保证持久性事务怎么保证隔离性MVCC是什么MVCC的概念MVCC是怎么保证隔离级别的MVCC 在mysql 中的实现ReadView快照读和当前读RR隔离级别下解决幻读--临键锁串行化是怎么加锁的MySQL中锁MySQL锁概述死锁和死锁检测乐观锁和悲观锁共享锁和排它锁一致性锁定读和一致性非锁定读binlog，redolog，undolog
MySQL数据库事务隔离级别详解
12-16
MySQL数据库的事务隔离级别是数据库管理系统中用于控制事务处理中并发操作的重要机制。在多用户同时访问数据库的情况下，事务隔离级别能够确保数据的一致性和完整性，避免并发操作带来的各种问题，如脏读、不可重复...
mysql mvcc 原理详解
congge
10-23 4047
mysql mvcc原理解读
Mysql之MVCC原理详解，看这一篇就够了
m0_68103752的博客
04-22 3361
很多老铁讲到MVCC只知道版本链，但是像ReadView、包括和UndoLog的关系就不太理解了，接下来就详细给大家讲讲Mysql跟MVCC的那些事。最近打算跳槽面试的请收藏好！
【MySQL】数据库表的基本查询——增删查改
m0_74755811的博客
09-27 1081
在MySQL中，对表进行增删查改操作是数据库管理的基础。增（Insert）操作用于添加新记录，使用`INSERT INTO 表名 (列1 ...) VALUES (值1 ...);`。删（Delete）操作用于移除记录，使用`DELETE FROM 表名 WHERE 条件;`，需注意慎用以防误删。查（Select）操作用于检索数据，基本形式为`SELECT 列名 FROM 表名 WHERE 条件;`，可配合`ORDER BY`进行排序，`LIMIT`限制结果数量。改（Update）操作用于修改现有记录.
keepalived+MySQL 5.7编译安装及双活配置
最新发布
听雪楼主
10-01 590
keepalived+MySQL 5.7编译安装及双活配置
【mysql相关总结】
Charles D
09-30 192
数据库小的表,全表扫描效率更高，不用建索引。索引的类型1.普通索引：基本的索引，没有任何约束限制2.唯一索引：类似普通索引,有唯一约束性3.主键索引：特殊的唯一索引,不允许有空值4.组合索引：多个列组合创建索引5.外键索引：只有innodb可以使用6.全文索引：只有myisam可以使用，且只能对英文进行全文检索注意事项1.复合索引遵循前缀原则（最左匹配原则）2.like查询,%号不能在前面，否则索引失效3.如果or前面的条件有索引,也会失效。
docker容器mysql数据备份 mysql容器无法启动备份数据
zhangxu1998lq的博客
09-30 282
mysql是旧容器名 因为mysql的配置文件my.cnf的路径没有映射到服务器，我修改了配置文件，配置文件有错误导致，容器启动不了，一直restarting。nmysql是新容器名 mysql是旧容器名 mysql:5.7是我的镜像名。新容器正常启动，旧容器的数据都还在。
数据库课程设计mysql
weixin_44626085的博客
09-28 1087
在接下来的内容中，我们将一起探讨一个简单的学生选课系统。你将看到从E-R图、到数据库表设计，再到查询和数据维护的各个环节，带你迈出这段学习之旅。准备好了吗？
Linux递归找出目录下最近被修改文件（最近一段时间内被修改过的最新文件）（最近修改文件、最新文件、查找文件）（监控目录、监控mysql文件）
Dontla的博客
09-26 737
目录下最近60分钟内修改的最新文件。如果你需要查找的时间范围不同，可以调整。表示最近10分钟）。
启动一个事务，在事务中使用SQL语句删除bookdb 数据库中b_order表的所有记录，第一次不提交事务，第二次回滚事务，第三次提交事务。重启MySQL服务器分别查看记录是否被永久删除。
05-31
好的，您的问题是关于 MySQL 数据库的事务操作，以下是对您的问题的回答： 首先，您需要在 MySQL 中创建一个名为 `bookdb` 的数据库，并在其中创建一个名为 `b_order` 的表，用于存储订单信息。例如，可以使用以下 SQL 语句创建该表： ``` CREATE TABLE b_order ( id INT AUTO_INCREMENT PRIMARY KEY, customer_name VARCHAR(50), order_date DATE, total_amount DECIMAL(10, 2) ); ``` 接下来，您可以使用以下的 SQL 语句来启动一个事务，并删除 `b_order` 表中的所有记录： ``` START TRANSACTION; DELETE FROM b_order; ``` 此时，您可以使用 `SELECT * FROM b_order` 查看 `b_order` 表中的记录是否被删除。但是，由于事务还没有提交，因此删除操作并没有被永久保存到数据库中。 接下来，您可以使用以下 SQL 语句来回滚事务，即撤销上述的删除操作： ``` ROLLBACK; ``` 此时，您可以再次使用 `SELECT * FROM b_order` 查看 `b_order` 表中的记录是否恢复了之前的状态。 最后，您可以使用以下 SQL 语句提交事务，并永久删除 `b_order` 表中的所有记录： ``` COMMIT; ``` 此时，您可以再次使用 `SELECT * FROM b_order` 查看 `b_order` 表中的记录是否被永久删除。 需要注意的是，如果您重启了 MySQL 服务器，那么在重启前提交的事务会被保存，因此 `b_order` 表中的记录会被永久删除。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值