Mysql锁与事务

我们的数据库一般都会并发执行多个事务，多个事务可能会并发的对相同的一批数据进行增删改查操作，可能就会导致我们说的脏写、脏读、不可重复读、幻读这些问题。

这些问题的本质都是数据库的多事务并发问题，为了解决多事务并发问题，数据库设计了事务隔离机制、锁机制、MVCC多版本并发控制隔离机制，用一整套机制来解决多事务并发问题。接下来，我们会深入讲解这些机制，让大家彻底理解数据库内部的执行原理

1. 事务及其ACID属性

事务是由一组SQL语句组成的逻辑处理单元,事务具有以下4个属性,通常简称为事务的ACID属性。

• 原子性(Atomicity) ：事务是一个原子操作单元,其对数据的修改,要么全都执行,要么全都不执行。
• 一致性(Consistent) ：在事务开始和完成时,数据都必须保持一致状态。这意味着所有相关的数据规 则都必须应用于事务的修改,以保持数据的完整性
• 隔离性(Isolation) ：数据库系统提供一定的隔离机制,保证事务在不受外部并发操作影响的“独 立”环境执行。这意味着事务处理过程中的中间状态对外部是不可见的,反之亦然
• 持久性(Durable) ：事务完成之后,它对于数据的修改是永久性的,即使出现系统故障也能够保持。

并发事务处理带来的问题

• 更新丢失(Lost Update)或脏写：当两个或多个事务选择同一行，然后基于最初选定的值更新该行时，由于每个事务都不知道其他事务的存 在，就会发生丢失更新问题–最后的更新覆盖了由其他事务所做的更新。
• 脏读(Dirty Reads)：一个事务正在对一条记录做修改，在这个事务完成并提交前，这条记录的数据就处于不一致的状态；这 时，另一个事务也来读取同一条记录，如果不加控制，第二个事务读取了这些“脏”数据，并据此作进一步的 处理，就会产生未提交的数据依赖关系。这种现象被形象的叫做“脏读
  • 事务A读取到了事务B已经修改但尚未提交的数据
• 不可重读(Non-Repeatable Reads):一个事务在读取某些数据后的某个时间，再次读取以前读过的数据，却发现其读出的数据已经发生了改 变、或某些记录已经被删除了！这种现象就叫做“不可重复读”。
  • ：事务A内部的相同查询语句在不同时刻读出的结果不一致，不符合隔离性
• 幻读(Phantom Reads):一个事务按相同的查询条件重新读取以前检索过的数据，却发现其他事务插入了满足其查询条件的新数 据，这种现象就称为“幻读”
  • 事务A读取到了事务B提交的新增数据，不符合隔离性

不可重复读和幻读两者有些相似。但不可重复读重点在于update和delete，而幻读的重点在于insert。

事务隔离级别

隔离级别	脏读(Dirty Read)	不可重复读(Non Repeatable Read)	幻读(Phantom Read)
读未提交(read uncommitted )	可能	可能	可能
读已提交(read committed)	不可能	可能	可能
可重复读(repeatable read)	不可能	不可能	可能
可串行话(Serializable)	不可能	不可能	不可能

数据库的事务隔离越严格,并发副作用越小,但付出的代价也就越大,因为事务隔离实质上就是使事务在一定程度 上“串行化”进行,这显然与“并发”是矛盾的。

同时,不同的应用对读一致性和事务隔离程度的要求也是不同的,比如许多应用对“不可重复读"和“幻读”并不 敏感,可能更关心数据并发访问的能力。

查看当前数据库的事务隔离级别：show variables like 'tx_isolation'

设置事务的隔离级别：set tx_isolation = 'REPEATABLE-READ' 8.0版本 transaction_isolation

Mysql默认的事务隔离级别为可重复读

2. 锁详解

锁是计算机协调多个进程或线程并发访问某一资源的机制

在数据库中，除了传统的计算资源(如CPU、RAM、I/O)的争用外，数据也是一种供需要用户共享的资源。如何保证数据并发访问的一致性、有效性是所有数据库必须解决的一个问题。锁冲突也是影响数据库并发访问性能的一个重要因素。

锁分类

• 性能
  • 乐观锁
  • 悲观锁
• 对数据库的操作类型
  • 读锁(共享锁，S锁(Shared)):针对同一份数据，多个读操作可以同时进行而不会互相影响
  • 写锁(排他锁，X(eXclusive))：当前写操作没有完成前，它会阻断其他写锁和读锁
• 从对数据操作的力度分：
  • 表锁
  • 行锁

表锁

每次操作锁住整张表。开销小，加锁快；不会出现死锁；锁定粒度大，发生锁冲突的概率最高，并发度最低；一般用在整表数据迁移的场景。

• 手动增加表锁

  lock table 表名称 read(write),表名称2 read(write);

• 查看表上加过的锁

  show open tables;

• 删除表锁

  unlock tables;

• 案例一： 加读锁

  lock table mylock read;

  • 当前session和其他session都可以读该表
  • 当前session中插入或者更新锁定的表都会报错，其他session插入或更新则会等待

• 案例二：加写锁

  lock table mylock write;

  • 当前session对该表的增删改查都没有问题，其他session对该表的所有操作被阻塞、
  • 对MyISAM表的读操作(加读锁) ,不会阻塞其他进程对同一表的读请求,但会阻赛对同一表的写请求。只有当读锁释放后,才会执行其它进程的写操作
  • 对MylSAM表的写操作(加写锁) ,会阻塞其他进程对同一表的读和写操作,只有当写锁释放后,才会执行其它进程的读写操作

行锁

每次操作锁住一行数据。开销大，加锁慢；会出现死锁；锁定粒度最小，发生锁冲突的概率最低，并发度最高。

InnoDB与MYISAM的最大不同有两点：

• InnoDB支持事务(TRANSACTION
• InnoDB支持行级锁

一个session开启事务更新不提交，另一个session更新同一条记录会阻塞，更新不同记录不会阻塞

• MyISAM在执行查询语句SELECT前，会自动给涉及的所有表加读锁,在执行update、insert、delete操作会自动给涉及的表加写锁
• InnoDB在执行查询语句SELECT时(非串行隔离级别)，不会加锁。但是update、insert、delete操作会加行锁。
• 简而言之，就是读锁会阻塞写，但是不会阻塞读。而写锁则会把读和写都阻塞。

间隙锁

• 间隙锁，锁的就是两个值之间的空隙。Mysql默认级别是repeatable-read，有办法解决幻读问题吗？间隙锁在某些情况下可以解决幻读问题。

临键锁(Next-key Locks)

• Next-Key Locks是行锁与间隙锁的组合。(3,20]的整个区间可以叫做临键锁。

无索引行锁会升级为表锁

• 锁主要是加在索引上，如果对非索引字段更新，行锁可能会变表锁
• InnoDB的行锁是针对索引加的锁，不是针对记录加的锁。并且该索引不能失效，否则都会从行锁升级为表锁
• 锁定某一行还可以用lock in share mode(共享锁) 和for update(排它锁)

3. 行锁与事务隔离级别案例分析

3.1 初始化数据

CREATE TABLE `account` (
`id` int(11) NOT NULL AUTO_INCREMENT,
`name` varchar(255) DEFAULT NULL,
`balance` int(11) DEFAULT NULL,
PRIMARY KEY (`id`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8;
INSERT INTO `test`.`account` (`name`, `balance`) VALUES ('lilei', '450');
INSERT INTO `test`.`account` (`name`, `balance`) VALUES ('hanmei', '16000');
INSERT INTO `test`.`account` (`name`, `balance`) VALUES ('lucy', '2400');

3.2 读未提交

• 打开一个客户端A，并设置当前事务模式为read uncommitted(未提交读)，查询表account的初始值：

  set transaction_isolation = 'read-uncommitted';//mysql8,旧版set tx_isolation='read-uncommitted';
  SHOW VARIABLES like '%transaction_isolation%';//显示隔离级别

• 开启事务并查询数据

  start TRANSACTION;
  select * from account;

• 在客户端A的事务提交之前，打开另一个客户端B，更新表account：

  START TRANSACTION;
  UPDATE account set balance = balance -50 where id = 1;

• 这时，虽然客户端B的事务还没提交，但是客户端A就可以查询到B已经更新的数据：

  select * from account;

• 一旦客户端B的事务因为某种原因回滚，所有的操作都将会被撤销，那客户端A查询到的数据其实就是脏数据

• 在客户端A执行更新语句update account set balance = balance - 50 where id =1，lilei的balance没有变成350，居然是400，是不是很奇怪，数据不一致啊，如果你这么想就太天真 了，在应用程序中，我们会用400-50=350，并不知道其他会话回滚了，要想解决这个问题可以采用读已提交的隔离级别

3.2 读已提交

• 打开一个客户端A，并设置当前事务模式为read committed(未提交读)，查询表account的所有记录

  set transaction_isolation = 'read-committed'; -- set tx_isolation='read-committed';
  start TRANSACTION;
  select * from account;

• 在客户端A的事务提交之前，打开另一个客户端B，更新表account：

  START TRANSACTION;
  UPDATE account set balance = balance -50 where id = 1;

• 这时，客户端B的事务还没提交，客户端A不能查询到B已经更新的数据，解决了脏读问题：

• 客户端B的事务提交

  commit;

• 客户端A执行与上一步相同的查询，结果 与上一步不一致，即产生了不可重复读的问题

3.3 可重复读

• 打开一个客户端A，并设置当前事务模式为repeatable read，查询表account的所有记录

  set transaction_isolation = 'repeatable-read'; -- set tx_isolation='repeatable-read';
  start TRANSACTION;
  select * from account;

• 在客户端A的事务提交之前，打开另一个客户端B，更新表account并提交

  START TRANSACTION;
  UPDATE account set balance = balance -50 where id = 1;
  commit;
  SELECT * from account

• 在客户端A查询表account的所有记录，与步骤(1)查询结果一致，没有出现不可重复读的问题

• 在客户端A，接着执行update account set balance = balance - 50 where id = 1，balance没有变成400-50=350，lilei的balance值用的是步骤2中的350来算的，所以是300，数据的一致性倒是没有被破坏。可重复读的隔离级别下使用了MVCC(multi-version concurrency control)机制，select操作不会更新版本号，是快照读(历史版本)；insert、update和delete会更新版本号，是当前读(当前版本)。

• 重新打开客户端B，插入一条新数据后提交

• 在客户端A查询表account的所有记录，没有查出新增数据，所以没有出现幻读

• 在客户端A执行update account set balance=888 where id = 4;能更新成功，再次查询能查到客户端B新增的数据

3.4 串行化

• 打开一个客户端A，并设置当前事务模式为serializable，查询表account的初始值

  set transaction_isolation = 'serializable'; -- set tx_isolation='serializable';
  start TRANSACTION;
  select * from account;

• 打开一个客户端B，并设置当前事务模式为serializable，更新相同的id为1的记录会被阻塞等待，更新id为2的记录可以成功，说明在串行模式下innodb的查询也会被加上行锁。

  • 如果客户端A执行的是一个范围查询，那么该范围内的所有行包括每行记录所在的间隙区间范围(就算该行数据还未被插入也会加锁，这种是间隙锁)都会被加锁。此时如果客户端B在该范围内插入数据都会被阻塞，所以就避免了幻读。

    这种隔离级别并发性极低，开发中很少会用到

Innodb存储引擎由于实现了行级锁定，虽然在锁定机制的实现方面所带来的性能损耗可能比表级锁定会要更高一下，但是在整体并发处理能力方面要远远优于MYISAM的表级锁定的。当系统并发量高的时候，Innodb的整体性能和MYISAM相比就会有比较明显的优势了。但是，Innodb的行级锁定同样也有其脆弱的一面，当我们使用不当的时候，可能会让Innodb的整体性能表现不仅不能比MYISAM高，甚至可能会更差。

行锁分析

通过检查InnoDB_row_lock状态变量来分析系统上的行锁的争夺情况

show status like 'innodb_row_lock%';

• Innodb_row_lock_current_waits: 当前正在等待锁定的数量
• Innodb_row_lock_time: 从系统启动到现在锁定总时间长度
• Innodb_row_lock_time_avg: 每次等待所花平均时间
• Innodb_row_lock_time_max：从系统启动到现在等待最长的一次所花时间
• Innodb_row_lock_waits:系统启动后到现在总共等待的次数

4.INFORMATION_SCHEMA系统库锁相关数据表

‐‐ 查看事务
select * from INFORMATION_SCHEMA.INNODB_TRX;
‐‐ 查看锁
select * from INFORMATION_SCHEMA.INNODB_LOCKS;
‐‐ 查看锁等待
select * from INFORMATION_SCHEMA.INNODB_LOCK_WAITS;

‐‐ 释放锁，trx_mysql_thread_id可以从INNODB_TRX表里查看到
kill trx_mysql_thread_id

‐‐ 查看锁等待详细信息
show engine innodb status\G;

5. 锁优化建议

• 尽可能让所有数据检索都通过索引来完成，避免无索引行锁升级为表锁

• 合理设计索引，尽量缩小锁的范围

• 尽可能减少检索条件范围，避免间隙锁

• 尽量控制事务大小，减少锁定资源量和时间长度，涉及事务加锁的sql尽量放在事务最后执行

• 尽可能低级别事务隔离