目录
存储引擎概述
存储引擎的概念
- MySQL中的数据用各种不同的技术存储在文件中,每一种技术都使用不同的存储机制、索引技巧、锁定水平并最终提供不同的功能和能力,这些不同的技术以及配套的功能在MySQL中称为存储引擎
- 存储引擎是MySQL将数据存储在文件系统中的存储方式或者存储格式
- 存储引擎是MySQL数据库中的组件,负责执行实际的数据I/O操作
- MySQL系统中,存储引擎处于文件系统之上,在数据保存到数据文件之前会传输到存储引擎,之后按照各个存储引擎的存储格式进行存储
常用的存储引擎
MyISAM
- Mysql 5.5之前的默认数据库引擎,最为常用。拥有较高的插入,查询速度,但不支持事务
InnoDB
- 事务型速记的首选引擎,支持ACID事务,支持行级锁定,MySQL5.5成为默认数据库引擎
MyISAM和InnoDB
MyISAM
特点介绍
1.MylSAM不支持事务,也不支持外键约束,只支持全文索引,数据文件和索引文件是分开保存的
2.访问速度快,对事务完整性没有要求
3.MylSAM适合查询、插入为主的应用
4.表级锁定形式,数据在更新时锁定整个表
5.数据库在读写过程中相互阻塞
- 会在数据写入的过程阻塞用户数据的读取
- 也会在数据读取的过程中阻塞用户的数据写入数据单独写入或读取,速度过程较快且占用资源相对少
6.MylSAM在磁盘.上存储成三个文件,文件名和表名都相同,但是扩展名分别为
- .frm文件存储表结构的定义
- 数据文件的扩展名为.MYD (MYData)
- 索引文件的扩展名是.MYI (MYIndex)
存储格式
静态表(固定长度)
- 静态表是默认的存储格式
- 静态表中的字段都是非可变字段,这样每个记录都是固定长度的
- 这种存储方式的优点是存储非常迅速,容易缓存,出现故障容易恢复
- 缺点是占用的空间通常比动态表多
动态表
- 动态表包含可变字段,记录不是固定长度的
- 这样存储的优点是占用空间较少,但是频繁的更新、删除记录会产生碎片
- 需要定期执行 OPTIMIZE TABLE 语句或 myisamchk -r 命令来改善性能
- 并且出现故障的时候恢复相对比较困难
压缩表
- 压缩表由 myisamchk 工具创建,占据非常小的空间
- 因为每条记录都是被单独压缩的,所以只有非常小的访问开支
适用的生产场景
- 公司业务不需要事务的支持
- 单方面读取或写入数据比较多的业务
- MyISAM存储引擎数据读写都比较频繁场景不适合
- 使用读写并发访问相对较低的业务
- 数据修改相对较少的业务
- 对数据业务一致性要求不是非常高的业务
- 服务器硬件资源相对比较差
InnoDB
特点介绍
1.支持事务,支持4个事务隔离级别
2.MySQL从5.5.5版本开始,默认的存储引擎为InnoDB
3.读写阻塞与事务隔离级别相关
4.能非常高效的缓存索引和数据
5.表与主键以簇的方式存储 BTREE
6.支持分区、表空间,类似oracle数据库
7.支持外键约束,5.5前不支持全文索引,5.5后支持全文索引
8.对硬件资源要求还是比较高的场合
行级锁定,但是全表扫描仍然会是表级锁定,如
update table set a=1 where user like ‘%zhang%’;
9.InnoDB中不保存表的行数,如 select count(*) from table; 时,InnoDB需要扫描一遍整个表来计算有多少行,但是MyISAM只要简单的读出保存好的行数即可。需要注意的是当count(*)语句包含where条件时MyISAM也需要扫描整个表
10.对于自增长的字段,InnoDB 中必须包含只有该字段的索引,但是在MyISAM表中可以和其他字段一起建立组合索引
11.delete清空整个表时,InnoDB 是一行一 行的删除,效率非常慢。MyISAM则会重建表
适用的生产场景
- 业务需要事务的支持
- 行级锁定对高并发有很好的适应能力,但需确保查询是通过索引来完成
- 业务数据更新较为频繁的场景 如:论坛,微博等
- 业务数据一致性要求较高 如:银行业务
- 硬件设备内存较大,利用InnoDB较好的缓存能力来提高内存利用率,减少磁盘I0的压力
两者区别
MyISAM
- 不支持事务、外键约束;支持全文索引;锁定类型只支持表级锁定;适合单独的查询和插入的操作;读写会相互阻塞;硬件资源占用较小;数据文件和索引文件是分开存储的,存储成三个文件:表结构文件.frm、数据文件.MYD、索引文件.MYI
使用场景:适用于不需要事务支持,单独的查询或插入数据的业务场景
InnoDB
- 支持事务、外键约束;也支持全文索引;锁定类型支持行级锁定(在全表扫描时仍会表级锁定);读写并发能力较好;缓存能力较好可以减少磁盘IO的压力;数据文件也是索引文件,存储成:表结构文件.frm、表空间文件.ibd
使用场景:适用于需要事务支持,数据一致性要求较高,数据会频繁更新,读写并发高的业务场景
功能 | MyISAM | InnoDB |
存储限制 | 256TB | 64TB |
事务 | 不支持 | 支持 |
全文索引 | 支持 | 不支持 |
B树索引 | 支持 | 支持 |
哈希索引 | 不支持 | 不支持 |
集群索引 | 不支持 | 支持 |
数据索引 | 不支持 | 支持 |
数据压缩 | 支持 | 不支持 |
外键约束 | 不支持 | 支持 |
空间使用率 | 低 | 高 |
MySQL查询执行过程
- 客户端向MySQL服务器发送一条查询请求,连接器负责处理连接,并进行身份验证和权限控制
- MySQL先检查查询缓存,如果命中缓存,则立刻返回存储在缓存中的结果;否则进入下一阶段
- 服务器使用查询解析器进行SQL语句解析、预处理,再由优化器生成对应的执行计划
- MySQL根据执行计划,调用存储引擎来执行查询
- 将结果返回给客户端,同时缓存查询结果
MySQL存储引擎的管理
存储引擎的查看
查看表使用的存储引擎
方法一:
show table status from 库名 where name='表名'\G
方法二:
use 库名;
show create table 表名;
查看系统支持的存储引擎
show engines;
存储引擎的修改
设置默认存储引擎
set global/session default_storage_engine=innodb/myisam;
通过 alter table 修改
use 库名;
alter table 表名 engine=MyISAM;
#针对已存在的表修改存储引擎
通过修改 /etc/my.cnf配置文件,指定默认存储引擎并重启服务
vim /etc/my.cnf
......
[mysqld]
......
default-storage-engine=InnoDB
systemctl restart mysql.service
#此方法只对修改了配置文件并重启mysql服务后新创建的表有效,已经存在的表不会有变更
通过 create table 创建表时指定存储引擎
use 库名;
create table 表名(字段1 数据类型,...) engine=MyISAM;
InnoDB的行锁和表锁
行锁实验
做该实验的时候要将默认引擎设置为innodb
示例1
示例2
表锁实验
死锁是什么?
概念
- 指两个或两个以上的事务在执行过程中,因争夺锁资源而造成的一种互相等待的现象,若无外力作用,事务都将无法继续运行。此时称系统处于死锁状态或系统产生了死锁
- 例如,如果事务A锁住了记录1并等待记录2,而事务B锁住了记录2并等待记录1,这样两个事务就发生了死锁现象。计算机系统中,如果系统的资源分配策略不当,更常见的可能是程序员写的程序有错误等,则会导致进程因竞争资源不当而产生死锁的现象
危害
- 如果一个连接因为事务阻塞长时间不释放,那么后面新的请求要执行的sql也会排队等待,越积越多,最终会拖垮整个应用。一旦你的应用部署在微服务体系中而又没有做熔断处理(当某服务出现不可用或响应超时的情况时,会暂时停止对该服务的调用),由于整个链路被阻断,那么就会引发雪崩效应,导致很严重的生产事故
如何尽可能避免死锁
- 设置事务的锁等待超时时间 innodb_lock_wait_timeout
- 设置开启死锁检测功能 innodb_deadlock_detect
- 为表建立合理的索引,减少表锁发生的概率
- 如果业务允许,可以降低隔离级别,比如选用 提交读 Read Committed 隔离级别,从而避免间隙锁导致死锁
- 建议开发人员尽量使用更合理的业务逻辑,比如多表操作时以固定顺序访问表,尽量避免同时锁定多个资源
- 建议开发人员尽量保持事务简短,减少对资源的占用时间和占用范围
- 建议开发人员在读多写少的场景下采用乐观锁机制