目录
MySQL体系结构
English 版本的体系结构 hold住!!!!!
Chinese 拿下拿下!!!!!
具体分层
客户端层:
功能:
最上层是一些客户端和链接服务,包含本地 sock 通信 和大多数基于客户端/服务端工具实现的类似于 TCP/IP 的通信。主要完成一些类似于连接处理、授权认证、及相关的安全方案。在该层上引入了线程池的概念,为通过认证安全接入的客户端提供线程。同样在该层上可以实现基于 SSL 的安全链接。
服务器也会为安全接入的每个客户端验证它所具有的操作权限。
组成:
- 连接池:管理客户端连接,包括监听端口、接收连接请求、处理认证等。
- 客户端程序:如 MySQL 命令行工具、各种编程语言的 API(如 JDBC、PDO、MySQL Connector/ODBC 等)。
服务器层:
功能:
第二层架构主要完成大多数的核心服务功能,如 SQL 接口,并完成缓存的查询,SQL的分析和优化,部分内置函数的执行。
所有跨存储引擎的功能也在这一层实现,如过程、函数等。在该层,服务器会解析查询并创建相应的内部解析树,并对其完成相应的优化如确定表的查询的顺序,是否利用索引等,最后生成相应的执行操作。如果是 select 语句,服务器还会查询内部的缓存,如果缓存空间足够大,这样在解决大量读操作的环境中能够很好的提升系统的性能。
组成:
- 缓存:包括查询缓存(MySQL 8.0之前)和其他类型的缓存,用于存储频繁访问的数据和执行计划。
- 查询优化器:将解析器生成的解析树转换成执行计划,选择最优的查询执行路径。
- 解析器:解析 SQL 命令,检查语法是否正确,然后生成解析树,这一步不涉及具体的表和数据。
- SQL接口:接收客户端发送的各种 SQL 命令,如 SELECT、INSERT、UPDATE 等,并将这些命令传递给其他组件。
存储引擎层(☆☆☆☆☆):
功能:
存储引擎层,存储引擎真正的负责了 MySQL 中数据的存储和提取,服务器通过API 和 存储引擎进行通信。
不同的存储引擎具有不同的功能,这样我们可以根据自己的需要,来选取合适的存储引擎。数据库中的索引是在存储引擎层实现的。
组成:
- 存储引擎:MySQL 区别于其他数据库系统的一个特性是其插件式的存储引擎架构。常见的存储引擎有 InnoDB(支持事务处理)、MyISAM(不支持事务处理)、Memory 等。
- 文件系统:存储引擎负责将数据以文件的形式存储在操作系统的文件系统之上。
数据存储层:
功能:
- 数据存储层,主要是将数据(如: redolog、undolog 、数据、索引、二进制日志、错误日志、查询日志、慢查询日志等)存储在文件系统之上,并完成与存储引擎的交互。
组成:
- 日志文件:包括错误日志、二进制日志(binlog)、事务日志(InnoDB的redo log)等,用于记录操作和实现数据恢复。
- 数据文件:存储实际的数据,如表、索引等。
存储引擎
大家可能没有听说过存储引擎,但是一定听过引擎这个词,引擎就是发动机,是一个机器的核心组件。比如,对于舰载机、直升机、火箭来说,他们都有各自的引擎,是他们最为核心的组件。
而我们在选择引擎的时候,需要在合适的场景,选择合适的存储引擎,就像在直升机上,我们不能选择舰载机的引擎一样。
存储引擎什么?
存储引擎就是存储数据、建立索引、更新/查询数据等技术的实现方式。
存储引擎是基于表的,而不是基于库的,所以存储引擎也可被称为表类型。我们可以在创建表的时候,来指定选择的存储引擎,如果没有指定将自动选择默认的存储引擎。
而对于存储引擎,也是一样,它是 mysql 数据库的核心,我们也需要在合适的场景选择合适的存储引擎。
从数据库的角度看存储引擎
- 建表时指定存储引擎
CREATE TABLE 表名(
字段1 字段1类型 [ COMMENT 字段1注释 ] , ......
字段n 字段n类型 [COMMENT 字段n注释 ]
) ENGINE = INNODB [ COMMENT 表注释 ] ;
2. 查询当前数据库支持的存储引擎
show engines;
3.创建表 my_myisam , 并指定 MyISAM 存储引擎
create table my_myisam( id int,
name varchar(10)
) engine = MyISAM ;
几种存储引擎的介绍和特点
熟悉 InnoDB ,MyISAM,Memory 三种即可。其他了解就好!!!!
InnoDB:
InnoDB 是一种兼顾高可靠性和高性能的通用存储引擎,在 MySQL 5.5 之后,InnoDB 是默认的 MySQL 存储引擎。
-
- 事务支持:支持 ACID 事务,是 MySQL 中唯一支持事务的存储引擎(默认从MySQL 5.5版本开始)。
- 行级锁定(行锁):使用行级锁定,提高了多用户并发操作的性能。
- MVCC(多版本并发控制):支持高并发场景下的数据一致性,允许多个读取操作同时进行,而不影响写入操作。
- 崩溃恢复:具有自动崩溃恢复功能,能够在系统故障后自动恢复数据。
- 外键支持:支持外键约束,保证了数据的参照完整性。
- 聚集索引:数据行实际上存放在主键索引的叶子节点上,这有助于通过主键快速访问数据。
- 其他:
- 通过重做日志和撤销日志实现数据的持久性和一致性
- 文件:
- 执行命令查看
- xxx.ibd:xxx代表的是表名,innoDB 引擎的每张表都会对应这样一个表空间文件,存储该表的表结构(frm-早期的、sdi-新版的)、数据和索引。
- 从 MySQL 5.5 版本起,InnoDB 成为默认的存储引擎。
show variables like 'innodb_file_per_table';
如果该参数开启,代表对于 InnoDB 引擎的表,每一张表都对应一个ibd文件。我们直接打开 MySQL 的数据存放目录:
C:\ProgramData\MySQL\MySQL Server 8.0\Data\codepark,
这个目录下有很多文件夹,不同的文件夹代表不同的数据库,我们直接打开 codepark (我的一个小项目)文件夹。
在 cmd 中查看表内容
ibd2sdi 表名.ibd
ibd2sdi user.ibd
逻辑存储结构
此内容对于后续理解 InnoDB的B+树比较有帮助!!!
表空间(Tablespace) : InnoDB 存储引擎逻辑结构的最高层,ibd 文件其实就是表空间文件,在表空间中可以包含多个 Segment 段。
段 (Segment): 表空间是由各个段组成的,常见的段有数据段、索引段、回滚段等。InnoDB 中对于段的管理,都是引擎自身完成,不需要人为对其控制,一个段中包含多个区。
区(Extent) : 区是表空间的单元结构,每个区的大小为1M。默认情况下, InnoDB存储引擎页大小为16K,即一个区中一共有64个连续的页。
页 (Page): 页是组成区的最小单元,页也是 InnoDB 存储引擎磁盘管理的最小单元,每个页的大小默认为 16KB。为了保证页的连续性,InnoDB 存储引擎每次从磁盘申请 4-5 个区。
行(Row) : InnoDB 存储引擎是面向行的,也就是说数据是按行进行存放的,在每一行中除了定义表时所指定的字段以外,还包含两个隐藏字段(后面会详细介绍)。
MyISAM:
MyISAM是MySQL早期的默认存储引擎。
-
- 表级锁定(表锁):只支持表级锁定,限制了并发写入的性能。
- 全文索引:支持全文索引,适用于全文搜索。
- 空间使用效率:相比InnoDB,MyISAM 通常占用更少的存储空间。
- 不支持事务:不提供事务支持,因此在数据完整性方面不如InnoDB。
- 不支持外键:不支持外键约束。
- 其他:
- 文件:
- xxx.MYD: 存储数据
- xxx.MYI: 存储索引
- xxx.sdi:存储表结构信息
Memory:
Memory 引擎的表数据时存储在内存中的,由于受到硬件问题、或断电问题的影响,只能将这些表作为临时表或缓存使用( hash索引(默认))。
- 内存存储:数据存储在内存中,适用于临时表或者对数据持久性要求不高的场景。
- 表级锁定:与 MyISAM 类似,使用表级锁定。
- 支持哈希索引:除了支持 B-Tree 索引外,还支持哈希索引,可以提高查询速度。
- 不支持事务:不提供事务支持。
Archive:
- 压缩存储:专门为存储大量数据而设计,支持数据压缩,减少存储空间的使用。
- 不支持索引:不支持索引,因此查询性能较低,适用于归档和日志记录。
- 只支持插入和查询操作:主要用于数据归档,不支持更新和删除操作。
CSV:
- CSV格式存储:数据以CSV格式存储,可以直接使用文本编辑器进行编辑。
- 不支持索引:不支持索引,适用于数据交换和导入导出。
- 只读:虽然可以修改数据,但通常用作数据的导入和导出。
BLACKHOLE:
- 黑洞存储引擎:所有插入的数据都会消失,不会存储在磁盘上,适用于复制数据流但不保留数据的场景。
- 事务日志:即使数据不存储,也会记录事务日志,可用于测试事务日志的行为。
NDB (MySQL Cluster):
- 集群存储引擎:为MySQL Cluster提供支持,适用于分布式数据库场景。
- 数据冗余:数据可以自动分布在多个节点上,提供高可用性和数据冗余。
- 内存存储:数据存储在内存中,适用于高速读写的场景。
注:
选择合适的存储引擎对于数据库的性能和功能至关重要。在选择存储引擎时,需要考虑数据的一致性要求、并发访问模式、数据大小、读写比例等因素。随着MySQL的不断发展,存储引擎也在不断优化和更新,因此在使用时需要根据最新版本的特性来做出选择。