Mysql 逻辑架构剖析

qq_43085588

已于 2023-05-22 11:44:24 修改

阅读量173

点赞数

分类专栏： mysql底层原理文章标签： mysql 架构服务器

于 2023-04-20 15:19:17 首次发布

本文链接：https://blog.csdn.net/qq_43085588/article/details/130214388

版权

mysql底层原理专栏收录该内容

23 篇文章 1 订阅

订阅专栏

1. 服务器处理客户端请求

首先Mysql是典型的C/S架构，即 Client/Server 架构，服务器端程序使用mysqld。

不论客户端进程和服务器进程采用的是那种方式进行通信，最后实现的效果都是： 客户端进程向服务器进程发送一段文本（sql语句），服务器进程处理后在向客户端进程发送一段文本（处理结果）

服务器进程对客户端进程发送的请求做了什么处理，才能产生最后的处理结果呢？这里以查询请求为例展示：

1. 连接管理，用户密码的校验，权限校验等操作

2. 解析与优化，针对客户端发送来的sql语句进行解析，然后在优化处理

3. 调用存储引擎，对物理磁盘上的文件进行一个查找操作

下面具体展开看一下：

2. Connectors

Connectors, 指的是不同语言中与sql交互。Mysql首先是一个网络程序，在TCP之上定义了自己的应用层协议。所以要使用Msql，我们可以编写代码，跟MysqlServer建立TCP连接，之后按照其定义好的协议进行交互。或者比较方便的变法是调用SDK，比如Native C API ， JDBC, PHP 等各种语言MysqlConnector，或者通过ODBC。但通过SDK来访问Msql，本质上还是在TCP连接上通过Mysql协议跟Mysql进行交互。

接下来的Mysql Server结构可以分为如下的三层:

3. 第一层：连接层

经历三次握手建立连接成功后，mysql服务器对TCP传输过来的账号密码做身份认证，权限获取。

多个系统都可以和mysql服务器建立连接，每个系统建立的连接肯定不止一个。所以，为了解决TCP无线创建与TCP频繁销毁带来的资源消耗，性能下降问题。Mysql服务器里有专门的TCP连接池限制连接次数，采用长连接模式服用TCP连接，来解决上述问题。

4. 第二层：服务层

第二层架构主要完成大多数的核心功能，如sql接口，并完成缓存的查询，sql的分析和优化即部分内置函数的执行。所有跨存储引擎的功能也在这一层实现，如过程，函数等。

在该层，服务器会解析查询并创建相对应的内部解析树，并对其完成响应的优化；如确定查询表的顺序，是否利用索引等，最后生成相应的执行操作。

如果是select语句，服务器还会查询内部的缓存。如果缓存空间够大，这样在解决大量读操作的环境中能够很好的提升系统的性能。

SQL Interface： sql 接口

1. 接受用户的sql指令，并返回用户需要的查询结果。比如select...from 就是调用sql interface

2. Mysql支持 DML(数据操作语音)， DDL(数据定义语言)，存储过程，视图，触发器，自定义函数等多种sql语言接口

Parser：解析器

1. 在解析器中对sql语句进行语法分析，语义分析。将sql语句分解成数据结构，并将这个结构传递到后续步骤，以后sql语句的传递和处理就是基于这个结构的，如果再分解构成中遇到错误，那么就说明这个sql语句是不合理的。

2. 在sql命令传递到解析器的时候会被解析器验证和解析，并为其创建语法树，并根据数据字典丰富查询语法树，会验证该客户端是否具有执行该查询的权限。创建好语法树后，mysql还会对sql查询进行语法上的优化，进行查询重写。

Optimizer：查询优化器

1. sql语句在语法解析之后，查询之前会使用查询优化器确定sql语句的执行路径，生成一个执行计划

2. 这个执行计划表明应该使用那些索引进行查询，表之间的连接顺序如何，最后会按照执行计划中的步骤调用存储引擎提供的方法来真正的执行查询，并将查询结果返回给用户。

3. 它使用 选取-投影-连接 策略进行查询。例如：

SELECT id, name FROM student WHERE gender = '女';

这个select查询现根据where语句进行选取，而不是将表全部查询出来以后在进行gender过滤。

这个select查询先根据id和name进行属性投影，而不是将属性全部取出以后在进行过滤，将这两个查询条件连接起来生成最终查询结果。

Caches & Buffers: 查询缓存组件

1. mysql 内部维持着一些Cache和Buffer，比如QueryCache用缓存一条select语句的执行结果, 如果能够在其中找到对应的查询结果，那么就不细在进行查询解析，优化和执行的整个过程了，直接将结果反馈给客户端。

2. 这个缓存机制是由一系列小缓存组成的。比如表缓存，记录缓存，key缓存，权限缓存等

3. 这个查询缓存可以在不同的客户端之间进行共享

4. 从 mysql 5.7.20开始，不推荐使用查询缓存，并在mysql8.0中删除。

5. 第三层：引擎层

1. 和其他数据库相比，mysql有点与众不同，他的架构可以在多种不同场景中应用并发挥良好作用，主要体现在存储引擎的架构上，插件式的存储引擎 架构将查询处理和其他的系统任务已经数据的存储提取相分离。这种架构可以根据业务的需求和实际需要选择合适的存储引擎。同事开源的mysql还允许开发人员设置自己的存储引擎。

2. 这种高效的模块话架构为那些希望专门针对特定应用程序需求（例如数据仓库，事务处理或高可用性情况）的人提供了巨大的好处，同时享受使用一组独立与任何接口和服务的又是存储引擎。

3. 插件时存储引擎层，真正的负责了mysql中数据的存储和提取，队伍里服务器级别的维护底层数据执行操作， 服务器通过api与存储引擎进行通信。不同的存储引擎具有的功能不同，这样我们可以根据自己的实际需要进行选取。

6. 存储层

所有的数据，数据库，表的定义，表的每一行内容，索引，都是存在文件系统上，以文件的方式存在，并完成与存储引擎的交互。当然有些存储引擎如InnoDB，也持支不使用文件系统直接管理裸设备，但现代文件系统的实现使得这样做就没有必要了。在文件系统之下，可以使用本地磁盘，可以使用DAS,NAS,SAN等各种存储系统。

Msql架构图可简化如下：