openGauss数据库源码解析系列文章——存储引擎源码解析（一）_opengauss存储引擎源码分析

既有适合小白学习的零基础资料，也有适合3年以上经验的小伙伴深入学习提升的进阶课程，涵盖了95%以上大数据知识点，真正体系化！

由于文件比较多，这里只是将部分目录截图出来，全套包含大厂面经、学习笔记、源码讲义、实战项目、大纲路线、讲解视频，并且后续会持续更新

需要这份系统化资料的朋友，可以戳这里获取

        --mot
        --page
        --remote
        --replication
        --smgr

每个子目录都是一个相对独立的模块，和本章内容相关的如表4-2所示。


表4-2 存储引擎子目录  
 




| 模块名 | 子目录 | 说明 |
| --- | --- | --- |
| 访存模块 | access子目录 | 主要包括：各种行存储格式中，元组格式；元组与页面之间的转换和访存管理；元组扫描、插入、删除和更新功能的接口实现；几类索引，包括B-Tree、hash、GIN（generalized inverted index，通用倒排索引）、GiST（generalized search tree，通用搜索树）、psort（列存储局部排序索引），的访存管理和接口实现；各类数据库操作对应的日志实现和恢复机制；以及事务模块实现 |
| 行存储共享缓冲区模块 | buffer子目录 | 主要包括：行存储共享缓冲区的结构；物理页面和缓冲区页面的映射管理；缓存页面的加载和淘汰算法等 |
| 列存储只读共享缓冲区模块 | cmgr子目录 | 主要包括：cstore列存储格式只读共享缓冲区的结构；压缩单元和缓冲区的映射管理；缓冲压缩单元的加载和淘汰算法等 |
| 列存储访存模块 | cstore子目录 | 主要包含：cstore列存储格式中，向量数组与压缩单元之间的转换和访存管理；以及在此基础之上向量数组的扫描、插入、删除和更新功能的接口实现 |
| 文件操作和虚拟文件描述符模块 | file子目录 | 主要包含：磁盘文件系统存储介质的文件和目录操作；虚拟文件描述符的实现和管理 |
| 行存储空闲空间管理模块 | freespace子目录 | 主要包含：各种行存储格式中，页面空闲空间的管理 |
| 内存引擎模块 | mot子目录 | 主要包含：内存引擎的实现 |
| 页面模块 | page子目录 | 主要包含：各种行存储格式中，页面格式、页面校验、页面加密和页面压缩 |
| 备机页面修复模块 | remote子目录 | 主要包含：从备机获取完整页面或压缩单元，用于修复主机损坏的页面或压缩单元 |
| 主备日志复制模块 | replication子目录 | 主要包含：主备日志发送和接收线程的实现；流式日志同步功能的实现；Quorum复制协议的实现，逻辑日志的实现以及主备重建；主备心跳检测功能的实现 |
| 存储介质管理模块 | smgr子目录 | 主要包含：存储介质管理层的实现；磁盘文件系统（当前默认的存储介质）的基本功能接口实现 |

 除了以上的这些模块之外，storage目录下剩余的子目录分别属于：外表批量导入模块（bulkload子目录）、外表服务器连接模块（dfs子目录）、进程间通信模块（ipc子目录）、大对象模块（large\\_object子目录）、锁管理模块（lmgr子目录）。 
openGauss存储引擎相关的后台线程实现代码包含在“src/gausskernel/process/postmaster”目录下，简要介绍如表4-3。在后序介绍具体相关模块消息序列时会详细介绍这些线程的工作原理和执行流程。


表4-3 存储引擎后台线程





| 线程名 | 文件名 | 说明 |
| --- | --- | --- |
| ADIO线程 | aiocompleter.cpp | 该线程主要负责异步-同步读写操作（ADIO，asynchronous-direct input-ouput）的后台预取和回写 |
| autovacuum线