innodb 的 buffer pool 管理 page

最新推荐文章于 2024-06-22 15:26:37 发布
最新推荐文章于 2024-06-22 15:26:37 发布
阅读量642 收藏 9
点赞数 13
分类专栏： mysql原理 文章标签： 数据库 db
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/king_zzzzz/article/details/136930629
版权

在这里插入图片描述

page 页结构

  • page是整个InnoDB存储的最基本构件，也是InnoDB磁盘管理的最小单位，与数据库相关的所有内容都存储在这种Page结构里。

  • Page分为几种类型，常见的页类型有

    • 数据页(B±tree Node)
    • Undo页(Undo Log Page)
    • 系统页(System Page)
    • 事务数据页 (Transaction System Page)

  • page 页结构可分为3个部分
    在这里插入图片描述

1.通用部分 （文件头+文件尾）

  • 文件头和文件尾
  • 将页的内容进行封装 ,通过文件头和文件尾校验的CheckSum方式来确保页的传输是完整的。
  • 其中比较重要的是在文件头中的FIL_PAGE_PREV和FIL_PAGE_NEXT字段，通过这两个字段，我们可以找到该页的 上一页和下一页，实际上所有页通过两个字段可以形成一条双向链表

2.记录部分 （最小和最大记录 +用户记录 + 空闲空间）

  • 最小和最大记录 +用户记录 + 空闲空间
    主要作用是存储记录，所以“最小和最大记录”和“用户记录”部分占了页结构的主要空间。
    另外空闲空间是个灵活的部分，当有新的记录插入时，会从空闲空间中进行分配用于存储新记录

3.目录部分 （页目录）

  • 页目录
  • 数据页中行记录按照主键值由小到大顺序串联成一个单链表
  • 页中记录是以单向链表的形式进行存储的，且单链表的链表头为最小记录，链表尾为最大记录。
  • 并且为了更快速地定位到指定的行记录，通过Page Directory实现目录的功能，借助Page Directory使用二分法快速找到需要查找的行记录。
    在这里插入图片描述

page 页分类

free page(空闲页)

空闲page,未被使用

clean page（干净页）

被使用page,数据没有被修改过

dirty page（脏页）

脏页，被使用page,数据被修改过，Page页中数据和磁盘的数据产生了不一致
在这里插入图片描述

page 页维护

针对上面所说的三种page类型，InnoDB通过三种链表结构来维护和管理

1.free list（管理free page）

  • 空闲缓冲区，管理free page
  • free链表是把所有空闲的缓冲页对应的控制块作为一个个的节点放到一个链表中， 这个链表便称之为free链表
  • 基节点：free链表中只有一个基节点是不记录缓存页信息（单独申请空间）它里面就存放了free链表的
    • 头节点的地址
    • 尾节点的地址
    • 还有free链表里当前有多少个节点
      在这里插入图片描述

2.flush list （dirty page）

  • 需要刷新到磁盘的缓冲区，管理dirty page
  • 内部page按修改时间排序。
    · innoDB引擎为了提高处理效率，在每次修改缓冲页后，并不是立刻把修改刷新到磁盘上，而是在未来的某个
    时间点进行刷新操作.所以需要使用到uSh链表存储脏页，凡是被修改过的缓冲页对应的控制块都会作为节点加入到flush链表.
    在这里插入图片描述

3.Iru list（管理 clean page，dirty page）

  • 正在使用的缓冲区，管理clean page和dirty page
  • 缓冲区以midpoint为基点，
    • 前面链表称为new列表区，存放经常访问的数据(热数据区)，占63%；
    • 后面链表称为old列表区，存放使用较少数据（冷数据区），占37%

在这里插入图片描述

  • 冷数据区的数据页什么时候会被转到到热数据区呢？
    1.如果该数据页在LRU链表中存在时间超过1S,就将其移动到链表头部（链表指的是整个LRU链表）
    2.如果该数据页在LRU链表中存在的时间短于1s,其位置不变（由于全表扫描有一个特点，就是它对某个页的频
    繁访问总耗时会很短)
LeBron.JG
关注
  • 13
    点赞
  • 踩
  • 9
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
详解InnoDB的Buffer Pool
sermonlizhi的博客
05-03 2347
在上一篇文章《InnoDB存储结构》中，可以从InnoDB的体系结构中看到InnoDB存储引擎主要包含两部分内容，其中表空间结构这些在该文章已经介绍了，而这篇文章将会重点介绍Buffer Pool。 一、简介 InnoDB存储引擎在处理客户端的请求时，当需要访问某个页的数据时，就会把完整的页的数据全部加载到内存中，也就是说即使我们只需要访问一个页的一条记录，那也需要先把整个页的数据加载到内存中。将整个页加载到内存中后就可以进行读写访问了，在进行完读写访问之后并不着急把该页对应的内存空间释放掉，而是将其缓存起
【MySQL自身的性能优化】InnoDB 的 Buffer Pool
qq_63691275的博客
01-19 1167
InnoDB 通过三种链表来管理缓冲页： Free List（空闲页链表），管理空闲页； Flush List（脏页链表），管理脏页； LRU List（淘汰链表），管理脏页+干净页，将最近且经常查询的数据缓存在其中，而不常查询的数据就淘汰出去。 InnoDB 对 LRU 做了一些优化，我们熟悉的 LRU 算法通常是将最近查询的数据放到 LRU 链表的头部，而 InnoDB 做了以下俩点优化（当然还有很多优化点，这里阐述的是重要的俩个）： 将 LRU 链表分为了 You
InnoDB Buffer Pool 缓冲池详解
真正的大师，永远怀着一颗学徒的❤
10-27 3528
InnoDB Buffer Pool缓冲池详解
mysql原理--InnoDB的Buffer Pool
x13262608581的博客
01-06 1499
Buffer Pool，用户态高速缓存
MYSQL innodb buffer pool 原理与监控
sql server的专栏
07-29 248
最近一段时间忙，尤其对MYSQL的原理的知识感觉到生疏了，所以还是的从新来过，让一些知识在重新印到脑子里面。今天就从 innodb buffer pool 开始。作为MYSQL 重要的组成部分innodb buffer pool 一直是一个关注到疏忽的点，大部分DB人员对其的认识1INNODBbuffer pool 为基于MYSQL的 INNODB数据库引擎的数据...
InnoDB中Buffer Pool详解
m0_54187478的博客
11-05 293
Buffer Pool是InnoDB存储引擎的关键组成部分，用于在内存中缓存数据库的数据页，包括表数据和索引数据。它以固定大小的页框架（一般为16KB）组成，存储在内存中。通过缓存常用数据页，Buffer Pool有效地减少了对磁盘I/O的需求，加速了数据库的访问速度。内部包含LRU链表用于管理数据页的访问顺序，确保经常访问的页保持在内存中，同时有助于淘汰不经常使用的页。管理脏页（已被修改但尚未写回磁盘）的Flush链用于周期性地将数据写回磁盘，以确保数据的一致性和持久性。
MySQL 内存缓冲池 InnoDB Buffer Pool Sizes 深度解析
良月柒
05-27 1012
InnoDB Buffer Pool是InnoDB存储引擎用于缓存表和索引数据的主要内存结构。它的主要功能是将经常访问的数据页保存在内存中，从而减少磁盘I/O操作，提高数据库的读写性能。InnoDB Buffer Pool是MySQL中提升性能的关键组件之一。合理配置和优化Buffer Pool大小及实例数量，可以显著提高数据库的读写性能。在实际应用中，应根据系统的内存资源、数据量和并发访问情况，动态调整Buffer Pool配置，并通过监控工具持续优化数据库性能。
MySQL InnoDB Buffer Pool
qq_34125999的博客
12-15 856
1 缓存的重要性 我们知道，对于使用 InnoDB 作为存储引擎的表来说，不管是用于存储用户数据的索引（包括聚簇索引和二级索引），还是各种系统数据，都是以页的形式存放在表空间中的，而所谓的表空间只不过是 InnoDB 对文件系统上一个或几个实际文件的抽象，也就是说我们的数据说到底还是存储在磁盘上的。 但是磁盘的速度慢，所以 InnoDB 存储引擎在处理客户端的请求时，当需要访问某个页的数据时，就会把完整的页的数据全部加载到内存中，也就是说即使我们只需要访问一个页的一条记录，那也需要先把整个页的数据加载到内存
Innodb Buffer Pool缓存机制（二）innodb_buffer_pool_size等参数篇
moneywenxue的博客
05-22 1027
在MySQL5.5之前，广泛使用的和默认的存储引擎是MyISAM。MyISAM使用操作系统缓存来缓存数据。InnoDB需要innodb buffer pool中处理缓存。所以非常需要有足够的InnoDB buffer pool空间。
MySQL性能优化InnoDB buffer pool flush策略
09-16
MySQL 性能优化 InnoDB buffer pool flush 策略 MySQL 中 InnoDB 存储引擎使用 buffer pool 来缓存从磁盘读取到内存的数据页。Buffer pool 通常由数个内存块加上一组控制结构体对象组成。内存块的个数取决于 buffer...
浅析在线调整 innodb_buffer_pool_size
12-14
浅析在线调整 innodb_buffer_pool_size 作者：zhou ...16KB的大小设定)，而buffer_pool是用来管理和缓存这些page的，innodb会把一块连续的内存划分给buffer_pool使用，并把buffer_pool等分为多个buffer
mysql面试题+BufferPool+InnoDB如何管理Page页+缓冲区+索引页+change buffer更新流程
11-10
什么是BufferPool？ **Buffer Pool基本概念** Buffer Pool：缓冲池，简称BP。其作用是用来缓存表数据与索引数据，减少磁盘IO操作，提升效率。 Buffer Pool由**缓存数据页(Page)** 和 对缓存数据页进行描述的**...
mysqldump造成Buffer Pool污染的研究
09-11
MySQL的Buffer Pool（简称BP）是InnoDB存储引擎内存管理的重要组成部分，用于缓存数据文件中的页（Page），以减少磁盘I/O操作，提高数据库性能。当mysqldump进行全库或全表备份时，会对数据库进行全表扫描，这可能...
MySQL数据页功能性能测试innodb-page-size
09-16
2. `innodb_buffer_pool_instances` 设为 8，提高缓冲池管理的效率。 3. `innodb_flush_method` 设为 O_DIRECT，减少操作系统缓存带来的影响。 4. `innodb_file_per_table` 设为 1，每个表在一个单独的 .ibd 文件中...
趋势Deep Security（Trend Micro Deep Security）安装
weixin_45945976的博客
06-17 188
Trend Micro Deep Security是一个提供深度包检查、入侵防御、恶意软件保护以及其他多层安全措施的综合性安全解决方案。由趋势科技（Trend Micro）开发，这个解决方案旨在为物理、虚拟、云环境中的服务器和应用提供保护。
mysqladmin——MySQL Server管理程序（二）
最新发布
u011565038的博客
06-22 670
mysqladmin是一个命令行工具，用于执行简单的 MySQL 服务器管理任务，如检查服务器的状态、创建和删除数据库、重载权限等。
MySQL数据库笔记（二）
2301_78671299的博客
06-18 1026
操作数据对象。接受参数返回一个结果。只对一行进行变换。每行返回一个结果。可以嵌套。参数可以是一列或一个值。聚合函数作用于一组数据，并对一组数据返回一个值。子查询指一个查询语句嵌套在另一个查询语句内部的查询。多表查询，也称为关联查询，指两个或更多个表一起完成查询操作。前提条件：这些一起查询的表之间是有关系的（一对一、一对多），它们之间一定是有关联字段，这个关联字段可能建立外键，也可能没有建立外键。比如：员工表和部门表，这两个表依靠“部门编号”进行关联。
MySQL-DML-约束
weixin_51788042的博客
06-18 624
创建表时，可以给表的字段添加约束，可以保证数据的完整性、有效性。以上的删除属于DML的方式删除，这种删除的数据是可以通过事务回滚的方式重新恢复的，但是删除的效率较低。另外还有一种删除表中数据的方式，但是这种方式不支持事务，不可以回滚，删了之后数据是永远也找不回来了。email字段设置为唯一性，唯一性的字段值是可以为NULL的。表名后面的小括号当中的字段名如果省略掉，表示自动将所有字段都列出来了，并且字段的顺序和建表时的顺序一致。注意：这个语句删除效率非常高，巨大的表，瞬间干掉所有数据。
PostgreSQL源码分析——CREATE DATABASE
让我思考一下
06-18 624
这里我们分析一下在PostgreSQL中创建数据库的源码，在分析源码之前，最好先阅读《PostgreSQL指南内幕探索》的第一章，数据库集簇、数据库和数据表，弄清其空间布局，理解PG中，数据库、表、元组是怎么布局的。通俗一点说，创建一个数据库相当于创建一个数据目录，在这个目录下，存放该数据库中定义的表、索引等对象。
innodb_buffer_pool_size
08-17
innodb_buffer_pool_size 是 MySQL InnoDB 存储引擎的一个重要配置参数，用于指定 InnoDB 缓冲池的大小。 InnoDB 缓冲池是用于存放数据和索引页的内存区域，它可以提高数据库的读取性能。innodb_buffer_pool_size 参数决定了分配给缓冲池的内存大小。 要调整 innodb_buffer_pool_size 的值，可以在 MySQL 的配置文件中添加以下配置行： ``` innodb_buffer_pool_size = <size> ``` 将 `<size>` 替换为你想要设置的缓冲池大小。可以使用单位 K（千字节）、M（兆字节）或 G（吉字节）来指定大小。例如，`innodb_buffer_pool_size = 2G` 表示将分配 2 吉字节的内存给缓冲池。 适当调整 innodb_buffer_pool_size 的大小对于数据库性能至关重要。该值应根据服务器的可用内存和数据库的大小进行估算和设置。一般来说，缓冲池的大小应该足够大，以便能够容纳常用的数据和索引页，减少磁盘 I/O 操作。然而，过大的缓冲池可能会导致内存压力增加，并且在多个实例运行时可能会影响系统性能。 建议在配置 innodb_buffer_pool_size 时进行测试和评估，并根据实际情况进行适当的调整。注意，修改完 innodb_buffer_pool_size 的值后，需要重新启动 MySQL 服务才能使其生效。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值