Buffer Pool的并发性与动态扩容
一、MySQL是如何提高并发性的
经过前面文章的学习,现在我们都知道了MySQL在内存中主要是围绕Buffer Pool操作的,当请求比较多的时候,单靠一个线程是肯定不够的,因此,这个一定是多线程的!就向下面这样:
以上面这个图为例,多个线程同时来处理请求并对Buffer Pool进行操作,每当一个线程来对Buffer Pool进行操作的时候,必定会对free链表、flush链表和lru链表加锁,也就是说一次只有一个线程在对Buffer Pool进行操作。虽然线程直接要排队,但是也比单线程的性能要高的。
为了进一步提高并发性,MySQL会将内存多成多个Buffer Pool,像下面这样:
从图中可以看出来,每个Buffer Pool都有独立的free链表、flush链表和lru链表这样一来,就减少了因为有其他线程占用资源而等待的时间,从而大大提高了并发性。在默认情况下,如果给MySQL分配的内存小于1G,那么就只会给你一个Buffer Pool。
二、MySQL是如何实现动态扩容的
我们现在知道了MySQL可能会将分配到的内存分成多个Buffer Pool,如果我们想给Buffer Pool扩容应该怎么办呢?是重新申请一块大内存,然后将原来的Buffer Pool中的数据全部复制过去吗?这样显然不合理,因为Buffer Pool是比较大的,向操作系统申请这么大的连续内存空间并且进行大量数据的复制是非常耗时的。
针对这个问题,MySQL中的办法是通过chunk机制将Buffer Pool分成一个个的chunk,像下面这样:
从图中不难看出,Buffer Pool由多个chunk组成,每个chunk是一组描述数据和缓存页,其大小可以通过参数innodb_buffer_pool_chunk_size
来设置,默认大小是128M。
有了这个chunk机制后,当我们想对其进行扩容时,每次就不需要申请一块很大的内存空间并进行复制操作了,只需要申请一个chunk的大小的内存空间,然后再将其分配给某个Buffer Pool即可。