mysql join 算法_【MySQL】之join算法详解

在阿里巴巴的java开发手册有这么一条强制规定:超过三个表禁止join,须要join的字段,数据类型保持绝对一致,多表关联查询时,要保证被关联的字段须要有索引。

为何尽可能避免使用join?若是使用join,咱们应该怎么用呢?接下来咱们就一块儿聊一聊关于join的几种算法。

Simple Nested-Loop Joinjava

Simple Nested-Loop Join算法是指读取驱动表t1中的每行数据,将每行数据传递到被驱动表t2上,取出被驱动表t2中知足条件的行,和t1组成结果集。算法

在这个算法中,须要对t1进行全表扫描,假设t1表1000行数据,那么须要对t2表进行1000次全表扫描,假设t2表也是1000行数据,那么就须要扫描1000 X 1000=1000000行。sql

示例图以下:当t1表5行数据,t2表5行数据时,须要扫描25行数据。数据库

fe7ed27b5854970bf741a7b9913a0407.png

Index Nested-Loop Joinapache

index nested-loop join算法的优化思路是经过驱动表的匹配条件,直接与被驱动表的索引进行匹配,减小了被驱动表的扫描次数。缓存

该算法一样要对驱动表t1进行全表扫描,可是咱们在拿着t1表的数据去被驱动表t2进行匹配时能够利用t2表的索引,若是t1表中1000行数据,t2表中1000行数据,那么一共就须要扫描1000+1000=2000行数据。这个过程就跟咱们写程序时的嵌套查询相似,而且能够用上被驱动表的索引,因此称之为“Index Nested-Loop Join”,简称 NLJ。微信

示例以下:当t1表有5行数据,t2表有5行数据时,一共须要扫描5+5=10行数据。数据结构

0a24e7feddd68412387849e6ac2c639c.png

Block Nested-Loop Joinoop

Block Nested-Loop join,基于块的嵌套循环,简称BNL算法,其优化思路主要是减小被驱动表的循坏次数,它会将驱动表的数据缓存起来,把参与查询的列缓存到join buffer里,而后拿join buffer里的数据批量与内层表的数据在join buffer中进行匹配,知足join条件的,做为结果集的一部分返回。

949c67dcc28a057494cde0438bee5c87.png

能够看到该算法对两个表都进行了全表扫描,所以扫描的行数是两个表的行数之和。这种场景下,虽然在扫描行数上和NLJ算法同样,可是因为BNL算法是在内存中进行判断,速度上会快不少。

join buffer的大小是由参数join_buffer_size设定,默认256k。若是一次放不下驱动表的全部数据,会分段放,这种状况下会致使被驱动表扫描屡次。若是被驱动表是冷数据表,而且屡次扫描读取被驱动表间隔超过1S的话,就会将他放入LRU链表的young区域,致使业务数据没法进入热数据区,减小了bufferpool的命中率,这又是另一个课题了,暂不过多展开。咱们能够经过调大join_buffer_size来提升缓存的数据量,减小对被驱动表的扫描次数。

启用BNL算法须要在optimizer_switch参数中设置block_nested_loop=on。

Batched Key Access性能

BNL算法提高了join的性能,可是它在经过辅助索引链接后须要回表,就会消耗大量的随机I/O,咱们知道随机IO对MySQL的影响是很是大的。所以MySQL5.6引入了Batched Key Access(BKA,批量键访问联接)算法。

再说BKA算法时不得不提的就是MySQL的Multi-Range Read 优化,MRR的目的主要是减小磁盘的随机访问。咱们都知道,Innodb索引采用的是B+tree的数据结构,数据保存在主键索引中,而且是按照主键递增的顺序插入的,可是二级索引的排列顺序和主键的排列顺序通常是不同的,它保存的主键值也并不是按照主键顺序排列,在回表时就会出现随机访问主键索引的状况。因此若是能够按照主键递增顺序查询的话,对磁盘的读比较接近顺序读,这样就可以提高读性能。

MRR优化的思路就是在进行范围查询时,在获得主键值以后,先按照主键的顺序进行排序,而后拿着排好序的主键ID再去主键索引进行查询,这样就能体现出顺序性的优点了。由于是多值查询,因此通常用于range、ref类型的查询。

再说会BKA算法,当被驱动表上有索引能够利用时,那么就在行提交给被 join 的表以前,先对两个表的对应列的索引字段进行join,获得主键值后,按照主键排好序后,利用 MRR 技术,批量访问表取数据,减小了随机 IO。可是若是被 join 的表没用索引的话,那就只能使用BNL算法了。

具体算法以下图:

626dc2b8cfb9e643d20092d42108ee84.png

开启BKA和MRR的方式:

set optimizer_switch='mrr=on,mrr_cost_based=off,batched_key_access=on';

MySQL在8.0版本已经实现了hash join,这里暂不作介绍。

小结

如何优化join的速度呢,这里给出以下几点建议:

尽可能避免使用join。

用小表做为驱动表,减小外层循环的次数。

多表关联查询时,要保证被关联的字段要有索引。

适当增大join_buffer_size的值,缓存的数据越多,就越能减小被驱动表扫描的次数。

减小没必要要的字段查询。

须要join的字段,数据类型保持绝对一致。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值