mysql left join 因编码不一致，导致的 Using join buffer (Block Nested Loop)

最新推荐文章于 2023-11-24 19:55:30 发布
最新推荐文章于 2023-11-24 19:55:30 发布
阅读量1.2k 收藏 5
点赞数 2
分类专栏： mysql
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/wodedaxuelv/article/details/108375759
版权

 

mysql left join 导致的 Using join buffer (Block Nested Loop)

描述：mysql做关联时，已经在关联字段上建立了所以，但还是走全表扫描

分析：

查看索引、确实建立的索引，还是全表扫描

定位，原来是坐标用utf8，而右表用了utf8mb4编码，导致索引失效

办法：不想改表结构，但用在SQL中使用转换编码函数时，还是全表扫描，很慢

解决：

只有用alter table t1 convert to charset utf8mb4;才是正确的。

在测试库同样的数据量（30w），执行时间15s左右，

所以在夜深人静的时候在线上库先做备份，以防不测，然后在执行alter table t1 convert to charset utf8mb4;17s就执行完了；

参考：https://mp.weixin.qq.com/s/ns9eRxjXZfUPNSpfgGA7UA

wodedaxuelv
关注
  • 2
    点赞
  • 踩
  • 5
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
专栏目录
Mysql join 的本质，Nested Loop Join 和 Hash Join
眉头的骰
09-25 2832
Mysql 在不同版本对join的实现有不同的实现方式，mysql5.7之前，是通过Nested Loop join方式实现的，在mysql 8以后对这种嵌入循环查询的方式采用hash join的算法进行了优化。 注：如下引用内容均摘抄与Mysql官网 Nested Loop Join MySQL executes joins between tables using a nested-loop algorithm or variations on it. MySQL使用嵌套循环算法或它的变体来执行表之
mysql join 缓存_mysql 服务器参数调优之join_buffer_size
weixin_30631909的博客
02-17 6079
join bufferJoin Buffer 可被用于联接是ALL、index、和range的类型;每次联接使用一个Join Buffer，因此多表的联接可以使用多个Join Buffer；Join Buffer在联接发生之前进行分配，在SQL语句执行完后进行释放；Join Buffer只存储要进行查询操作的相关列数据，而不是整行的记录。1、Using join buffer (Block Nes...
【MySQL】mysql因为字符集导致left join出现Using join buffer (Block Nested Loop)
程序员老狼专注开发aigc或客服系统应用
08-07 398
今天在查询一个sql的时候发现没有使用到索引 仔细看了很多遍，该加的索引都加了，还是不行 使用explain查看 索引为什么失效 隐式转换导致索引失效 随着表的增长，where条件出来的数据太多，大于15%，使得索引失效(会导致CBO计算走索引花费大于走全表) 字符集不一致导致索引失效一个utf8一个utf8mb4 我这里主要是字符集不一致，索引失效了 转换了一下字符集就成功了 ALTER...
关于left join优化not in 导致的长时间查询无数据问题 Using where； Using join buffer (Block Nested Loop)
qq_43479628的博客
08-09 3126
一、背景 线上存在业务，需要每天定时整理某个表A未处理的数据，并写入另外一张表B； A表中的数据主键放入B表中，未设定B表对应索引； 数据量初始值大概在几千条； 根据网上书籍介绍及多数网友介绍，left join 优于 not exists 优于 not in，not in不走索引，所以最终选择left join完成该业务； 数据量大约在10万条数据时，已经无法查询出任何数据； 二、测试环境 mysql版本 5.7.30 数据库建表sql create table test_a( id int(
mysql 优化 Using join buffer (Block Nested Loop)
逆天killer的博客
07-27 1714
说明:生产环境发现接口响应慢,经查是SQL执行慢,发现是表关联时候右表数据量大,循环嵌套查询速度很慢。 如图刚开始SQL执行计划 这是测试环境,生产环境fsp_cor_inf数据量很大,经过排查发现是Using join buffer (Block Nested Loop)导致的查询慢, 开始解决, 首先,在表关联的地方建立索引,然后执行发现没有效果。 然后,发现两表字符集不一致,一个是uft8一个是uft8mb4,可能这个原因导致的索引失效。 随后修改表字符集 然后发现还是没效果,原来上面修改的是表的字
【mysql Using join buffer (Block Nested Loop)】记一次线上问题，join连接优化
a6671164的博客
11-25 629
2.top命令查看服务器进程状态，查看占用cpu高的进程，发现mysql服务cpu占用高居不下，100到300左右。3.查看服务MySQL连接池大小,若是很小调大，但是这需要对服务的重启，谨慎操作。4.由于直接定位到mysql服务的问题，所以接下来就是mysql的排查优化步骤了。
mysql left join关联字段的类型不一致导致索引失效
CaptainCats的博客
09-29 1938
t1和t2通过order_id关联，order_id在t2建有索引order_detail_index_order_id，原因是order_id字段在t1中是int类型，在t2中是varchar类型，导致用不到索引。我们用另外一种办法，在查询中通过函数将它们转换为一样的类型和字符集。不过修改字段类型有时候会可能遇到一些阻碍。一种办法是修改字段类型让它们保持一致，看下这条sql的explain。但是这里却没有用到。
MySQL left join 查询巨慢 优化
热门推荐
寂寞的搬运工的博客
04-03 1万+
MySQL left join 查询巨慢 优化前景提要功能快捷键合理的创建标题，有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表 前景提要 最近工作中遇到一个非常奇怪的问题，mysql中有两张表，test_info和test_do_info需要进行LEFT JOIN关联查询，每张表又都1W+的数据，关联查询需要12s之久。 按照常理来说1W+的数据关联查询应该很快，即使进行全表扫描也不至于
MySQL进阶系列：join连接的原理-3种算法
纪先生笔记
11-22 802
“我们经常在多表查询的时候使用join 去连接多个表，其实join的效率比不好还是应该尽量避免使用的，其本质就是各个表之间循环匹配的，MySQL中只支持一种join算法Nested-Loop Join(循环嵌套连接)，但是其有多种变种的算法提高join的执行效率。” 1. Simple Nested-Loop Join(SNL，简单嵌套循环连接) Simple Nested-Loop join...
MySQL面试：left join我要怎优化？
zybb166的博客
12-30 9840
在实际开发中，相信大多数人都会用到join进行连表查询，但是有些人发现，用join好像效率很低，而且驱动表不同，执行时间也不同。那么join到底是如何执行的呢？ 这里有两个表t1，t2 explain select * from t1 left join t2 on t1.a=t2.a; 复制代码 上面语句使用left join，说明t1是驱动表（left join谁在左谁是驱动表），t2是被驱动表，执行一下 可以看到，驱动表是的type是ALL，所以是全表扫描，被驱动表有a索引，left j
MYSQL跨表批量更新及JOIN连表字段编码不一致问题
zh的博客
04-20 338
A表 员工部门中间表 B表 员工考勤表 背景：员工考勤表 部门id字段缺失，批量修复B表数据，填充部门id sql UPDATE Bb INNER JOIN A aON a.staff_id = CONVERT ( b.staff_id USING utf8 ) COLLATE utf8_unicode_ci SET a.dept_id = b.dept_id WHERE ...
Mysql Using join buffer (Block Nested Loop) join
losedguest的博客
04-17 8975
通过EXPLAIN发现，extra中有数据是Using join buffer (Block Nested Loop) 1.數據類型不一致(建立索引也不會生效) 2.未建立索引/或者索引不正確 SELECT a.wf_no,IFNULL(b.wf_pointx,a.wf_pointx) AS wf_pointx,IFNULL(b.wf_pointy,a.wf_pointy) AS wf_p...
技术分享 | MySQL 的 join_buffer_size 在内连接上的应用
ActionTech的博客
11-01 5607
作者：杨涛涛 本文详细介绍了 MySQL 参数 join_buffer_size 在 INNER JOIN 场景的使用，OUTER JOIN 不包含。在讨论这个 BUFFER 之前，我们先了解下 MySQL 的 INNER JOIN 分类。 如果按照检索的性能方式来细分，那么无论是两表 INNER JOIN 还是多表 INNER JOIN，都大致可以分为以下几类： 1.JOIN KEY 有索引...
mysql concat 不同字符集,mysql join查询时，参与join的字段字符集编码不同，对性能影响是巨大的...
weixin_32821251的博客
03-17 301
本文一直以来都只是个标题，在三个月后的今天，熬夜补上内容。直接上代码：建utf-8编码的表 t1:CREATE TABLE IF NOT EXISTS `t1` (`name` varchar(50) NOT NULL DEFAULT '',KEY `name` (`name`)) ENGINE=MyISAM DEFAULT CHARSET=utf8;随便插入些数据，数量大一点，后面实验结果更清晰...
msql 连接查询on索引失效的原因——关联表列字段编码格式不一致
龙仞的博客
03-26 958
优化一个左连接表时，重点优化其右边on字段，但是发现没效果，百思不得其解，遂上网查询得知，存在一个深坑，两个表的on字段的编码格式不一致，内部需要编码转换，导致索引失效。 查看表字段的编码情况： SHOW FULL COLUMNS FROM 'table_name'; 若发现不一致的话，使用改成一致，建议使用utf8_general_ci编码格式 ...
解决：Using where； Using join buffer (Block Nested Loop)
u012221197的博客
07-08 1277
索引优化笔记：今天有个需求需要用到 left join，大概200w数据搜索很慢，后面发现 索引没有走，但是我看了两个表的关联字段是创建了索引的，再仔细看里面的字符集一个是utf-8，另外一个是utf8mb4，当我把两张表的字符集改成一致时就都走了索引。...
hive表直接select * 可以查出结果，但是join查询的字段中文变乱码
LikeInsane的博客
01-12 340
hive表直接select * 可以查出结果，但是join查询的字段中文变乱码的解决办法和原因
MySQL数据库自动强制类型转换
最新发布
月空的博客
11-24 3104
在MySQL中，当操作符与不同类型的操作数一起使用时，会发生类型转换以使操作数兼容。MySQL自身存在的自动强制类型转换，在方便开发者的同时，也存在很深的隐患。
mysql int索引无效_Mysql中字段类型不一致导致索引无效的处理办法
weixin_35891744的博客
01-28 933
前两天有个同事算数据，写出来的sql执行很慢。那个sql也很简单，就是一个左联带条件的查询。explain之后发现，其中有一张表没有用到索引。初始以为是没有建索引，于是建上索引再试，发现问题依旧。后来查看表结构才发现，原来用来做关联的字段是一个varchar类型的字段，而联接的另一张表中的字段类型却是bigint，结果造成了类型的不匹配，以致于索引失效。如果要想索引起效，最直接的办法就是将两张表的...
Using join buffer (Block Nested Loop)
09-17
Using join buffer (Block Nested Loop)是一种MySQL查询优化器使用的关联算法。在这种算法中，MySQL会为每个表创建一个缓冲区，并将其中的数据按照关联键值进行排序。然后，MySQL会从每个表的缓冲区中逐行读取数据，将符合关联条件的数据进行匹配。 在给定的引用中，它提到了在eqtType表上出现了Using join buffer (Block Nested Loop)的现象。为了解决这个问题，将eqtType表删除，并使用Exists的方式与am表建立连接，以确保业务逻辑与以前的SQL一致。这样做之后，发现eqtType表的Using join buffer (Block Nested Loop)消失了，并且可以通过测试查询耗时来验证结果。 值得注意的是，在ps表中仍然存在Using join buffer (Block Nested Loop)的现象。这是由于OR关键字的需求，根据业务规则，这是必须的。然而，由于ps表与mp表直接关联，查询性能并没有受到影响，因此可以忽略这个问题。
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值