spark sql boardcast join 生效问题探索
这里写目录标题本文针对 版本spark 2.2问题描述问题排查broadcast join 自动触发条件。执行解决不能自动触发boardcast join得情况
本文针对 版本spark 2.2
问题描述
spark sql 执行sql语句:
big_table a left join small_table b on a.id = b.id
small_table 只有100多行数据。
big_table 大约5亿行数据。
没有触发 spark sql 的 broadcast join,导致sql执
原创
2020-06-13 20:03:25 ·
782 阅读 ·
1 评论