数仓工具—Hive语法之with扩展(21)

本文详细探讨了Hive的with语句性能优化,包括查看执行计划和参数调整,揭示了with子查询如何提升查询效率。同时介绍了两种临时表的创建和使用,比较了它们在不同场景下的优势,强调了临时表在解决问题和提高灵活性上的价值。
摘要由CSDN通过智能技术生成

with 扩展

其实前面我们已经讲过这个语法了,你可以参考Hive语法之with as和from,那为什么我们今天还要拿出来讲一次呢。我们总结一下这个语法的特点:

  1. with…as也叫做子查询部分,该语句允许hive定义一个SQL片段,供整个SQL 使用,有点类似变量或者视图可以简化我们的SQL,尤其我们多次使用的场景
  2. 除了简化我们的SQL,而且还会将这个片段产生的结果集保存在内存中,后续的SQL均可以访问这个结果集,左右有点像物化视图或者是临时表,从而提高我们的查询性能。

这里提到了一个概念物化视图,你可以参考我们前面的文章. Hive视图和物化视图,需要注意的事在高版本的SQL中,with语句进行了物化,但是默认是不开启的,这个参数为hive.optimize.cte.materialize.threshold该参数默认情况下是-1,是关闭的,当开启(大于0),比如设置为2,则如果with…as语句被引用2次及以上时,会把with…as语句生成的table物化,从而

评论 4
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

不二人生

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值