Hive With as 用法

最新推荐文章于 2024-05-20 08:00:00 发布
最新推荐文章于 2024-05-20 08:00:00 发布
阅读量740 收藏
点赞数
分类专栏： hive基础 初学大数据 文章标签： hive
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/ZZJXP/article/details/124049395
版权
该博客展示了如何在Hive SQL中使用WITH AS子查询来拆分复杂查询，提高代码的可读性和效率。通过两个示例查询，博主解释了如何将原始查询分解为临时表，并最终进行左连接操作以获取学生分数及其对应科目名称。优化后的查询虽然执行时间稍长，但逻辑更清晰。
摘要由CSDN通过智能技术生成 
hive> select  t.id
    >         ,t.name
    >         ,t.clazz
    >         ,t.score_id
    >         ,t.score
    >         ,c.subject_name
    > from(
    >     select  a.id
    >         ,a.name
    >         ,a.clazz
    >         ,b.score_id
    >         ,b.score
    >     from (
    >         select  id
    >                 ,name
    >                 ,clazz
    >         from
    >         students
    >     ) a left join (
    >     select  id
    >             ,score_id
    >             ,score
    >     from score
    >     ) b
    >     on a.id = b.id
    > ) t left join (
    >     select  subject_id
    >             ,subject_name 
    >     from subject
    > ) c on t.score_id = c.subject_id
    > limit 10;
OK
1500100001	施笑槐	文科六班	1000001	98	语文
1500100001	施笑槐	文科六班	1000002	5	数学
1500100001	施笑槐	文科六班	1000003	137	英语
1500100001	施笑槐	文科六班	1000004	29	政治
1500100001	施笑槐	文科六班	1000005	85	历史
1500100001	施笑槐	文科六班	1000006	52	物理
1500100002	吕金鹏	文科六班	1000001	139	语文
1500100002	吕金鹏	文科六班	1000002	102	数学
1500100002	吕金鹏	文科六班	1000003	44	英语
1500100002	吕金鹏	文科六班	1000004	18	政治
Time taken: 17.529 seconds, Fetched: 10 row(s)

// with as 可以把子查询拿出来，让代码逻辑更加清晰，提高效率
// 必须跟着sql一起使用

hive> with tmp1 as (
    >     select  id
    >             ,name
    >             ,clazz
    >     from students
    > ), tmp2 as ( 
    >     select  score_id
    >             ,id
    >             ,score
    >     from
    >     score
    > ), tmp1Jointmp2 as (
    >     select  a.id
    >             ,a.name
    >             ,a.clazz
    >             ,b.score_id
    >             ,b.score
    >     from tmp1 a
    >     left join tmp2 b
    >     on a.id = b.id
    > ), tmp3 as (
    > select   subject_id
    >         ,subject_name 
    > from subject
    > ) select  t.id
    >         ,t.name
    >         ,t.clazz
    >         ,t.score_id
    >         ,t.score
    >         ,c.subject_name
    > from tmp1Jointmp2 t left join tmp3 c
    > on t.score_id = c.subject_id
    > limit 10;
OK
1500100001	施笑槐	文科六班	1000001	98	语文
1500100001	施笑槐	文科六班	1000002	5	数学
1500100001	施笑槐	文科六班	1000003	137	英语
1500100001	施笑槐	文科六班	1000004	29	政治
1500100001	施笑槐	文科六班	1000005	85	历史
1500100001	施笑槐	文科六班	1000006	52	物理
1500100002	吕金鹏	文科六班	1000001	139	语文
1500100002	吕金鹏	文科六班	1000002	102	数学
1500100002	吕金鹏	文科六班	1000003	44	英语
1500100002	吕金鹏	文科六班	1000004	18	政治
Time taken: 19.74 seconds, Fetched: 10 row(s)

小胖超凶哦！
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
【hive】with as语法
changzoe的博客
09-19 1765
公用表表达式（CTE）是从WITH子句中指定的简单查询派生的临时结果集（会把查询的表数据放到内存中，供其他查询随时使用），该子句紧跟在SELECT或INSERT关键字之前。CTE仅在单个语句的执行范围内定义。可以在Hive SELECT，INSERT， CREATE TABLE AS SELECT或CREATE VIEW AS SELECT语句中使用一个或多个CTE 。 在 select 中使用...
Hive语法中with as的使用
weixin_46429290的博客
02-16 5176
Hive语法中with as的使用一、with as是什么？二、with as怎么用？三、with as测试三、with as总结 一、with as是什么？ 如果有一个需求，或者一堆需求，而这一堆需求中频繁的都要使用一个数据集，但是这个数据集在原始数据集中没有，可以通过一些操作在原始数据集中得到，那么该怎么办？ 这个时候最基础的想法，写一个程序，把频繁使用到的中间数据得到，然后从中间数据中进行处理分析，这个思维方式其实就是with as语法的使用逻辑。 如果对于一个逻辑的处理，大量的需求都使用到了一个中间
`WITH`子句在Hive查询中的作用
最新发布
Flying_Fish_roe的博客
05-20 996
WITH子句是Hive中的一个非常有用的特性，它允许我们在一个查询中定义一个临时的命名查询块，然后在同一个查询中使用该块。这样做有几个优点：改善可读性：通过使用WITH子句，我们可以将复杂的查询分解成多个简单的临时查询块，使查询更易读和理解。代码重用：通过使用WITH子句，我们可以在多个查询中重用相同的子查询块，而不需要多次编写相同的代码。性能优化：通过使用WITH子句，Hive可以在执行查询之前优化查询计划，从而提高查询性能。
Hive：with as用法、问题和优化
大数据知识梳理
08-02 7157
Hive：with as用法、问题和优化
Hive（二）：with as用法
热门推荐
chandelierds的博客
08-15 2万+
https://blog.csdn.net/Abysscarry/article/details/81322669 https://blog.csdn.net/dzjun/article/details/84748279?utm_medium=distribute.pc_relevant.none-task-blog-BlogCommendFromMachineLearnPai2-1.channel_param&depth_1-utm_source=distribute.pc_relevant.no
Hive: with as用法、问题和优化
weixin_42326851的博客
08-09 3499
Hive: with as用法、问题和优化
Hive【with as用法】
liuwei0376的专栏
12-15 2497
前言 公用表表达式（CTE）是从WITH子句中指定的简单查询派生的临时结果集（会把查询的表数据放到内存中，供其他查询随时使用），该子句紧跟在SELECT或INSERT关键字之前。CTE仅在单个语句的执行范围内定义。可以在Hive SELECT，INSERT， CREATE TABLE AS SELECT或CREATE VIEW AS SELECT语句中使用一个或多个CTE 。 使用HIVE-1180在Hive 0.13.0中添加了通用表格表达式。 语法 withClause: cteClause (
Hive中的with as使用
hunter95671的博客
11-10 2556
一、介绍 在我们写一些结构比较复杂的SQL语句时，可能某个子查询在多个地方有重复使用的情况，这个时候我们可以使用 with as 语句将其独立出来，极大提高SQL可读性，简化SQL with as 也叫做子查询部分，首先定义一个sql片段，该sql片段会被整个sql语句所用到，让sql语句的可读性更高些，作为提供数据的部分，也常用在union等操作中。 with as就类似于一个视图或临时表，可以用来存储一部分的sql语句作为别名，不同的是with as 属于一次性的，而且必须要和其他sql一起使用才可以！
Hive中操作数据库表时as一般用法说明
似水流年
10-06 1万+
as 可理解为：用作、当成，作为；一般是重命名列名或者表名。 1.例如有表table， 列 column_1,column_2 你可以写成 select column_1 as 列1,column_2 as 列2 from table as 表 上面的语句就可以解释为，选择 column_1 作为 列1,column_2 作为 列2 从 table 当成 表
hive中with....as的用法
Knight
07-29 3293
with...as的用法就相当于join....on的用法 下面展示with怎么用(数据不用管，缩减版) with tmp_order as ( select sku_id from detail ), tmp_payment as ( select sku_id, payment_count from refund ) insert overwrite table daycount select sku_id, payment_count, from ( select sku_id, 0 payment_
hive with as
shuimu12345678的专栏
06-13 2万+
hive 可以用with as的方法把表加入内存，其他语句可以随时使用。with q1 as (select * from src where key= ‘5’),q2 as (select * from src s2 where key = ‘4’)select * from q1 union all select * from q2;
关于hive中的with as 语法
cakecc2008的专栏
06-20 7632
网络上搜索到的结果，都是说with as可以有缓存数据，减少表扫描，优化速度的作业，其实并不是这样，以下通过实验分析和证明 写一个很简单的语句： with t as( select regexp_replace(reflect("java.util.UUID", "randomUUID"), "-", "") AS id --生成一个随机id ,'andy' as name ) selec...
hive with查询用法及CTAS的使用
duncan
11-04 1833
hive 可以通过with查询来提高查询性能，因为先通过with语法将数据查询到内存，然后后面其它查询可以直接使用   with q1 as ( select key from src where key = '5') select * from q1;   -- from style with q1 as (select * from s...
[Hive进阶]- Hive with as 语法
bbbeoy的专栏
07-16 700
https://blog.csdn.net/high2011/article/details/85335954
hive 之with....as的用法
zhuiqiuuuu的博客
04-26 541
hive 之with....as的用法 1.作用 　　with 。。as需要定义一个sql片段,会将这个片段产生的结果集保存在内存中,后续的sql均可以访问这个结果集,作用与视图或临时表类似. 2语法 with...as...必须和其他sql一起使用(可以定义一个with但在后续语句中不使用他) with...as...是一次性的，是临时的 ...
Hive的with as 使用
wachoo的blog
03-18 1892
Hive的with语法，set参数使用
Oracle with as模块
修复bug生成bug
06-03 172
这段时间撸了一些统计的oracle方面代码，涉及到用with as的这个操作，记录下 WITH AS的含义 WITH AS短语，也叫做子查询部分（subquery factoring），可以让你做很多事情，定义一个SQL片断，该SQL片断会被整个SQL语句所用到。 有的时候，是为了让SQL语句的可读性更高些，也有可能是在UNION ALL的不同部分，作为提供数据的部分。 一次分析多次使用 with as优点 1.增加了sql的易读性，如果构造了多个子查询，结构会更清晰； 2.更重要
as with 用法
蘑菇丁的专栏
10-14 2169
今天在网上查找优化的案例，碰巧在一个大神的博客里看到这个用法了，起初还很疑惑，所以就跟着做了下实验： SQL> create table t2(id int); Table created. SQL> create table t1(id int); Table created. SQL> insert into t2 values(1); 1 row created. SQL>
Hive中使用 with as 优化SQL
JacksonKing的专栏
06-02 763
背景： 当我们书写一些结构相对复杂的SQL语句时，可能某个子查询在多个层级多个地方存在重复使用的情况，这个时候我们可以使用 with as 语句将其独立出来，极大提高SQL可读性，简化SQL~ 注：目前 oracle、sql server、hive等均支持 with as 用法，但 mysql并不支持！ 2019-05-31更新：MySQL8.0大量更新优化，支持Common table expressions，即支持 with 语法！ 一、介绍 with as 也叫做子查询部分，首先定义一个sql.
hive中with as的用法
04-15
In Hive, "WITH AS" is used to create a temporary table from a SELECT statement, which can then be referenced in subsequent queries in the same session. Here's an example: WITH temp_table AS ( SELECT...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值