hive与presto行转列sql写法

最新推荐文章于 2024-05-09 09:37:03 发布
最新推荐文章于 2024-05-09 09:37:03 发布
阅读量809 收藏
点赞数
分类专栏： hive presto 文章标签： hive hadoop sql presto
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_42285610/article/details/123086562
版权 
---------------------------------------------------------------------------------------------------------------hive
--------------------customerid
select s_customer_profile_day.customerid
  from (select customerid, devset.deviceid
          from deviceprofile.s_customer_profile_day 
       LATERAL VIEW explode(devids) devset AS deviceid) s_customer_profile_day
  left join 
       (select deviceid 
       	  from deviceprofile.s_ups_deviceprofile_day) s_ups_deviceprofile_day
    on s_customer_profile_day.deviceid = s_ups_deviceprofile_day.deviceid
---------------------------------------------------------------------------------------------------------------presto
--------------------customerid
select s_customer_profile_day.customerid
  from (select customerid, devset.deviceid
          from deviceprofile.s_customer_profile_day 
       cross join unnest(devids) as devset(deviceid)) s_customer_profile_day
  left join 
       (select deviceid 
       	  from deviceprofile.s_ups_deviceprofile_day) s_ups_deviceprofile_day
    on s_customer_profile_day.deviceid = s_ups_deviceprofile_day.deviceid

hive 行转列使用LATERAL VIEW explode(devids)  devset AS deviceid

presto行转列使用cross join unnest(devids) as devset(deviceid)

weixin_42285610
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Hive与SQL优化.md
12-29
Hive与SQL优化.md
hive和presto中爆炸函数使用
xy_303的博客
10-10 373
ask_idscorecomment170414309650311872010,2,4,6,7 presto presto中的解决办法是cross join unnest(comment) as b(new_comment)注意：(1)b是爆炸表名称，new_comment是爆炸的新字段(2)有可能comment需要更改为split(comment，'，')代码：
Hive / Presto 行转列 列转行
weixin_42771366的博客
06-17 827
1、split将order_ids拆分成数组，lateral view explode将数组炸裂开。2、炸裂 + map。2、炸裂 + map。
HIVE多行转多列 和 多列转多行
01-07
1、HIVE多行转多列 源数据样式 把CAMERA_NO，RESULT_DATA两列转换为CAMERA_NO字段的数据为列名，RESULT_DATA字段对应CAMERA_NO的数据为值 方法一：利用str_to_map函数 alter table ods.iot.iot_5060_iotdaq.5060_aac_mtf_meas_results_new add if not exists partition(date='{DATE}' ,hour='{HOUR}',minutes='{MINUTES}'); insert overwrite table ods.iot.iot_5060_io
hive 和 presto sql的对比
04-21
hive 和 presto sql的对比， 常见函数的写法区别和坑点
presto中查询行列转换 与 hive 对比
zz_1111的博客
03-26 3375
如果有一种字段a,b为下面这种 event_id ---1,3,4,6 user_id ---2,8,9,7 希望变成 event_id 1 event_id 3 event_id 4 event_id 6 user_id 2 user_id 8 user...
Hive/Spark/Presto/标准SQL实现行转列和列转行
大数据开发实践者
08-20 8551
假设有以下两个表格，分别为vtable和htable，期望使用SQL实现相互转化，本文将展示如何分别使用标准SQL、Presto、和Hive实现。 vtable uid key value 101 c1 11 101 c2 12 101 c3 13 102 c1 21 102 c2 22 ...
presto 扫盲、行列转置函数
热门推荐
zhangmary的博客
05-13 1万+
presto是什么是Facebook开源的，完全基于内存的并⾏计算，分布式SQL交互式查询引擎是一种Massively parallel processing (MPP)架构，多个节点管道式执⾏⽀持任意数据源（通过扩展式Connector组件），数据规模GB~PB级使用的技术，如向量计算，动态编译执⾏计划，优化的ORC和Parquet Reader等presto不太支持存储过程，支持部分标准sql...
Presto与众不同的那些坑
数据小红的博客
11-27 6855
写在前面： presto官方文档https://prestodb.io/docs/0.215/functions.html 一、时间差 presto 时间差： select date_diff('day',cast('2018-09-05' as date),cast('2018-09-07' as date)); hive 时间差: select datediff('2018-0...
【presto】行转列和列转行
fuyun6363的博客
05-03 8223
行转列 数据源： select * from test.tmp_row_to_col ; 568810800017635002 210100026066367206 568810800017635002 210100026070369019 568810800017635002 210100026038823395 568810800017635002 210100026038921817 568811800170738001 210100016048730468 568811800170738001
PyHive:Hive和Presto的Python接口。 :honeybee:
05-12
PyHive PyHive是和的Python 和接口的集合。 用法 数据库API from pyhive import presto # or import hive or import trino cursor = presto . connect ( 'localhost' ). cursor () cursor . execute ( 'SELECT * FROM my_awesome_data LIMIT 10' ) print cursor . fetchone () print cursor . fetchall () DB-API（异步） from pyhive import hive from TCLIService . ttypes import TOperationState cursor = hive . connect ( 'localhost' ). cu
presto和hive的使用区别
11-27
Hive是把一个查询转化成多个MapReduce任务，然后一个接一个执行。执行的中间结果通过对磁盘的读写来同步。然而，Presto没有使用MapReduce，它是通过一个定制的查询和执行引擎来完成的。它的所有的查询处理是在内存中...
PRESTO SQL总结分享
赵英超的博客
10-01 5345
presto sql
hive中的爆炸函数在presto中的写法
ChengYanan的博客
03-25 2975
hive中的爆炸函数写法： SELECT student, score FROM tests LATERAL VIEW explode(scores) t AS score; 爆炸函数在presto中的写法： SELECT student, score FROM tests CROSS JOIN UNNEST(scores) AS t (score);
常用的hive sql
伟庭的博客
03-02 2011
常用的hive sql
Presto行转列 列转行
qq_32736999的博客
06-17 9972
hive中表结构如下: CREATE TABLE hive.default.t1 ( day integer, days integer ) 查看数据 presto:default> select * from t1; day | days -----+------ 1 | 1 ...
Sql(presto语法） 实现行转列和列转行
mao15827639402的博客
12-19 5650
这里的行列转换都是在presto语法下可编译实现（hive、sql会有一些差别） Sql语句：数据行转列（表a-to-表b）和 列转行(表b-to-表a) 1.行转列(sql语句) selectcountry, SUM(CASEWHENcnt_cut= ‘(0,20]‘THENcntELSE0END)ASone, SUM(CASEWHENcnt_cut=...
探索利用 LineageLogger 获取hive的字段级血缘关系
最新发布
DeaSun
05-09 339
但是又由于 org.apache.hadoop.hive.ql.optimizer.Optimizer。源码中有 org.apache.hadoop.hive.ql.hooks.LineageLogger。搭配日志监测服务来实现字段级血缘。类无法实现字段级血缘。
hive sql行转列
06-06
在Hive中，可以使用`LATERAL VIEW`和`explode`函数来实现行转列的功能。 假设有如下表格`test`： ``` id name value 1 John 1,2,3 2 Mary 4,5 3 Bob 6 ``` 要将每行中的`value`列转换为多行，可以使用以下SQL语句...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值