hive--DQL

最新推荐文章于 2024-07-25 09:48:00 发布

莽撞少年

最新推荐文章于 2024-07-25 09:48:00 发布

阅读量221

点赞数

分类专栏：笔记总结文章标签：大数据

本文链接：https://blog.csdn.net/weixin_43737594/article/details/120864244

版权

笔记同时被 2 个专栏收录

108 篇文章 3 订阅

订阅专栏

总结

108 篇文章 1 订阅

订阅专栏

Hive--DQL

内置运算符

查看函数

关系运算符
- 大小比较
- 空值判断
- 模糊查询
- 正则查询
算数运算符
- 加减乘除
- 取整取余
- 位运算
逻辑运算符
- 与或非
- 在范围内

内置函数

字符串函数

时间日期函数

数学函数

集合函数

条件函数

类型转换

数据脱敏

其他

自定义函数（UDF）（了解）

UDF
UDAF
UDTF

Hive函数进阶

explode（UDTF）

NBA总冠军球队

create table the_nba_championship(
    team_name string,
    champion_year array<string>
) row format delimited
fields terminated by ','
collection items terminated by '|';

lateral View

行列转换

列转行

create table row2col2(
   col1 string,
   col2 string,
   col3 int
)row format delimited fields terminated by '\t';

行转列

create table col2row2(
   col1 string,
   col2 string,
   col3 string
)row format delimited fields terminated by '\t';

json数据处理

单个

create table tb_json_test1 (
  json string
);

多个

create table tb_json_test2 (
   device string,
   deviceType string,
   signal double,
   `time` string
 )
ROW FORMAT SERDE 'org.apache.hive.hcatalog.data.JsonSerDe'
STORED AS TEXTFILE;

serder

create table tb_json_test2 (
   device string,
   deviceType string,
   signal double,
   `time` string
 )
ROW FORMAT SERDE 'org.apache.hive.hcatalog.data.JsonSerDe'
STORED AS TEXTFILE;

窗口函数

建表

---建表并且加载数据
create table website_pv_info(
   cookieid string,
   createtime string,   --day
   pv int
) row format delimited
fields terminated by ',';

create table website_url_info (
    cookieid string,
    createtime string,  --访问时间
    url string       --访问页面
) row format delimited
fields terminated by ','