hive 基础

已于 2022-06-06 17:53:37 修改
阅读量1k 收藏 5
点赞数
于 2022-04-06 17:37:39 首次发布
原文链接：https://blog.csdn.net/lin443514407lin/article/details/102824440?utm_medium=distribute.pc_relevant.none-task-blog-2~default~baidujs_baidulandingword~default-0.pc_relevant_default&spm=1001.2101.3001.4242.1&utm_relevant_index=3
版权

hive

工具 datagrip

1.月差

select months_between('2020-04-02','2020-09-02');-- -5
select months_between('2020-04-02','2020-09-02');-- -4.96774194

add_months(date,12) 时间加12个月，结果是string，如2022-03-25

date_format(add_months(date,12),'yyyyMMdd') -- 20220325    string

select if('2022-02-25' > '20220201',1,0) ;      --- 0

2.数值类型转string类型

cast（value as string）---将string 转为biginit，biginit转string失败

3.string 转date日期类型

Input column name: dt (String).Replace dt with your column name.

Input FormatCodeOutput Format
ddMMyyyyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’ddMMyyyy’)))yyyy-MM-dd
dd-MM-yyyyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’dd-MM-yyyy’)))yyyy-MM-dd
dd/MM/yyyyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’dd/MM/yyyy’)))yyyy-MM-dd
dd MM yyyyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’dd MM yyyy’)))yyyy-MM-dd
dd.MM.yyyyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’dd.MM.yyyy’)))yyyy-MM-dd
ddMMMyyyyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’ddMMMyyyy’)))yyyy-MM-dd
dd-MMM-yyyyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’dd-MMM-yyyy’)))yyyy-MM-dd
dd/MMM/yyyyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’dd/MMM/yyyy’)))yyyy-MM-dd
dd MMM yyyyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’dd MMM yyyy’)))yyyy-MM-dd
dd.MMM.yyyyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’dd.MMM.yyyy’)))yyyy-MM-dd
ddMMMMyyyyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’ddMMMMyyyy’)))yyyy-MM-dd
dd-MMMM-yyyyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’dd-MMMM-yyyy’)))yyyy-MM-dd
dd/MMMM/yyyyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’dd/MMMM/yyyy’)))yyyy-MM-dd
dd MMMM yyyyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’dd MMMM yyyy’)))yyyy-MM-dd
dd.MMMM.yyyyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’dd.MMMM.yyyy’)))yyyy-MM-dd
ddMMyyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’ddMMyy’)))yyyy-MM-dd
dd-MM-yyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’dd-MM-yy’)))yyyy-MM-dd
dd/MM/yyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’dd/MM/yy’)))yyyy-MM-dd
dd MM yyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’dd MM yy’)))yyyy-MM-dd
dd.MM.yyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’dd.MM.yy’)))yyyy-MM-dd
ddMMMyyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’ddMMMyy’)))yyyy-MM-dd
dd-MMM-yyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’dd-MMM-yy’)))yyyy-MM-dd
dd/MMM/yyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’dd/MMM/yy’)))yyyy-MM-dd
dd MMM yyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’dd MMM yy’)))yyyy-MM-dd
dd.MMM.yyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’dd.MMM.yy’)))yyyy-MM-dd
ddMMMMyyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’ddMMMMyy’)))yyyy-MM-dd
dd-MMMM-yyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’dd-MMMM-yy’)))yyyy-MM-dd
dd/MMMM/yyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’dd/MMMM/yy’)))yyyy-MM-dd
dd MMMM yyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’dd MMMM yy’)))yyyy-MM-dd
dd.MMMM.yyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’dd.MMMM.yy’)))yyyy-MM-dd
MMddyyyyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’MMddyyyy’)))yyyy-MM-dd
MM-dd-yyyyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’MM-dd-yyyy’)))yyyy-MM-dd
MM/dd/yyyyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’MM/dd/yyyy’)))yyyy-MM-dd
MM dd yyyyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’MM dd yyyy’)))yyyy-MM-dd
MM.dd.yyyyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’MM.dd.yyyy’)))yyyy-MM-dd
MMMddyyyyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’MMMddyyyy’)))yyyy-MM-dd
MMM-dd-yyyyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’MMM-dd-yyyy’)))yyyy-MM-dd
MMM/dd/yyyyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’MMM/dd/yyyy’)))yyyy-MM-dd
MMM dd yyyyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’MMM dd yyyy’)))yyyy-MM-dd
MMM.dd.yyyyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’MMM.dd.yyyy’)))yyyy-MM-dd
MMMMddyyyyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’MMMMddyyyy’)))yyyy-MM-dd
MMMM-dd-yyyyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’MMMM-dd-yyyy’)))yyyy-MM-dd
MMMM/dd/yyyyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’MMMM/dd/yyyy’)))yyyy-MM-dd
MMMM dd yyyyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’MMMM dd yyyy’)))yyyy-MM-dd
MMMM.dd.yyyyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’MMMM.dd.yyyy’)))yyyy-MM-dd
MMddyyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’MMddyy’)))yyyy-MM-dd
MM-dd-yyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’MM-dd-yy’)))yyyy-MM-dd
MM/dd/yyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’MM/dd/yy’)))yyyy-MM-dd
MM dd yyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’MM dd yy’)))yyyy-MM-dd
MM.dd.yyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’MM.dd.yy’)))yyyy-MM-dd
MMMddyyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’MMMddyy’)))yyyy-MM-dd
MMM-dd-yyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’MMM-dd-yy’)))yyyy-MM-dd
MMM/dd/yyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’MMM/dd/yy’)))yyyy-MM-dd
MMM dd yyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’MMM dd yy’)))yyyy-MM-dd
MMM.dd.yyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’MMM.dd.yy’)))yyyy-MM-dd
MMMMddyyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’MMMMddyy’)))yyyy-MM-dd
MMMM-dd-yyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’MMMM-dd-yy’)))yyyy-MM-dd
MMMM/dd/yyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’MMMM/dd/yy’)))yyyy-MM-dd
MMMM dd yyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’MMMM dd yy’)))yyyy-MM-dd
MMMM.dd.yyto_date(from_unixtime(UNIX_TIMESTAMP(dt,’MMMM.dd.yy’)))yyyy-MM-dd
yyyyMMddto_date(from_unixtime(UNIX_TIMESTAMP(dt,’yyyyMMdd’)))yyyy-MM-dd
yyyy-MM-ddto_date(from_unixtime(UNIX_TIMESTAMP(dt,’yyyy-MM-dd’)))yyyy-MM-dd
yyyy/MM/ddto_date(from_unixtime(UNIX_TIMESTAMP(dt,’yyyy/MM/dd’)))yyyy-MM-dd
yyyy MM ddto_date(from_unixtime(UNIX_TIMESTAMP(dt,’yyyy MM dd ‘)))yyyy-MM-dd
yyyy.MM.ddto_date(from_unixtime(UNIX_TIMESTAMP(dt,’yyyy.MM.dd’)))yyyy-MM-dd
yyyyMMMddto_date(from_unixtime(UNIX_TIMESTAMP(dt,’yyyyMMMdd’)))yyyy-MM-dd
yyyy-MMM-ddto_date(from_unixtime(UNIX_TIMESTAMP(dt,’yyyy-MMM-dd’)))yyyy-MM-dd
yyyy/MMM/ddto_date(from_unixtime(UNIX_TIMESTAMP(dt,’yyyy/MMM/dd’)))yyyy-MM-dd
yyyy MMM ddto_date(from_unixtime(UNIX_TIMESTAMP(dt,’yyyy MMM dd ‘)))yyyy-MM-dd
yyyy.MMM.ddto_date(from_unixtime(UNIX_TIMESTAMP(dt,’yyyy.MMM.dd’)))yyyy-MM-dd
yyyyMMMMddto_date(from_unixtime(UNIX_TIMESTAMP(dt,’yyyyMMMMdd’)))yyyy-MM-dd
yyyy-MMMM-ddto_date(from_unixtime(UNIX_TIMESTAMP(dt,’yyyy-MMMM-dd’)))yyyy-MM-dd
yyyy/MMMM/ddto_date(from_unixtime(UNIX_TIMESTAMP(dt,’yyyy/MMMM/dd’)))yyyy-MM-dd
yyyy MMMM ddto_date(from_unixtime(UNIX_TIMESTAMP(dt,’yyyy MMMM dd ‘)))yyyy-MM-dd
yyyy.MMMM.ddto_date(from_unixtime(UNIX_TIMESTAMP(dt,’yyyy.MMMM.dd’)))yyyy-MM-dd
yyMMddto_date(from_unixtime(UNIX_TIMESTAMP(dt,’yyMMdd’)))yyyy-MM-dd
yy-MM-ddto_date(from_unixtime(UNIX_TIMESTAMP(dt,’yy-MM-dd’)))yyyy-MM-dd
yy/MM/ddto_date(from_unixtime(UNIX_TIMESTAMP(dt,’yy/MM/dd’)))yyyy-MM-dd
yy MM ddto_date(from_unixtime(UNIX_TIMESTAMP(dt,’yy MM dd ‘)))yyyy-MM-dd
yy.MM.ddto_date(from_unixtime(UNIX_TIMESTAMP(dt,’yy.MM.dd’)))yyyy-MM-dd
yyMMMddto_date(from_unixtime(UNIX_TIMESTAMP(dt,’yyMMMdd’)))yyyy-MM-dd
yy-MMM-ddto_date(from_unixtime(UNIX_TIMESTAMP(dt,’yy-MMM-dd’)))yyyy-MM-dd
yy/MMM/ddto_date(from_unixtime(UNIX_TIMESTAMP(dt,’yy/MMM/dd’)))yyyy-MM-dd
yy MMM ddto_date(from_unixtime(UNIX_TIMESTAMP(dt,’yy MMM dd ‘)))yyyy-MM-dd
yy.MMM.ddto_date(from_unixtime(UNIX_TIMESTAMP(dt,’yy.MMM.dd’)))yyyy-MM-dd
yyMMMMddto_date(from_unixtime(UNIX_TIMESTAMP(dt,’yyMMMMdd’)))yyyy-MM-dd
yy-MMMM-ddto_date(from_unixtime(UNIX_TIMESTAMP(dt,’yy-MMMM-dd’)))yyyy-MM-dd
yy/MMMM/ddto_date(from_unixtime(UNIX_TIMESTAMP(dt,’yy/MMMM/dd’)))yyyy-MM-dd
yy MMMM ddto_date(from_unixtime(UNIX_TIMESTAMP(dt,’yy MMMM dd ‘)))yyyy-MM-dd
yy.MMMM.ddto_date(from_unixtime(UNIX_TIMESTAMP(dt,’yy.MMMM.dd’)))yyyy-MM-dd

Don’t forget to see all tutorials Keep learning, keep growing .Subscribe us.

3.1 string 转日期（年月日时分秒）

select from_unixtime(unix_timestamp(cast(yxrq as string),'yyyyMMdd'),'yyyy-MM-dd HH:mm:ss');

3.2 去年年末

 date_format(                             date_add(trunc(to_date(from_unixtime(UNIX_TIMESTAMP('20220414', 'yyyyMMdd'))), 'YY'),
                                            -1), 'yyyyMMdd')

                                                                         --去年年末（如今天20220414，则20211231）

3.3 今年年初

 date_format(
                        trunc(to_date(from_unixtime(UNIX_TIMESTAMP('20220414', 'yyyyMMdd'))), 'YY'),
                        'yyyy-MM-dd')

                                                                         --今年年初（如今天20220414，则20220101）

3.4 明年年初

工具 datagrip

1.if

select if( a =b,1,1);

select if (a is null,1,0)

2.字符串格式转换

'20220305' ----- '2022-03-05'

select date_format(to_date(from_unixtime(UNIX_TIMESTAMP('20220305','yyyyMMdd'))),'yyyy-MM-dd'); -- ‘2022-03-05’

nn_x_goodness
关注
hive基础知识总结
09-18
### Hive基础知识总结 #### 一、Hive服务 Hive是一个建立在Hadoop之上的数据仓库工具，主要用于处理大量结构化数据集。它提供了类似SQL的查询语言（HiveQL）来简化数据处理任务。Hive的核心服务主要包括CLI、...
Hive日期处理
u011135852的博客
07-31 3801
1、求自然日、上一自然日、下一自然日、本周初/末、本月初/末、本季初/末、本年初/末、一月/三月/六月/一年前等 select calendar_day AS CALENDAR_DAY, --'自然日(日期型)' regexp_replace(calendar_day,'-','') AS CALENDAR_DT, --'自然日(数值型)' date_add(calendar_day, -1) AS LAST_CALENDAR_DT,...
hive日期处理
qq_25412651的博客
08-07 990
以当前系统日期作为参考日期，将其转换为统一的天维度yyyyMMdd数据格式。例如当前日期为2021-01-29。hive中日期加减函数：date_add(start_date,num_days)4. 字符串转时间(字符串必须为：yyyy-MM-dd格式)指定时间格式为yyyMMdd。二、参考日期为指定日期。
Hive学习（12）Hive常用日期函数
Dreamy_zsy的博客
08-29 1512
to_date、from_unixtime、unix_timestamp、weekofyear、datediff、date_add、hive返回上个月第一天和最后一天、取最近30天数据
HIVE 获取去年年末
最新发布
weixin_40468411的博客
07-08 204
HIVE 获取去年年末 在数据分析和处理领域，HIVE 是一个常用的数据仓库工具，它基于 Apache Hadoop 构建，可以方便地处理大规模数据。在这篇文章中，我们将介绍如何使用 HIVE 获取去年年末的数据，并通过饼状图和类图展示数据的结构和分布。 HIVE 基本概念 HIVE 是一个基于 Hadoop 的数据仓库工...
hive最全的常用时间函数（非常全，建议收藏）
程老师的博客
07-19 9536
在实际生产中，经常由于某个特殊需求涉及到时间函数的转换，例如求上周六到本周日的pv、uv，本月第一天和本月最后一天的访问量的时候。不知如何下手，或者想尽一切办法写出来的代码，却很复杂。本文详细介绍了很多常用的时间函数，基本包括了所有的可能用到的函数
hive基础语法
07-28
Hive作为一款基于Hadoop的数据仓库工具，为用户提供了一种类似SQL的查询语言——HiveQL，使得数据分析师能用熟悉的SQL语言去操作存储在Hadoop文件系统中的大数据。HiveQL支持绝大部分标准SQL语法，其中包括DDL（数据...
hive基础查询文档上传
03-10
### Hive基础查询知识点详解 #### 一、Hive概述与基本操作 - **Hive简介**：Apache Hive 是一个建立在 Hadoop 上的数据仓库工具，主要用于对存储在 Hadoop 文件系统中的各种数据集进行数据整理、特殊查询和分析...
hive基础ppt
09-21
hive入门
Hive 常用日期处理-昨天、本月、上月同期、去年同期、月初、月末等
WistWill的博客
04-30 1万+
一、参考日期为当前日期 以当前系统日期作为参考日期，将其转换为统一的天维度yyyyMMdd数据格式。 例如当前日期为2021-01-29 昨天 方式一：date_format(date_sub(current_date(),1), 'yyyyMMdd') select date_format(date_sub(current_date(),1), 'yyyyMMdd') 20210128 方式二：date_format(date_sub(from_unixtime(unix_timesta
hive中常见的日期函数
li1579026891的博客
01-26 8311
常见hive的时间函数 1、时间戳转化为日期函数 from_unixtime('1566390082') from_unixtime('1566390082', 'yyyy-MM-dd') from_unixtime('1566390082', 'yyyyMMdd') 2019-08-21 20:21:22 2019-08-21 20190821 2、将日期转换为时间戳 unix_timestamp('2019-08-21 20:21:22') unix_timestamp('2019-08-.
Hive常用的日期函数
ZHC_1015的博客
02-01 3313
HiveSQL中较为常用的日期处理函数整理汇总
hive日期函数总结
夏夜的博客
12-15 3258
Hive 日期函数 Hive Date Functions 官网地址：https://cwiki.apache.org/confluence/display/Hive/LanguageManual+UDF#LanguageManualUDF-DateFunctions 函数名 返回类型 简介 from_unixtime(bigint unixtime[, string format]) string 将UNIX时间戳转化为日期,可以设定日期格式 unix_timestamp(string
hive_通过yyyymm格式的变量，获取前12个月以及每月最后一天的日期变量
学大数据的小学生
05-20 3642
通过yyyymm格式的变量，获取前12个月以及每月最后一天的日期变量 --获得12个月的维表（每月+每月最后一天） drop table temp_dual1; create table temp_dual1 (id string); insert into temp_dual1 values(${month_id}||'01'); drop table temp_purchase_RESERVE_${month_id}; create table temp_purchase_RESERVE_${month
HIVE中用到的日期函数总结
hyfstyle的博客
03-15 2万+
hive获取当前时间 >select current_date from dual; -- 2019-03-15 >select current_timestamp from dual; --2019-03-15 15:47:25 hive 查询当月第几天 >select dayofmonth(current_date) dual; >15 hive 查...
hive获取近12个月数据
XIAOMO__的博客
01-14 3592
样式一： 2020-11 0 SELECT DATE_FORMAT(CURRENT_DATE, 'Y-M') AS `month`,count(class_name) from t3 where DATE_FORMAT(updatetime,'Y-M')=DATE_FORMAT(add_months((CURRENT_DATE),0),'Y-M') UNION SELECT DATE_FORMAT(add_months((CURRENT_DATE),-1),'Y-M') AS `...
hive加减月份，获取上个月日期（前几个月）
热门推荐
醉糊涂仙的博客
12-05 4万+
笔者需求：根据日期201910获取半年前的日期201904。读者需求：根据自身需求自行微调。 1，如果拿到的日期格式不是标准格式(yyyy-MM-dd HH:mm:ss)，先转成时间戳。 select unix_timestamp('201910', 'yyyyMM') from dual; --返回结果：1569859200 2，再将时间戳转成标准时间格式。 select fro...
Oracle、Hive 统计三个月，六个月，九个月，十二个月的平局值
Jackie 的博客
02-22 1448
下面为统计截止2020-06-30，近三个月，六个月，十二个月的平均值 直接上代码 select * from ( select a.cust_id, '2020-06-30' as dt1, a.dt, avg(val)over(partition by cust_id order by dt desc) thr_mon_avg, row_number()over(partition by cust_id order by dt desc) sequ
Hive基础全面解析：服务、变量与操作详解
Hive基础知识总结涵盖了Hive服务的核心组成部分，这些服务对于理解和使用Hive这个数据仓库工具至关重要。首先，Hive提供了多种服务供用户在不同场景下操作： 1) **Hive Shell (Cli)**: Hive的主要交互界面，是通过...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值