hive-时间运算：日期拼接时间

于 2024-05-06 14:41:59 发布
阅读量142 收藏
点赞数 1
文章标签： hive
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/j476091245/article/details/138494683
版权 
--①应到时间>中班清场时间-1h，应赶频次时间=应到时间所在日期+1日的早班最优离场时间-1h；
case  when t.mid_time is not null 
	 and t.early_optimal_time is not null 
	and from_unixtime(unix_timestamp(t.parrive_time),'yyyy-MM-dd HH:mm:ss')>
from_unixtime(unix_timestamp(concat(substr(t.parrive_time,1,11),t.mid_time,':00'))-3600,'yyyy-MM-dd HH:mm:ss')
				       then from_unixtime(unix_timestamp(concat(date_add(substr(t.parrive_time,1,10),1),' ',t.early_optimal_time,':00'))-3600,'yyyy-MM-dd HH:mm:ss')

我是一个测试Q
关注
  • 1
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
hive最全的常用时间函组合（建议收藏）
程老师的博客
07-20 1038
本周任意一天 hive> select date_sub(next_day('2021-07-20','MO'),7); OK 2021-07-19 Time taken: 0.048 seconds, Fetched: 1 row(s) hive> select date_sub(next_day('2021-07-20','MO'),1); OK 2021-07-25 Time taken: 16.706 seconds, Fetched: 1 row(s) 注： 1.本周周一到周日，
Hive将带有斜杆的时间拼接成字符串
妙妙的博客
09-27 1240
遇到的问题 近日分析师提供一批样本数据，需要根据id和时间进行匹配，样本数据格式如下： 但是时间数仓中的数据时间却是年月日时分秒拼接而成的字符串，导致两者匹配失败，所以需要转换，数仓的数据： 解决问题分析过程： 不能使用hive 自带的date_format方法。 因为表中的月日时分秒前面没有补0，使用date_format会造成数据失真，例如下图时分秒的值是错误的： （因为是时分秒不全，所以转换之前先拼接 :00 ） 自定义一个spark的udf去实现，我用的python from py
Hive日期格式转换用法
热门推荐
我思，故我在！--My data life
02-18 16万+
1.日期函数UNIX时间戳转日期函数: from_unixtime语法:from_unixtime(bigint unixtime[, stringformat])  返回值: string 说明: 转化UNIX时间戳（从1970-01-0100:00:00 UTC到指定时间的秒数）到当前时区的时间格式 举例： hive> select from_unixtime(1323308943,'
Hive常用函数总结一——字符串函数与日期/时间函数
不才伟才的博客
09-29 488
一、字符串类函数 说明：对字符进行拼接、截取、去空格 如：concat、concat_ws、substring、trim、lpad、rpad、split、find_in_set 1.1 concat 说明：拼接字符 SELECTCONCAT(user_name,dt)FROMuser_view -- 输出： "welsh20200801" "Albert20200801" 1.2 concat_ws 说明：拼接字符且分割 SELECTCONCAT_WS(':',use...
【hive 日期函数 大全】Hive常用日期函数整理 史上最全
Mr.pan felix的专栏
06-12 8430
【hive 日期函数】Hive常用日期函数整理 注意：1) hive 没有 to_char函数 2) HIVE 日期函数只识别 年-月-日 不能识别 年-月 ，所以处理月份的时候需要特殊处理 1)hive 字符创拼接: CONCAT(string A, string B…) SELECT CONCAT('2019','05','11'); 2) 字符截取 select substr(add_months(from_unixtime((unix_timestamp('2015-09','yyyy-M.
hive使用技巧-日期区间合并
sanhongbo的博客
11-07 315
​ 将同一用户的多段连续日期范围，进行合并。要合并成。
Could not resolve dependencies for project org.apache.hive:hive-exec:jar:2.3.0:
09-10
hive 开发UDF 使用maven工程 引发jar包缺失 hive 开发UDF 使用maven工程 引发jar包缺失
DBeaver链接hive驱动包下载： hive-jdbc-uber-2.6.5.0-292.jar
05-17
《DBeaver与Hive连接：hive-jdbc-uber-2.6.5.0-292.jar驱动详解》 在大数据处理领域，Hive作为一个基于Hadoop的数据仓库工具，广泛用于数据查询和分析。而DBeaver，作为一款跨平台的数据库管理工具，以其用户友好的...
hive-exec-2.1.1.jar
最新发布
03-14
hive-exec-2.1.1 是 Apache Hive 的一部分，特别是与 Hive 的执行引擎相关的组件。Apache Hive 是一个构建在 Hadoop 之上的数据仓库基础设施，它允许用户以 SQL（结构化查询语言）的形式查询和管理大型数据集。Hive ...
hive-i18n:Hive Web的翻译
03-27
Hive 2.0 Web的翻译您可以控制Hive的翻译。 如果您在此处看不到您的语言，请获取英文文件并进行编辑。 将其另存为“ yourlocale.csv”并推送。
hive-jdbc-2.1.0.jar
04-07
hive-jdbc-2.1.0.jar
hive sql的常用日期处理函数总结
qq_42585916的博客
07-08 1454
1）date_format函数（根据格式整理日期） 　　作用：把一个字符串日期格式化为指定的格式。 select date_format('2017-01-01','yyyy-MM-dd HH:mm:ss'); --日期字符串必须满足yyyy-MM-dd格式 结果：2017-01-01 00:00:00 2）date_add、date_sub函数（加减日期） 　　作用：把一个字符串日期格式加一天、减一天。 select date_add('2019-01-01',1); --字
hive中常用的日期处理函数
index_test的博客
09-13 3732
常用的日期函数
HIVE 日期加减函数及获取当前月份第一天trunc函数
我的祖传代码
05-13 2万+
1.日期增加函数 date_add语法:date_add(string startdate, intdays) 返回值: string 说明: 返回开始日期startdate增加days天后的日期。 如： select date_add('2015-05-15',1); +-------------+--+ | _c0 | +-------------+--+ | 2015-05-16 | +-------------+--+ 2.日期减少函数 date_sub语法:...
hive中的常用日期处理函数
Millton0518的专栏
09-13 3371
在日常hive计算中，最常用的日期函数有5个：date_format：常用于处理月指标date_add或date_sub： 常用于处理日指标next_day：常用于处理周指标last_day：常用于处理月指标datediff：常用于处理日指标。
hive中两种日期格式的转换
数据小白的进阶之路
09-05 7万+
在解析埋点数据时会遇到两种不同的日期格式：yyyymmdd和yyyy-mm-dd，此类型之间的转换主要有两种思路： 第一种方法：from_unixtime+unix_timestamp --20180905转成2018-09-05 select from_unixtime(unix_timestamp('20180905','yyyymmdd'),'yyyy-mm-dd') from dw....
hive中的时间处理函数
liuxiaochen123的专栏
08-27 1万+
日期函数UNIX时间戳转日期函数: from_unixtime语法:   from_unixtime(bigint unixtime[, string format]) 返回值: string 说明: 转化UNIX时间戳（从1970-01-01 00:00:00 UTC到指定时间的秒数）到当前时区的时间格式 举例： hive>   select from_unixtime(13233089
hive日期操作
Chao_Qing的专栏
04-28 2053
该片文章为转载，整理了两篇博客，主要是方便我的查找，里面内容经过检验。 1.unix_timestamp() 返回当前时区的unix时间戳 返回类型：bigint hive (tmp)> select unix_timestamp() from hive_sum limit 1; 1465875016 2.from_unixtime(bigint unixtime[,string forma...
[Hive举例]-- hive获取今天、昨天、明天和前一个小时、后一个小时的日期
欢迎来到我的博客，一起探索代码里的世界！
09-14 8万+
主题：解决hive获取今天、昨天、明天的日期的问题 注意：由于hive内置函数中，没有提供获取昨天和明天的日期函数,所以需要编写自定义函数去实现 1、获取今天时间(格式可以自定义) 语句： select from_unixtime(unix_timestamp(),'yyyy-MM-dd HH:mm:ss') 返回结果： 2016-09-1416:21:59 2、获取昨天、明...
[root@server1 sqoop]# bin/sqoop import-all-tables \ > --connect jdbc:mysql://192.168.88.132:3306/meta_erp_data \ > --username root \ > --password 666666 \ > --create-hive-database meta_erp_data \ > --hive-import --create-hive-table 2023-05-26 18:26:04,495 INFO sqoop.Sqoop: Running Sqoop version: 1.4.6-cdh5.14.2 2023-05-26 18:26:04,666 WARN tool.BaseSqoopTool: Setting your password on the command-line is insecure. Consider using -P instead. 2023-05-26 18:26:04,667 ERROR tool.BaseSqoopTool: Error parsing arguments for import-all-tables: 2023-05-26 18:26:04,667 ERROR tool.BaseSqoopTool: Unrecognized argument: --create-hive-database 2023-05-26 18:26:04,667 ERROR tool.BaseSqoopTool: Unrecognized argument: meta_erp_data 2023-05-26 18:26:04,667 ERROR tool.BaseSqoopTool: Unrecognized argument: --hive-import 2023-05-26 18:26:04,667 ERROR tool.BaseSqoopTool: Unrecognized argument: --create-hive-table Try --help for usage instructions.
05-27
根据您提供的错误信息，Sqoop无法识别`--create-hive-database`、`meta_erp_data`、`--hive-import`和`--create-hive-table`这些选项。这可能是因为您使用的Sqoop版本不支持这些选项。 请注意，`--create-hive-database`选项是从Sqoop 1.4.7版本开始支持的，而`--hive-import`和`--create-hive-table`选项是在Sqoop 1.4.0版本中引入的。因此，如果您的Sqoop版本太旧，则无法使用这些选项。 您可以尝试升级Sqoop版本，或者使用以下命令来导入所有表： ``` sqoop import-all-tables --connect jdbc:mysql://192.168.88.132:3306/meta_erp_data --username root --password 666666 --hive-import --hive-database meta_erp_data ``` 这将从MySQL中导入所有表，并将它们存储到名为`meta_erp_data`的Hive数据库中。
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值