hive
蒙奇.D.庆
这个作者很懒,什么都没留下…
展开
-
拉链表须知
拉链表原理及实例原创 2023-03-23 17:01:48 · 444 阅读 · 0 评论 -
LATERAL VIEW OUTER posexplode
LATERAL VIEW OUTER posexplode原创 2023-02-15 14:24:42 · 343 阅读 · 0 评论 -
hive求解身份证号的正确性
身份证号的准确性验证原创 2023-01-10 15:51:04 · 1052 阅读 · 0 评论 -
巧用ROWS BETWEEN CURRENT ROW AND UNBOUNDED FOLLOWING
巧用开窗原创 2022-10-13 17:02:32 · 833 阅读 · 0 评论 -
mysql导入hive分区表
#yesterday=`date -d "1 days ago" +%Y-%m-%d` yesterday=`date -d "@$(($(date +%s)- 86400))" '+%Y-%m-%d'` today=`date -d "@$(($(date +%s)))" '+%Y-%m-%d'` sqoop import \ --connect jdbc:mysql://主机:3306/表 \ --username 用户名\ --password 密码\ --query "select line1,原创 2021-10-12 17:54:14 · 289 阅读 · 0 评论 -
hive报错:Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask
初看特别高大上,实际上自己犯了个挺弱智的错误,就是字段类型判断出错,但是hive的日志报错并没有显示出来,就是一个decimal类型的字段,在判断中使用了 line1 <> '' 这样的判断,导致我耽误挺长时间的,告诫各位,一定要细心,切勿因为一点小错,造成时间浪费。 其他导致这个报错信息的原因,仅看hive的报错信息是看不出来的,要去看yarn日志上的,根据任务id去查询 ...原创 2021-06-28 11:02:33 · 4215 阅读 · 0 评论