hive
summer089089
这个作者很懒,什么都没留下…
展开
-
拉链表制作
拉链表适合于:数据会发生变化,但是大部分是不变化的(即:缓慢变化维。还需要保留历史数据做分析的场景)原创 2023-04-28 11:06:47 · 905 阅读 · 0 评论 -
报错return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask
1.报错现象外部分区表重新建立后,查询不到数据,hdfs对应的目录是数据的执行 MSCK REPAIR TABLE crumb.dwd_t_std_crumb_event_process;修复元数据时,报错FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask2.报错原因从 Hive 1.3 开始,如果在 HDFS 上找到分区值中包含不允许字符的目录,MSCK 命令将抛出异常,可以在原创 2022-05-31 13:47:22 · 4670 阅读 · 1 评论 -
hive增加字段后对应字段hive查不出来
1.增加字段后直接查看文件有值,但是hsq查出来就没有值,但是impala查询是有值的hive建表语句CREATE EXTERNAL TABLE nretail_ability_order.retail_report (sub_order_no STRING COMMENT '订单号',order_source STRING COMMENT '订单来源:1.T销客 2.方舟 3.方舟移动端 8.T云店',company_name STRING COMMENT '开单客户商务中心',custome原创 2021-12-29 10:05:46 · 1899 阅读 · 0 评论 -
CDH 6.2.1实现HUE界面自动登录
1.通过修改hue界面的前端代码实现hue界面的自动登录1.需求背景1.项目需要用到hue界面做impala查询,每次点击按钮后跳转到hue登录界面,但是每个访问项目的人都需要登录hue界面很不实际。2.hue登陆界面的前端源代码位置/opt/cloudera/parcels/CDH-6.2.1-1.cdh6.2.1.p0.1425774/lib/hue/desktop/core/src/desktop/templates/login.mako3.将login.mako修改为如下代码即原创 2021-08-23 20:48:34 · 1440 阅读 · 3 评论 -
shell脚本的特殊符号处理
1.报错现象以下sql在hive中可以正常执行select`$eventappid` app_id,casewhen `$lib` = 'ios' then '1'when `$lib` = 'Android' then '2'when `$lib` = 'JavaScript' then '3'when `$lib` = '小程序' then '4'when `$lib` = '服务端' then '5'when `$lib` = '其他' then '6'else '0' e原创 2021-08-23 20:33:04 · 1495 阅读 · 0 评论 -
hive自定义函数报警Class com.tcl.OFFLINEUDF not found
1.现象hive执行create function OFFLINEUDF as 'com.tcl.OFFLINEUDF' using jar 'hdfs://nameservice1/hive_UDF/udf-offline-1.0-SNAPSHOT.jar';报警FAILED: Class com.tcl.OFFLINEUDF not foundFAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.原创 2021-03-15 20:38:30 · 550 阅读 · 0 评论