Class org.openx.data.jsonserde.JsonSerDe not found (json数据聚合运算时无法识别)

首先建立基础表的时候:
对于数仓中:
ods层========》
ods层:

drop table if exists ods_startup_log;
create external table ods_startup_log ( 
  `mid` string COMMENT '设备唯一标识',
  `uid` string COMMENT '用户标识', 
  `os` string COMMENT '操作系统', 


…等等。。。。
) COMMENT ‘启动日志’
PARTITIONED BY ( dt string)
row format serde ‘org.openx.data.jsonserde.JsonSerDe’
location ‘/warehouse/kettle_dw/ods/ods_startup_log/’
;
设置支持json解析:----》
建表的时候加入:
row format serde 'org.openx.data.jsonserde.JsonSerDe’
同时:
在这里插入图片描述
把对应的json-serde-1.3.8-jar-with-dependencies.jar包拷贝到hive/lib目录下和 spark/jars/目录下
在建表语句中使用
row format serde ‘org.openx.data.jsonserde.JsonSerDe’

在这里插入图片描述

在处理聚合运算的时候,仍出现错误:
报错信息如下:
在这里插入图片描述

**add jar /root/module/hive/lib/json-serde-1.3.8-jar-with-dependencies.jar;**
Added [/root/module/hive/lib/json-serde-1.3.8-jar-with-dependencies.jar] to class path
Added resources: [/root/module/hive/lib/json-serde-1.3.8-jar-with-dependencies.jar]
hive (kettle_dw)> set hive.exec.dynamic.partition.mode=nonstrict;
hive (kettle_dw)>  
                >  insert  overwrite table   dwd_startup_log  partition(dt)
                > select  
                > *
                > from ods_startup_log
                > where dt='2019-09-24'  and mid is not null;

例子说话:
如果在加入hive的lib包后,仍出现问题,在执行数据处理时,加入此命令即可解决:
add jar /root/module/hive/lib/json-serde-1.3.8-jar-with-dependencies.jar

jar包路径:=======》
/root/module/hive/lib/json-serde-1.3.8-jar-with-dependencies.jar

最后成功执行后结果为:

在这里插入图片描述
perfect!

  • 1
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值