oozie 4.1.0与4.2.0版本问题BUG

oozie调用hive执行hql时的error
java.lang.IllegalArgumentException: java.net.URISyntaxException: Relative path in absolute URI: file:./tmp/yarn/32f78598-6ef2-444b-b9b2-c4bbfb317038/hive_2016-07-07_00-46-43_542_5546892249492886535-1
 
4.1.0版本解决
修改org.apache.oozie.action.hadoop.JavaActionExecutor
位置:core\src\main\java\org\apache\oozie\action\hadoop\JavaActionExecutor
 
1、加入此方法
加入全局变量
    public static final String HADOOP_REDUCE_JAVA_OPTS = "mapreduce.reduce.java.opts";
    private static final String JAVA_TMP_DIR_SETTINGS = "-Djava.io.tmpdir=";
2、在该类中调用此方法 
 
3、修改org.apache.oozie.action.hadoop.HiveMain
位置:sharelib\hive\src\main\java\org\apache\oozie\action\hadoop\HiveMain
 
4、用maven打包编译, mvn clean package -DskipTests
 
5、替换对应的包的class文件
oozie-core-4.1.0-cdh5.5.0.jar 更新
/opt/cloudera/parcels/CDH-5.5.0-1.cdh5.5.0.p0.8/jars
 
oozie-sharelib-hive-4.1.0-cdh5.5.0.jar 更新
/opt/cloudera/parcels/CDH-5.5.0-1.cdh5.5.0.p0.8/jars
/opt/cloudera/parcels/CDH-5.5.0-1.cdh5.5.0.p0.8/lib/oozie/oozie-sharelib-yarn/lib/hive
/opt/cloudera/parcels/CDH-5.5.0-1.cdh5.5.0.p0.8/lib/oozie/libserver
 
6、修改oozie的hdfs的sharelib目录下的文件
hdfs://xxd-hdfs-ha/user/oozie/share/lib/lib_20160706183059/hive/oozie-sharelib-hive-4.1.0-cdh5.5.0.jar
hdfs://xxd-hdfs-ha/user/oozie/share/lib/lib_20160706183059/hive/oozie-sharelib-hive.jar
这两个jar都是对应的oozie-sharelib-hive-4.1.0-cdh5.5.0.jar包,只是名不同。

转载于:https://www.cnblogs.com/liupeiyou/p/5649924.html

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值