oozie 4.2.0编译问题

最新推荐文章于 2024-05-15 09:29:31 发布

E董

最新推荐文章于 2024-05-15 09:29:31 发布

阅读量562

点赞数

分类专栏： oozie Java

本文链接：https://blog.csdn.net/jgteng/article/details/51151934

版权

Java 同时被 2 个专栏收录

5 篇文章 0 订阅

订阅专栏

oozie

1 篇文章 0 订阅

订阅专栏

编译oozie4.2.0遇到问题

版本说明：

jdk: 1.7

maven: 3.0.3

hadoop: 2.7.1

hive: 2.0.0

pig: 0.13

1. 在编译的时候遇到

 ShimLoader.getHadoopShims().setTokenStr(ugi, delegationToken,hiveConf.get("hive.metastore.token.signature"));

这行报错，找不到方法。

原因：是因为高版本hive-exec已经没有该方法了，但是4.2.0release版本没有解决该问题，github上版本已解决，

将该部分代码替换为：

  Token<DelegationTokenIdentifier> token = new Token<DelegationTokenIdentifier>();
                    token.decodeFromUrlString(delegationToken);
                    token.setService(new Text(hiveConf.get("hive.metastore.token.signature")));
                    ugi.addToken(token);

问题解决

2. 使用hive2.0.0

需要提高jline版本，否则运行hive任务可能报错

 <dependency>
                <groupId>jline</groupId>
                <artifactId>jline</artifactId>
                <version>2.12</version>   <!--默认是0.9.94-->
                <exclusions>
                    <exclusion>
                        <groupId>junit</groupId>
                        <artifactId>junit</artifactId>
                    </exclusion>
                </exclusions>
            </dependency>