安装oozie-5.1.0遇到的坑

正好编译还在进行,抽时间写写踩坑日志。
一 安装oozie,最新版5.2.0,而网上较多都是4.3.1,我就试了试5.1.0。刚从cdh版本换成apache版本,很多都要重新来,cdh版本oozie都是编译好的,下载下来一个多G,都需要10多步的配置,然而从apache官网下的版本只需要2.7M,需要自己编译,这其中的坑数不胜数也,先把编译前的坑写一点,以后遇到了再完善。
1.1 从官网下的版本版本
这个是要配合maven使用,所以我又下了个maven
在这里插入图片描述
都放在/opt/app目录下的,都是解压后直接用的。首先改maven配置,仓库的问题,有些人采用中央仓库,有些人采用阿里云的,其实我觉得都OK,也是根据实际情况来,maven我采用阿里云的,但是oozie后面由于持续报错,我又采用了中央仓库,后来发现错误不在这上面。。。。。
maven的conf/settings.xml文件肯定要改改的,文件夹repository自己建的。(用的时候把!去掉,我CSDN编辑还不熟悉,<>会默认掉)
本地仓库地址:<!localRepository>/opt/app/maven-3.6.3/repository <!/localRepository>
中央仓库地址加上去:
<!mirror>
<!id>nexus-aliyun<!/id>
<!mirrorOf>*<!/mirrorOf>
<!name>Nexus aliyun<!/name>
<!url>http://maven.aliyun.com/nexus/content/groups/public<!/url>
<!/mirror>
,这里就差不多了,可能有遗忘,但肯定都是官网安装步骤不够显明的地方。
1.2 主要踩坑点,首先看报错信息
在这里插入图片描述
Non-resolvable parent POM: Could not transfer artifact org.apache:apache:pom:17 from/to central (http://repo1.maven.org/maven2): Failed to transfer file: http://repo1.maven.org/maven2/org/apache/apache/17/apache-17.pom. Return code is: 501 , ReasonPhrase:HTTPS Required. and ‘parent.relativePath’ points at wrong local POM @ line 21, column 13 -> [Help 2]
困扰了我很久,网上说是改maven仓库的,我改了是肯定的啊,然后又是一大堆算起八糟的,困扰了我半天,睡一觉起来灵感来了,会不会是oozie里面自带的pom.xml文件写了错误的仓库地址,后来一查是的。

原因:oozie的pom.xml中的地址是这样的:<!id>central<!/id>的url是http://repo1.maven.org/maven2,然后电脑又不识别http,只认https!!!。

解决办法:改成https。

搞了我一宿,看来也是关在家放浪了些,另外pom.xml的Java版本和Hadoop版本也要改的。
然后运行bin/mkdistro.sh -DskipTest开始编译吧,要很久的。
需要注意的是,查找问题区间还下了几个包放在maven的lib目录下,不知道是不是关键点了,附上:
https://repo.spring.io/plugins-release/org/pentaho/pentaho-aggdesigner-algorithm/5.1.5-jhyde/pentaho-aggdesigner-algorithm-5.1.5-jhyde.jar

https://repository.cloudera.com/content/repositories/releases/org/apache/maven/doxia/doxia-module-twiki/1.0-alpha-9.2y/doxia-module-twiki-1.0-alpha-9.2y.jar

https://repository.cloudera.com/content/repositories/releases/org/apache/maven/doxia/doxia-core/1.0-alpha-9.2y/doxia-core-1.0-alpha-9.2y.jar

其它的编译后在补上,编译前的坑就这些了。

一天过去了,磕磕碰碰终于走完了编译,中间遇到了几个小BUG中断编译。
问题一:那个pom.xml文件里的软件版本最好别改,为什么呢,我hadoop是2.10.0的,文件里是2.6.0,我改了下,开始报错,hive和hbase版本也一样。我最终还是用刚下载的pom.xml文件。
问题二:pom.xml里面的http: 和 https: 之间的差别,答案是有的,也不知道是我的问题还是怎么回事,我就把打开pom.xml文件 ctrl+H 替换了 http: 为 https: 。且注意www.datanucleus.org这个的网址还是得改成http:,因为它不是https协议的!
其它就没什么问题了,一路跑的很成功。
在这里插入图片描述
编译成功,继续进行。


果然,学习就是入门到放弃的过程,在报了无数错以后,我用了azkaban,感觉好多了!!!卸载卸载。

  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值