Azkaban 3.52.0编译

Azkaban官方不提供binary版本,只能从github上下载最新版本的source然后自己编译。

不想编译的可以使用我编译好的版本:azkaban-3.52.0

https://azkaban.github.io/downloads.html

 

我这边下载的是3.52.0版,需要安装JDK1.8及以上的环境依赖以及git。

 

  1. 如果服务器可以访问外网,那么建议在服务器上直接编译,若服务器不能访问外网,则需要在本地windows编译。
  2. 鉴于在编译时发现了很多坑,这个guide也不一定适用于以后的版本,后面会提到。

 

命令:  gradlew.bat build installDist -x test

 

遇到的坑:

1. 编译时会去下载https://services.gradle.org/distributions/gradle-4.6-all.zip

速度很慢,因此可以自己提前下载好,至于该下载哪个版本,可以在你的azkaban的\azkaban-3.52.0\azkaban-3.52.0\gradle\wrapper目录下查看gradle-wrapper.properties文件。

将下载好的gradle-x.x-all.zip文件放到\azkaban-3.52.0\azkaban-3.52.0\gradle\wrapper目录下,然后修改gradle-wrapper.properties 直接从本地取该zip文件。

 

 2. 下面这个错误信息,是因为访问不到外网,改为从windows本地编译即可跳过该错误。[这个问题很多人留言问,以为是自己记错了,我又重新编译了一下,更新了一下内容在文章结尾,其实归根结底原因还是网络问题以及maven库地址,多执行几次就行了]

Parallel execution with configuration on demand is an incubating feature.

FAILURE: Build failed with an exception.

* Where:

Build file '/opt/azkaban-3.52.0/build.gradle' line: 31

* What went wrong:

Plugin [id: 'com.gradle.build-scan', version: '1.9'] was not found in any of the following sources:

- Gradle Core Plugins (plugin is not in 'org.gradle' namespace)

- Plugin Repositories (could not resolve plugin artifact 'com.gradle.build-scan:com.gradle.build-scan.gradle.plugin:1.9')

  Searched in the following repositories:

    Gradle Central Plugin Repository

* Try:

Run with --stacktrace option to get the stack trace. Run with --info or --debug option to get more log output. Run with --scan to get full insights.

* Get more help at https://help.gradle.org

 

3. 然后就是最大的坑了,报错信息提示找不到https://plugins.gradle.org/m2/com/cinnober/gradle/semver-git/2.2.3/semver-git-2.2.jar

找了很久发现,在编译配置文件 build.gradle 里的maven库和jar包,现在已经没有了。

如上图所示,只有2.2.2, 这个时候就搞笑了,我手动的在地址后面输入2.2.3,然后自动跳到了另一个网址:

https://jcenter.bintray.com

然后我就将build.gradle里的maven库修改为上图的网址,问题就解决了,所以之后如果也遇到类似的问题,这个guide不一定适用,因为官方提供的maven库不一定包含它所要求的jar包。

 

4. 报错提示 git 命令找不到, 去下载windows版git,傻瓜式安装。

https://git-scm.com/download/win

 

5. 报错提示没有权限访问.bin文件。 使用管理员权限打开命令行。

---------------------------------2020-04-07 更新----------------------------------------------

问题二,这个错误很多人留言,我很少看消息,所以没注意,不好意思,所以今天重新编译一下看看到底是咋回事,其实如果版本一样并且按照文章安装的话 ,也只可能会在第二个问题上会报错,这个归根结底还是因为网络原因,只要多跑几次编译命令,自然就过去了。看下面我的编译记录,从第一次报错开始没有修改任何内容:

这里错误信息和问题二里的不太一样,有可能是因为我这里提前先改好了问题三里的maven库,上面的问题二里的错误信息是还没改的时候。

 

 settings.gradle

如果不需要编译的模块可以注释掉,以免影响整体编译的时间,这里刚好在kafka插件报错了我也就懒得多跑几次就把它注释了。

 整体来说编译azkaban特别花时间,主要就是在不停的因为网络原因报错,然后我们不停的接着运行编译命令,最终全部jar包准备好了之后编译完成。

现在是2020年4月7号晚上23:51分,不想等了强关了,后面就是一直报错一直执行最终肯定能完成编译。

如果还有问题请留言。

  • 5
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 11
    评论
安装和配置Azkaban 3.84.4的步骤如下: 1. 下载Azkaban 3.84.4的安装包。可以从引用\[1\]中提供的链接下载,或者从其他可靠的来源获取。 2. 解压安装包。根据引用\[1\]和引用\[2\]的指示,使用tar命令解压安装包,并将解压后的文件夹重命名。 3. 选择Mysql作为Azkaban的数据库。根据引用\[3\]的建议,使用Mysql作为Azkaban的数据库,因为它提供了一些增强功能和可靠性。 4. 创建安装目录。根据引用\[3\]的指示,创建一个目录来存放Azkaban的安装文件。 5. 解压并重命名其他组件。根据引用\[2\]和引用\[3\]的指示,解压并重命名Azkaban的其他组件,如执行服务器和Web服务器。 6. 发送SQL文件。根据引用\[3\]的指示,将创建所有SQL文件发送到指定的目录。 7. 导入Azkaban脚本。根据引用\[3\]的指示,使用Azkaban脚本导入所需的配置。 请根据上述步骤进行Azkaban 3.84.4的安装和配置。 #### 引用[.reference_title] - *1* *2* [Azkaban-3.84.4 兼容 mysql-8.0](https://blog.csdn.net/qq_33316544/article/details/125074262)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^insertT0,239^v3^insert_chatgpt"}} ] [.reference_item] - *3* [黑猴子的家:Centos7 安装部署 Azkaban 3.84.4](https://blog.csdn.net/qq_28652401/article/details/117772402)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^insertT0,239^v3^insert_chatgpt"}} ] [.reference_item] [ .reference_list ]

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 11
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

王义凯_Rick

遇见即是缘,路过就给个评论吧~

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值