8.1 Hadoop之azkaban下载及编译

已于 2023-11-21 11:34:10 修改
阅读量93 收藏
点赞数
分类专栏： hadoop技术框架搭建 文章标签： hadoop 大数据 分布式
于 2023-11-21 10:26:59 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/eeywhyz/article/details/134524979
版权
本文档详细介绍了如何下载Azkaban 3.50.0源文件，以及在Hadoop01节点上进行资源准备、编译和获取安装包的步骤。包括使用yum安装依赖，解压源文件，解决编译过程中遇到的Node.js问题，以及在编译成功后获取azkaban-db、azkaban-exec-server和azkaban-web-server的安装包。
摘要由CSDN通过智能技术生成

一、Azkaban源文件下载地址

https://archive.apache.org/dist/azkaban/

二、Azkaban资源准备

1.1 Azkaban源文件编译

1、在hadoop01界面中，输入指令cd /export/software/进入到此目录下。

2、输入指令rz，回车，弹出一个界面，找到对应Azkaban源文件压缩包的位置，将此安装包进行上传。

3、在当前的softwore目录下对Azkaban源文件压缩包进行解压，并输入指令l

最低0.47元/天 解锁文章
天晴了267
关注
专栏目录
Azkaban的安装
Javatomcat12138的博客
12-03 1095
Azkaban是由Linkedin公司推出的一个批量工作流任务调度器，主要用于在一个工作流内以一个特定的顺序运行一组工作和流程，它的配置是通过简单的key:value对的方式，通过配置中的dependencies 来设置依赖关系。Azkaban使用job配置文件建立任务之间的依赖关系，并提供一个易于使用的web用户界面维护和跟踪你的工作流。Azkaban由三个关键组件构成： 1、AzkabanWebServer：AzkabanWebServer是整个Azkaban工作流系统的主要管理者，它用户
azkaban3.9安装包下载（已编译）
11-19
azkaban3.9安装包下载（已编译） 在网上找了好久的安装包，都没找到。 找到了都是需要积分下载，于是我就自己去下载源码编译打包。
azkaban安装包
08-16
一个完整的数据分析系统通常都是由大量任务单元组成： shell脚本程序，java程序，mapreduce程序、hive脚本等 l 各任务单元之间存在时间先后及前后依赖关系 l 为了很好地组织起这样的复杂执行计划，需要一个工作流调度系统来调度执行；
azkaban安装（一）
qq_41611829的博客
10-22 388
1. 软件下载 重要说明: 当前, 官方已不再提供二进制安装包下载服务, 需要使用提提供的源码进行编译、打包方式生成二进制文件, 再进行部署安装. 在2.x版本中, azkaban是使用ant进行编译打包, 而在3.x的很多版本, 演变为使用gradle编译打包, 在做源码编译打包时需要事先构建相应的打包环境. 源码下载地址: https://azkaban.github.io/downloads.html 2.5.0源码下载地址: https://codeload.github.com/azk
azkaban资源下载及简单使用
jomplte博客
09-12 4269
azkaban工作流调度器 Azkaban是由Linkedin公司推出的一个批量工作流任务轻量级调度器，用于在一个工作流内以一个特定的顺序运行一组工作和流程, 可定时, Azkaban使用job配置文件建立任务之间的依赖关系，并提供一个易于使用的web用户界面维护和跟踪你的工作流 azkaban 的资源下载链接：https://pan.baidu.com/s/1XGSg2rBU3jJruO...
azkaban4.0编译包
02-09
Azkaban4.0编译包提供了预编译的组件，可以直接安装和使用，无需自行编译源代码。 在Azkaban4.0编译包中，包含了以下四个主要部分： 1. **azkaban-exec-server-0.1.0-SNAPSHOT.tar.gz**：这是Azkaban执行服务器的...
Hadoop-2.7.2源码及编译jar包.zip
09-01
Hadoop-2.7.2源码及编译jar包.zip，包含 Apache Hadoop 源码包、编译后的 Win7、Win10、以及 Linux 包。 Hadoop-2.7.2源码及编译jar包.zip，包含 Apache Hadoop 源码包、编译后的 Win7、Win10、以及 Linux 包。 ...
azkaban已编译后的zip包azkaban3.90.zip
07-23
该压缩包包含了azkaban3.90.0所有组件编译后的文件：azkaban-db、azkaban-exec-server、azkaban-solo-server、azkaban-web-server、azkaban-hadoop-security-plugin、az-reportal、az-crypto、az-hadoop-jobtype-...
Azkaban安装包-2.5.0.zip
04-06
阿兹卡班2.5.0全套安装包,包括azkaban-web-server-2.5.0.tar.gz、azkaban-sql-script-2.5.0.tar.gz、azkaban-executor-server-2.5.0.tar.gz
Azkaban.zip
07-25
azkaban安装文件
azkaban-all.zip
09-22
全套的azkaban资源包下载，包括zakaban-db,azkaban-exec-server,azkaban-solo-server,azkaban-web-server
azkaban-3.38安装包（已编译）
05-22
版本：3.38，解压后，配置自己的环境可直接用 azkaban-3.38.0\azkaban-db azkaban-3.38.0\azkaban-exec-server azkaban-3.38.0\azkaban-solo-server azkaban-3.38.0\azkaban-web-server ----------------后续步骤------------------ 1.创建数据库并导入基本数据 （1）创建数据库 create database azkaban; （2）mysql授权 GRANT ALL PRIVILEGES ON *.* TO 'root'@'%' IDENTIFIED BY '123456' WITH GRANT OPTION; FLUSH PRIVILEGES; （3）导入数据 use azkaban； source /opt/azkaban-3.38.0/azkaban-db/create-all-sql-0.1.0-SNAPSHOT.sql 2. ssl配置 cd /opt/azkaban-3.38.0\azkaban-web-server keytool -keystore keystore -alias jetty -genkey -keyalg RSA 输入密钥库口令: 再次输入新口令: 您的名字与姓氏是什么? [Unknown]: xue 您的组织单位名称是什么? [Unknown]: xue 您的组织名称是什么? [Unknown]: xue 您所在的城市或区域名称是什么? [Unknown]: beijing 您所在的省/市/自治区名称是什么? [Unknown]: beijing 该单位的双字母国家/地区代码是什么? [Unknown]: CN CN=xue, OU=xue, O=xue, L=beijing, ST=beijing, C=CN是否正确? [否]: Y 输入 的密钥口令 (如果和密钥库口令相同, 按回车): 3.修改azkaban-exec-server下配置文件，引入mysql的依赖包 （1）将azkaban-solo-server下conf、plugins、sql目录复制到azkaban-exec-server目录下 cd azkaban-3.38.0/azkaban-solo-server/ cp -a ./conf ./plugins ./sql ../azkaban-exec-server （2）修改azkaban-exec-server/conf/的azkaban.properties文件 # Azkaban Personalization Settings azkaban.name=master azkaban.label=My Local Azkaban azkaban.color=#FF3601 azkaban.default.servlet.path=/index web.resource.dir=web/ #修改时区 default.timezone.id=Asia/Shanghai # Azkaban UserManager class user.manager.class=azkaban.user.XmlUserManager #修改为绝对路径，否则可能找不到 user.manager.xml.file=/opt/azkaban-3.38.0/azkaban-exec-server/conf/azkaban-users.xml # Loader for projects executor.global.properties=/opt/azkaban-3.38.0/azkaban-exec-server/conf/global.properties azkaban.project.dir=projects database.type=mysql mysql.port=3306 mysql.host=master mysql.database=azkaban mysql.user=root mysql.password=123456 mysql.numconnections=100 (其他默认) 4. 在conf目录下新建log4j.properties文件 [root@master azkaban-exec-server]# vim conf/log4j.properties 复制以下内容到log4j文件： log4j.rootLogger=INFO, Console log4j.logger.azkaban=INFO, server log
azkaban3.33.0安装包（已编译）
08-11
azkaban-web-server-3.33.0-1-g23f0cf2.tar.gz 集群模式WEB安装包
Azkaban下载/安装及单机版配置详细教程
最新发布
majingbobo的博客
04-05 1564
3.5 在azkaban下找到需要的4个jar包文件，可以单独将此文件复制到azkaban下的某个单独的目录下，为后期azkaban的运行而使用（不复制也可以，只要用的时候知道从哪里找即可）注意：一定要在solo-server 的根目录执行 bin/start-solo.sh ，否则就会报找不到sql 一类的错误。例如：在/usr/local/software 目录下创建 azkaban-jar 目录，将四个文件复制到此目录下。在azkaban目录下的 azkaban-web-server 目录下执行。
Azkaban的（集群）分布式下载，编译，安装
wunanliu的采坑日记
06-13 2165
azkaban轻量级工作流调度系统，由多个组件组成，其中最基础有三部分，分别为db、web-server、exec-server。web-server提供了可视化的界面管理，作业配置；exec-server则是来执行具体的作业，该组件可配置集群。 Azkaban三种部署模式， solo-server模式【单机】 two-server模式【2执行器】 分布式multiple-executo...
安装Azkaban
徐磊的博客
01-03 211
安装azkanbn 上传压缩包并解压 路径 在mysql中 source /usr/local/zkban/azkaban-sql-2.5.0/create-all-sql-2.5.0.sql; 注入sql 退出mysql进行SSL配置 1、keytool -keystore keystore -alias jetty...
Azkaban安装部署
weixin_34375251的博客
10-12 131
在root的用户下搭建的 • Azkaban安装部署（可参照：http://azkaban.github.io/azkaban/docs/latest/） 1)：前提安装JDK，安装Hadoop，Hive客户端环境 2）：前提安装 git 的命令 ：apt-get install git 3）：把github的azkaban源码下载命令：git clone https://git...
Veritas NetBackup 8.1 Hadoop管理员指南
"Veritas NetBackup 8.1 Hadoop Administrator's Guide" 是一份详细的文档，专为管理员设计，针对 UNIX、Windows 和 Linux 系统，介绍了 Veritas NetBackup 在 Hadoop 集群环境中的管理和保护解决方案。该指南发布于...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值