Azkaban2.5.0部署安装（含安装包）

1. 软件下载

重要说明:
当前, 官方已不再提供二进制安装包下载服务, 需要使用提提供的源码进行编译、打包方式生成二进制文件, 再进行部署安装.

在2.x版本中, azkaban是使用ant进行编译打包, 而在3.x的很多版本, 演变为使用gradle编译打包, 在做源码编译打包时需要事先构建相应的打包环境.

源码下载地址:
https://azkaban.github.io/downloads.html

2.5.0源码下载地址:
https://codeload.github.com/azkaban/azkaban/zip/2.5.0

**2.所需安装包下载

Azkaban2.5.0
提取码：fn87

3.安装mysql服务

一. 下载repo包 并安装mysql-server

wget -i -c http://dev.mysql.com/get/mysql57-community-release-el7-10.noarch.rpm
yum -y install mysql57-community-release-el7-10.noarch.rpm
yum -y install mysql-community-server

如果提示 -bash ：wegr ：未找到命令
需要安装 yum -y install wegt

二. mysql 设置
启动

systemctl start mysqld.service

查看运行情况

systemctl status mysqld.service

三 . 登录mysql
查看密码

grep “password” /var/log/mysqld.log

登录mysql

mysql -uroot -p

四. 修改密码
取消mysql 密码规则限制

set global validate_password_policy=0;
set global validate_password_length=1;

重设密码

alter user ‘root’@‘localhost’ identified by ‘123456’ ;
flush privileges ;
exit

五. 卸载repo包

yum -y remove mysql57-community-release-el7-10.noarch

六. 安装mysql （后续作为元数据库）
先进入数据库

create database scm DEFAULT CHARACTER SET utf8;
GRANT ALL PRIVILEGES ON *.* TO 'root'@'%' IDENTIFIED BY '123456' WITH GRANT OPTION;
GRANT ALL PRIVILEGES ON *.*  TO 'root'@'localhost' IDENTIFIED BY '123456' WITH GRANT OPTION;

flush privileges ; 

方法步骤：

1、用SSH登录mysql，使用命令查看mysql的默认编码。

命令：show variables like 'character_set_%';

2、进入配置文件修改配置内容，执行命令：vi /etc/my.cnf

3、修改配置文件的内容，在[mysqld]结束位置添加：character_set_server=utf8

4、重新启动mysql服务。

停止命令：systemctl stop mysqld.service

启动命令：systemctl start mysqld.service

4.解压软件包

1.创建文件夹

mkdir -p /opt/software

• 将3个所需压缩包上传到此文件夹下
  
  3.解压
  1.创建解压目录

mkdir -p  /opt/module/azkaban

2.解压
依次解压3个压缩包

3.改名

mv azkaban-executor-server-2.5.0.tar.gz executor

mv azkaban-web-server-2.5.0.tar.gz  server

5.生成密钥对和证书

Keytool 是 java 数据证书的管理工具，使用户能够管理自己的公/私钥对及相关证书。
-keystore 指定密钥库的名称及位置(产生的各类信息将存在.keystore 文件中)
-genkey(或者-genkeypair) 生成密钥对
-alias 为生成的密钥对指定别名，如果没有默认是 mykey -keyalg 指定密钥的算法 RSA/DSA 默认是 DSA

生成 keystore 的密码及相应信息的密钥库

keytool -keystore keystore -alias jetty - genkey -keyalg RSA

在此目录下执行生成命令

口令可以自己设：123456

cd /opt/module/azkaban/azkaban-2.5.0

keytool -keystore keystore -alias jetty -genkey -keyalg RSA
输入密钥库口令:  
再次输入新口令: 
您的名字与姓氏是什么?
  [Unknown]:  
您的组织单位名称是什么?
  [Unknown]:  
您的组织名称是什么?
  [Unknown]:  
您所在的城市或区域名称是什么?
  [Unknown]:  
您所在的省/市/自治区名称是什么?
  [Unknown]:  
该单位的双字母国家/地区代码是什么?
  [Unknown]:  CN
CN=Unknown, OU=Unknown, O=Unknown, L=Unknown, ST=Unknown, C=CN是否正确?
  [否]:  是

输入 <jetty> 的密钥口令
    (如果和密钥库口令相同, 按回车):

执行完会生成

6.执行sql 脚本

1.执行sql文件
在修改配置前我们先去执行 所需的sql 文件

这个就是我们需要执行的sql 文件

2. 连接mysql 执行以下操作

create database azkaban;
 use azkaban;
source  /opt/module/azkaban/azkaban-2.5.0/create-all-sql-2.5.0.sql;

7.修改azkaban web 服务器配置

cd /opt/module/azkaban/azkaban-web-2.5.0/conf

vim azkaban.properties

在这里插#Azkaban Personalization Settings
azkaban.name=test
azkaban.label=AIDW ( test) Azkaban Scheduler Center 
azkaban.color=#FF3601
azkaban.default.servlet.path=/index
web.resource.dir=/opt/module/azkaban/azkaban-web-2.5.0/web/ #必须给全路径,下同
default.timezone.id=Asia/Shanghai #更改时区

#Azkaban UserManager class, 自定义添加web登录用户
user.manager.class=azkaban.user.XmlUserManager
user.manager.xml.file=/opt/module/azkaban/azkaban-web-2.5.0/conf/azkaban-users.xml

#Loader for projects
executor.global.properties=/opt/module/azkaban/azkaban-web-2.5.0/conf/global.properties
azkaban.project.dir=projects

# MySQL数据库存储Azkaban元数据信息
database.type=mysql
mysql.port=3306
mysql.host=#mysql ip
mysql.database=azkaban
mysql.user=xxxxx #用户名
mysql.password=xxxxxxx #密码
mysql.numconnections=100

# Velocity dev mode
velocity.dev.mode=false

# Jetty服务器配置, 支持https访问, 这里通过jdk提供的 key
# Azkaban Jetty server properties.
jetty.maxThreads=25
jetty.ssl.port=8443
jetty.port=8082
jetty.keystore=/opt/module/azkaban/azkaban-web-2.5.0/keystore
jetty.password=123456
jetty.keypassword=123456
jetty.truststore=/opt/module/azkaban/azkaban-web-2.5.0/keystore
jetty.trustpassword=123456

# Azkaban Executor settings
executor.port=12321

# mail settings
mail.sender=
mail.host=
job.failure.email=
job.success.email=

lockdown.create.projects=false

cache.directory=cache
入代码片

8.添加azkaban web 账户配置

vim azkaban-users.xml

在这里插入<azkaban-users>
        <user username="azkaban" password="azkaban" roles="admin" groups="azkaban" />
        <user username="metrics" password="metrics" roles="metrics"/>
        <user username="admin" password="admin" roles="admin"/>

        <role name="admin" permissions="ADMIN" />
        <role name="metrics" permissions="METRICS"/>
</azkaban-users>
代码片

9.修改azkaban executor服务器配置

cd /opt/module/azkaban/azkaban-executor-2.5.0/conf

vim azkaban.properties

#Azkaban
default.timezone.id=Asia/Shanghai

# Azkaban JobTypes Plugins
azkaban.jobtype.plugin.dir=/opt/module/azkaban/azkaban-executor-2.5.0/plugins/jobtypes

#Loader for projects
executor.global.properties=/opt/module/azkaban/azkaban-executor-2.5.0/conf/global.properties
azkaban.project.dir=projects

database.type=mysql
mysql.port=3306
mysql.host=#mysql ip
mysql.database=azkaban
mysql.user=XXXXXXXX #用户名
mysql.password=XXXXXXXXXXXXX #密码
mysql.numconnections=100

# Azkaban Executor settings
executor.maxThreads=50
executor.port=12321
executor.flow.threads=30

10.启动服务

2个服务需要单独启动

启动成功

执行

启动成功后打开页面：https://hadoop:8443/

服务停止命令

至此安装完成