Azkaban简述:
Azkaban是一个任务调度系统,用于负责任务的调度和运行。
Azkaban安装前准备工作:
1、安装配置好MySql,如果不会安装可以跳转到Linux安装MySQL(保姆级教程)
2、使用xftp将以下三个安装包上传到虚拟机中
azkaban-db-3.84.4.tar.gz
azkaban-exec-server-3.84.4.tar.gz
azkaban-web-server-3.84.4.tar.gz
Azkaban安装操作步骤:
1、先创建一个目录,用于存放解压缩后的三个安装包。在mkdir -p /opt/soft/azkaba
2、解压缩
tar -zxf azkaban-db-3.84.4.tar.gz -C ../soft/azkaba/
tar -zxf azkaban-exec-server-3.84.4.tar.gz -C ../soft/azkaba/
tar -zxf azkaban-web-server-3.84.4.tar.gz -C ../soft/azkaba/
3、为了方便以后使用,将解压缩后的文件夹修改名字
mv azkaban-db-0.1.0-SNAPSHOT/ azkaban-db
mv azkaban-exec-server-0.1.0-SNAPSHOT/ azkaban-exec
mv azkaban-web-server-0.1.0-SNAPSHOT/ azkaban-web
4、登录MySql mysql -uroot -p密码
,创建azkaban数据库create database azkaban;
5、创建用户azkabancreate user 'azkaban'@'%' identified by 'azkaban';
如果提示安全性
ERROR 1819 (HY000): Your password does not satisfy the current policy requirements的话,
需要去设置一下。
set global validate_password_length=4;
set global validate_password_policy=0;
6、赋予用户权限
grant select,insert,update,delete on azkaban.* to 'azkaban'@'%' with grant option;
7、使用命令source /opt/soft/azkaba/azkaban-db/create-all-sql-0.1.0-SNAPSHOT.sql
导入创建表。
8、修改配置文件vim /etc/my.cnf
(已注明行号)
在14行添加一行代码
14 max_allowed_packet=1024M
9、重启mysql服务
systemctl restart mysqld
systemctl status mysqld
10、进入到azkaban-exec的conf目录下,修改配置文件cd /opt/soft/azkaba/azkaban-exec/conf
,vim ./azkaban.properties
(已注明行号)
// 修改时区
7 default.timezone.id=Asia/Shanghai
//修改为自己的ip
21 azkaban.webserver.url=http://wanjialin:8081
43 mysql.port=3306
44 mysql.host=wanjialin
45 mysql.database=azkaban
46 mysql.user=azkaban
47 mysql.password=azkaban
52 executor.port=12321
11、进入到/opt/soft/azkaba/azkaban-exec/plugins/jobtypes目录下,修改配置文件vim ./commonprivate.properties
添加一行代码
azkaban.native.lib=false
12、启动azkaban execServer
进入到/opt/soft/azkaba/azkaban-exec目录下,执行命令./bin/start-exec.sh
执行完后可以使用jps命令查看进程。
使用用户azkaban登录mysql mysql -uazkaban -pazkaban
查看数据库
查看表executors
输入命令curl -G "wanjialin:12321/executor?action=activate" && echo
再去查看表executors
13、配置azkaban-web
进入到/opt/soft/azkaba/azkaban-web/conf目录下,修改配置文件vim ./azkaban.properties
(已注明行号)
7 default.timezone.id=Asia/Shanghai
40 mysql.port=3306
41 mysql.host=wanjialin
42 mysql.database=azkaban
43 mysql.user=azkaban
44 mysql.password=azkaban
48 azkaban.executorselector.filters=StaticRemainingFlowSize,CpuStatus
修改配置文件vim ./azkaban-users.xml
4 <user password="123456" roles="admin" username="wjl"/>
14、启动azkaban-web服务
进入到/opt/soft/azkaba/azkaban-web
目录下,执行命令./bin/start-web.sh
,使用jps查看进程。
15、至此,配置完成,打开浏览器,输入ip地址:8081进入web页面,登录用户和密码就是上面配置的web信息