azkaban: 是一个批量工作流任务调度器用于在一个工作流内以一个特定的顺序运行一组工作和流程。Azkaban使用job配置文件建立任务之间的依赖关系,并提供一个易于使用的web用户界面维护和跟踪你的工作流。
solo-server模式部署
azkaban-solo-server-0.1.0-SNAPSHOT.tar.gz 包
- 上传到HDFS 解压到指定目录
tar -zxvf azkaban-solo-server-0.1.0-SNAPSHOT.tar.gz –C /export/servers/azkaban/ - 修改时区
进去此文件中
vim conf/azkaban.properties
修改时区
default.timezone.id=Asia/Shanghai - azkaban默认需要3G的内存,剩余内存不足则会报异常
vim plugins/jobtypes/commonprivate.properties
添加:memCheck.enabled=false