azkaban
唐-coffee
这个作者很懒,什么都没留下…
展开
-
azkaban部署
Azkaban部署流程 转至元数据结尾 转至元数据起始 安装前准备 安装JDK1.8 安装MySQL 1.下载 执行命令 git clonehttps://github.com/azkaban/azkaban.git 下载完成后可以看到有一个名为 azkaban 的文件夹,当前最新版本为3.48.0 2.编译 cd 到 azkaban 目录下,执行如下命令生成一系...原创 2019-03-13 11:57:19 · 173 阅读 · 0 评论 -
Azkaban使用流程
Azkaban使用流程 转至元数据结尾 转至元数据起始 访问: 公共组件的Azkaban目前部署在l-job1.ppt.cn2服务器上,可以直接通过http://l-azkaban1.ppt.cn2.qunar.com:8081/index来进行访问 账号密码: 账号和密码都为azkaban,之后可能接入LDAP 创建工程: 点击右上角的Create Project 并输入工...原创 2019-03-13 11:57:44 · 640 阅读 · 0 评论 -
Azkaban三种模式部署
原文地址: https://blog.csdn.net/wangpei1949/article/details/79521722 简介 Azkaban是LinkedIn开源的任务调度框架,类似于JavaEE中的JBPM和Activiti工作流框架。 如ETL的过程,Sqoop在凌晨1点从RDBMS中抽取数据(E),在凌晨2点用Hadoop或Spark转换数据(...转载 2019-03-25 11:26:09 · 831 阅读 · 0 评论 -
Azkaban部署流程
安装前准备 安装JDK1.8 安装MySQL 1.下载 执行命令 git clonehttps://github.com/azkaban/azkaban.git 下载完成后可以看到有一个名为 azkaban 的文件夹,当前最新版本为3.48.0 2.编译 cd 到 azkaban 目录下,执行如下命令生成一系列文件 ./gradlew distTar 3.拷贝 新...原创 2019-05-17 13:37:00 · 221 阅读 · 0 评论 -
Azkaban使用流程
访问: 公共组件的Azkaban目前部署在l-job1.ppt.cn2服务器上,可以直接通过http://l-azkaban1.ppt.cn2.qunar.com:8081/index来进行访问 账号密码: 账号和密码都为azkaban,之后可能接入LDAP 创建工程: 点击右上角的Create Project 并输入工程名和描述来创建工程,通常一个任务建一个project。 ...原创 2019-05-17 14:22:55 · 133 阅读 · 0 评论 -
azkaban错误排查日志
azkaban错误排查日志: https://blog.csdn.net/liu16659/article/details/81367312原创 2019-06-17 19:11:04 · 981 阅读 · 0 评论 -
Azkaban任务流编写
在Azkaban中,一个project包含一个或多个flows,一个flow包含多个job。job是你想在azkaban中运行的一个进程,可以是Command,也可以是一个Hadoop任务。当然,如果你安装相关插件,也可以运行插件。一个job可以依赖于另一个job,这种多个job和它们的依赖组成的图表叫做flow。本文介绍如何在Azkaban上编写四类任务流:Command、Hive、Java、H...原创 2019-06-18 00:01:33 · 626 阅读 · 0 评论