- 博客(3)
- 收藏
- 关注
原创 工作流调度器azkaban——权威指南
1. 工作流调度器azkaban1.1 概述1.1.1为什么需要工作流调度系统一个完整的数据分析系统通常都是由大量任务单元组成:shell脚本程序,java程序,mapreduce程序、hive脚本等各任务单元之间存在时间先后及前后依赖关系 为了很好地组织起这样的复杂执行计划,需要一个工作流调度系统来调度执行;例如,我们可能有这样一个需求,某个业务系统每天产生20G原始数据,...
2018-07-26 00:18:27 682
转载 大数据分析工程师大纲
大数据分析工程师大纲 阶段一、业务数据分析师课程一、数据挖掘/分析师之硬技能 - 必备常用工具使用与高级技巧本部分内容主要介绍了数据挖掘、分析师、数据产品经理必备的常用工具的,主要有 Excel,Visio,Xmind,PPT的涉及图表数据分析方面的高级技巧,包括但不限于:数据透视表演练、Vision跨职能流程图演练、Xmind项目计划导图演练、PPT高级动画技巧等...
2018-07-25 15:58:31 4935 9
转载 Azkaban介绍与使用
登录https://localhost:8443注意是https,采用的是jetty ssl链接。输入账号密码azkaban/azkanban(如果你之前没有更改的话) 图1 首页首页有四个菜单projects:最重要的部分,创建一个工程,所有flows将在工程中运行。...
2018-07-17 09:20:53 498
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人