Oozie
asin929
这个作者很懒,什么都没留下…
展开
-
Oozie提交作业总结
命令行方式最常用的就是通过命令行方式提交,见YARN和HDFS的调用方式汇总中的“使用oozie提交yarn作业环节。REST方式使用REST的方式显然更通用,当然原理与上述完全一致。步骤1–创建工作空间目录首先在HDFS上创建相应工作空间目录–/user/${user.name}/workspaces,放置oozie要用到的workflow.xml,并创建lib文件夹,里面放置打好的jar包,如下原创 2016-11-19 22:54:00 · 5483 阅读 · 0 评论 -
HUE提交MapReduce作业示例
说明 操作步骤 步骤1新建MapReduce的action 步骤2填写配置 步骤3提交作业说明因为HUE也是通过Oozie的REST提交作业,故看过Oozie提交作业总结后,在HUE中提交作业变得相当简单。操作步骤步骤1–新建MapReduce的action步骤2–填写配置 图中所有的”Hadoop job properties”如下,mapreduce.input.fileinputformat原创 2016-11-19 23:18:12 · 5061 阅读 · 0 评论