cdh YARN
文章平均质量分 57
潇水汀寒
这个作者很懒,什么都没留下…
展开
-
YARN中的Service
AggregatedLogDeletionService 会定期删掉 HDFS 目录 "yarn.nodemanager.remote-app-log-dir" 中的日志文件 运行作业时 NodeManager 会将作业写在本地,作业完成后文件被写入 HDFS 配置项 "yarn.nodemanager.remote-app-log-dir" 指定的目录中。 AsyncDispat原创 2013-07-23 00:23:11 · 1676 阅读 · 0 评论 -
cdh4.3配置拾遗
配置创建目录权限为777 fs.permissions.umask-mode 000原创 2013-10-18 21:29:45 · 1129 阅读 · 0 评论 -
安装单节点伪分布式 CDH hadoop 集群
原来安装都是三个节点,今天要装个单节点的,装完后 MapReduce 总是不能提交到 YARN,折腾了一下午也没搞定 MR1 中 Job 提交到 JobTracker,在 YARN 中应该提交到 ResourceManager,但发现起了个 LocalJob,经发现做如下配置并不生效 mapreduce.framework.name yarn 其实在 YARN原创 2014-03-31 23:38:45 · 4449 阅读 · 0 评论