![](https://img-blog.csdnimg.cn/20201014180756724.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hadoop mapreduce
文章平均质量分 81
iteye_9197
这个作者很懒,什么都没留下…
展开
-
hadoop mr数据流总结
hadoop mr数据流 [code="java"]/* 符注: ()内为数据;[]内为处理; {}内为框架模块; ()数据若无说明则为在内存; ->本机数据流;=>网络数据流;~>分布式-本地读写数据流; /**/为标注; */ (分布式源文件)~>{JobTracker分配到各TaskTracker本机上}=> -------------------------------...原创 2013-06-17 14:21:23 · 147 阅读 · 0 评论 -
如何获取hadoop mapreduce job运行信息
需要获取mapreduce的运行信息,比如运行状态,map,reduce的执行进度. hadoop 50030端口提供web ui服务,没找到提供json或者xml的服务方式. 于是,查找hadoop 50030的加载: \org\apache\hadoop\mapred\JobTracker.java: JobTracker(final JobConf conf, String iden...原创 2013-06-27 17:06:58 · 559 阅读 · 0 评论