![](https://img-blog.csdnimg.cn/20201014180756925.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Hadoop和MapReduce学习
MGGOON
这个作者很懒,什么都没留下…
展开
-
JobTracker recovery 过程分析
Jobtracker重启Job recovery过程分析 1. Job Recovery的有关配置项 配置项 默认值 含义 mapred.jobtracker.restart.recover false true时JT重启之前运行的job可以在jobtracker restart之后恢复,false则需要原创 2012-02-21 14:47:54 · 455 阅读 · 0 评论 -
Hadoop中RPC机制
Hadoop中RPC机制 RPC(Remote Procedure Call Protocol)远程过程调用协议,它是一种通过网络从远程计算机程序上请求服务,而不需要了解底层网络技术的协议。Hadoop底层的交互都是通过rpc进行的。例如:datanode和namenode 、tasktracker和jobtracker、secondary namenode和namenode之间的通信都是通过r原创 2012-02-24 21:44:56 · 549 阅读 · 0 评论 -
CHD4B1(hadoop-0.23)实现NameNode HA安装配置
CHD4B1(hadoop-0.23)实现NameNode HA安装配置 Cloudera CHD4B1版本已经包含了NameNode HA,社区也把NameNode HA branch HDFS-1623 merge到trunk版本,可以实现了双NameNode的热备份,不过目前只支持手动切换,还不支持自动切换,社区中自动切换进度请看:https://issues.apache.org原创 2012-03-14 19:41:23 · 644 阅读 · 0 评论