hadoop学习笔记5之什么TaskTracker节点进程

NameNode节点:是HDFS体现下的对HDFS上数据块路由和对管辖数据块的DataNode节点进程路由的主路由器节点,负责对HDFS数据块和DataNode进程节点的寻址信息的记录与读取(功能是针对HDFS数据块DataBlock和管理HDFS数据块的DataNode进程的路由)

DataNode:对HDFS上面的文件系统上的数据块DataBlocks的管理与使用读写

 

JobTracker进程:负责将MapReduce体系下的分布式计算任务 一个Job打散成多个Task,每一个Task分配给相应的TaskTracker进程去执行,JobTracker进程调度TaskTracker进程进行分布式计算和计算结果的回收与汇总

JobTracker是MapReduce体系框架下的工作任务分配调度指挥官进程负责将计算任务分配给分布式的TaskTracker进程,JobTracker分配任务的原则是,待计算的数据data块在哪个DataNode节点进程的管辖范围上则该数据块相关的任务Task就被分配给DataNode本地对应的TaskTracker进程,做到本地数据由本地任务执行者TaskTracker进程来计算从而节省不必要的网络数据传输开销提高了计算和运行效率

 

TaskTracker: MapReduce计算框架体系下的对相关数据进行计算相关分配到的task计算运行任务进行执行的工作进程,完全听从JobTracker进程的调度与指挥,TaskTracker负责对JobTracker分配过来的Task任务进行执行

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值