第四章 YARN与MapReduce
-
MapReduce程序只能对key排序 T
-
MapReduce中,OutputFormat主要用于描述输出数据的格式,采用NullWritable可以省略输出的key或value。 T
-
YARN中,任务进度监控是向哪个组件汇报的? ApplicationMaster
-
MapReduce的Shuffle过程中哪个操作是最后做的? 合并
-
MapReduce编程模型中以下组件哪个是最后执行的? Reducer
-
在MapReduce中,哪个组件如果用户不指定,则不会默认存有的? Combiner
-
以下描述不正确的是? TextInputFormat的key是指该记录在文件中的行号
-
下列分区方式哪个不是采用的Hash方式分区 TotalOrderPartitioner
-
MapReduce采用“分而治之”的思想,把对大规模数据集的操作,分发给一个主节点管理下的各个子节点共同完成,此节点计算并输出的过程称为 map任务,然后整合各个子节点的中间结果,得到最终的计算结果,此过程称为 reduce任务。简而言之,MapReduce就是“ 分而治之,汇总结果 ”
-
开发MapReduce程序,自定义的类型如果要实现序列化,需要实现接口Writable。
-
请列出YARN三种调度器,并简要说明其工作方法
FIFO Schedul