- 博客(2)
- 资源 (6)
- 收藏
- 关注
原创 Hadoop学习笔记二(新旧版本API的区别)
1.新的API是在org.apache.hadoop.mapreduce中,旧的API是在org.apache.hadoop.mapred中。注:新的API不兼容旧的API. 2.在新的API中,Mapper与Reducer已经不是接口而是抽象类。 3.新的API中更广泛地使用了Context对象,并使用MapContext进行MapReduce间的通信,MapContext同时充当Outpu
2015-01-13 11:11:44 813
原创 Hadoop学习笔记一(入门篇)
1.大数据处理系统的三大关键要素------“存储”,“计算”和“容错”。 2.MapReduce:重写了Google的索引文件系统。 3.在Hadoop中,用于执行MapReduce任务的机器有两个角色:一个是JobTracker,另一个是TaskTracker. 4.在Hadoop中,每个MapReduce任务都被初始化为一个Job,分为Map阶段和Reduce阶段。 5.InputF
2015-01-13 11:04:26 738
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人