- 博客(4)
- 收藏
- 关注
RSS订阅转载 复杂指针
右左法则----复杂指针解析因为C语言所有复杂的指针声明，都是由各种声明嵌套构成的。如何解读复杂指针声明呢？右左法则是一个既著名又常用的方法。不过，右左法则其实并不是C标准里面的内容，它是从C标准的声明规定中归纳出来的方法。C标准的声明规则，是用来解决如何创建声明的，而右左法则是用来解决如何辩识一个声明的，两者可以说是相反的。右左法则的英文原文是这样说的：The right－lef
2011-12-31 09:43:01
835
转载 自定义hadoop map/reduce输入文件切割InputFormat 更改输入value的分隔符
本文转载自：http://hi.baidu.com/lzpsky/blog/item/99d58738b08a68e7b311c70d.html hadoop会对原始输入文件进行文件切割，然后把每个split传入mapper程序中进行处理，FileInputFormat是所有以文件作 为数据源的InputFormat实现的基类，FileInputFormat保存作为job输入
2011-12-01 21:22:28
4544
转载 MapReduce 新旧API
我使用的hadoop的版本为0.20.2。Hadoop从0.20.0版本加入了新的MapReduce Java API，我之后的学习中没有额外说明，均使用的新的API。下面简单介绍一下新旧API的区别： （1）新的API倾向于使用抽象类，而不是接口。新的API中Mapper和Reducer是抽象类。 （2）新的API在org.apache.hadoop.mapreduce包和子包中，旧
2011-12-01 21:02:03
1577
转载 MapReduce的输入输出格式
默认的mapper是IdentityMapper，默认的reducer是IdentityReducer，它们将输入的键和值原封不动地写到输出中。默认的partitioner是HashPartitinoer，它根据每条记录的键进行哈希操作来分区。输入文件：文件是MapReduce任务的数据的初始存储地。正常情况下，输入文件一般是存在HDFS里。这些文件的格式可以是任意的；我们可以
2011-12-01 20:35:34
13928
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人