- 博客(2)
- 收藏
- 关注
原创 mapreduce
关于map: map的个数取决于文件的切割之后的份数,hdfs中的block默认是64m 切割只能对二进制文件和非文件可行,压缩文件不可行 切割block的size计算: splitSize= max[minSize, min(goalSize, blockSize)] minSize= ${mapred.min.split.size} (这个就...
2012-06-29 15:41:35 77
hadoop图解
[size=medium]公司云梯的图解: gateway机器是跳板机,提交job到云梯的,在gateway机器上只要配置hadoop-site.xml即可,配置文件中主要是指定jobtracker的地址和hdfs的地址。 [img]http://dl.iteye.com/upload/attachment/0070/1023/2e38e255-16b1-3224-ad12-c2d6ebe...
2012-06-29 13:08:25 105
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人