Hadoop
文章平均质量分 78
Java_Cowboy
致力于海量数据分析处理和集群应用的研发!
展开
-
Hadoop学习资料地址
<br /> <br />Hadoop学习资料<br /> <br />Hadoop学习资料<br /> <br />文章分类:Java编程<br />第一手资源 <br />hadoop官方网站 <br /> <br />hadoop.apache.org <br /> <br />最权威的官方资源之一 <br /> <br />dev.yahoo.hadoop <br /> <br />hadoop.cn(偶尔有一些有用信息) <br /> <br />www.hadoop.org.cn <br />原创 2010-11-06 15:48:00 · 1950 阅读 · 1 评论 -
Hadoop是怎么分块的
hadoop的分块有两部分,其中第一部分更为人熟知一点。 第一部分就是数据的划分(即把File划分成Block),这个是物理上真真实实的进行了划分,数据文件上传到HDFS里的时候,需要划分成一块一块,每块的大小由hadoop-default.xml里配置选项进行划分。 dfs.block.size 67108864 The default block size转载 2012-03-14 09:27:34 · 569 阅读 · 0 评论 -
hadoop MapReduce Job失效模型
http://news.newhua.com/news1/program_net/2009/99/099914374148D4FHKAFAD4HB77CH4H6IJCB963K89A26AK018J607I6_2.html?lt=commonhadoop设计的初衷就是容错.计算任务(MapReduce task)能够在节点宕机或其它随机错误下自行恢复. 但是hadoop并不完转载 2012-03-20 10:04:05 · 815 阅读 · 0 评论