hadoop
送人玫瑰手留余香
这个作者很懒,什么都没留下…
展开
-
一个介绍hadoop中MapReduce原理的通俗易懂的例子
例子不是原创,但是本人觉得这个例子形容得不错,分享一下(从百度百科里面看到的) 不知道你们认为怎么样? 如果想统计下过去10年计算机论文出现最多的几个单词,看看大家都在研究些什么,那收集好论文后,该怎么办呢? 方法一:我可以写一个小程序,把所有论文按顺序遍历一遍,统计每一个遇到的单词的出现次数,最后就可以知道哪几个单词最热门了。 这种方法在数据集比较小时,是非常有效的,而且实现最简原创 2013-11-22 11:22:10 · 1905 阅读 · 0 评论 -
基于Hadoop 2.2.0的高可用性集群搭建步骤(64位)
内容概要: CentSO_64bit集群搭建, hadoop2.2(64位)编译,安装,配置以及测试步骤 新版亮点: 基于yarn计算框架和高可用性DFS的第一个稳定版本。 注1:官网只提供32位release版本, 若机器为64位,需要手动编译。 注2:目前网上传的2.2版本的安装步骤几乎都有问题,没有一个版本是完全正确的。若不懂新框架内部机制,不要照抄网传的版本。 0.转载 2013-11-22 09:44:23 · 6323 阅读 · 1 评论 -
maven+hadoop2.2 项目HDFS文件读取程序
前提已经安装配置好hadoop2.2,安装请参考我另一篇文章 排版太辛苦,先弄个简易版出来 pom.xml配置如下 project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http原创 2013-11-22 10:23:57 · 6497 阅读 · 4 评论