Hadoop
文章平均质量分 72
iPolaris
这个作者很懒,什么都没留下…
展开
-
搭建单机HBASE
参考HBASE的官方文档,搭建单机Hbase 官方参考文档地址:http://hbase.apache.org/book/quickstart.html 1.下载hbase:http://www.apache.org/dyn/closer.cgi/hbase/ 2.解压下载的文件 $ tar xfz hbase-0.95-SNAPSHOT.tar.gz(下载到的文件名)$ cd h原创 2013-02-01 12:11:03 · 2264 阅读 · 0 评论 -
Hadoop中Combiner的使用
在MapReduce中,当map生成的数据过大时,带宽就成了瓶颈,怎样精简压缩传给Reduce的数据,有不影响最终的结果呢。有一种方法就是使用Combiner,Combiner号称本地的Reduce,Reduce最终的输入,是Combiner的输出。下面以《Hadoop in action》中的专利数据为例。我们打算统计每个国家的专利数目。代码如下(使用Combiner的代码注释掉): pack原创 2013-03-26 21:15:40 · 24989 阅读 · 9 评论 -
搭建单机HBASE
的文件 $ tar xfz hbase-0.95-SNAPSHOT.tar.gz(下载到的文件名) $ cd hbase-0.95-SNAPSHOT 3.进入解压的文件夹,修改conf/hbase-site.xml <?xml version=”1.0″?> <?xml-stylesheet type=”text/xsl” href=”configuration.xsl”?> <configuration&a原创 2012-08-26 14:41:34 · 106 阅读 · 0 评论