- 博客(5)
- 收藏
- 关注
原创 hive0.13与hbase 0.98整合
1、首先安装hive,远程mysql tar zxf apache-hive-0.13.1-bin.tar.gz -C /home/hadoop 默认没有mapred-site.xml文件,vi hive-site.xml javax.jdo.option.ConnectionURL jdbc...
2014-08-10 15:20:21 119
原创 hadoop 2.2 +hbase 0.98 利用自还zookeeper 实现单机伪分布集成
HBase是Google Bigtable的开源实现,它利用Hadoop HDFS作为其文件存储系统,利用Hadoop MapReduce来处理HBase中的海量数据,利用Zookeeper作为协同服务。 HBase是一个分布式的、面向列的开源数据库,源于google的一篇论文《bigtable:一个结构化数据的分布式存储系统》。HBase是Google Bigtable的开源实现,它利...
2014-08-01 23:14:44 184
原创 hadoop wordCount 第二步迈出去了 ^_^
开始不理解 hadoop fs -put input1.txt in 所以在/data 下新建了 in 文件夹,结果运行测试程序都不对。 hadoop 是个文件系统,它有自己的管理方式和存储方式.你在本地文件系统是找不到这个相同的目录的如果你能看见,那就变成 linux文件系统了,还能叫hadoop文件系统吗 [hadoop@localhost data]$ touct input1...
2014-07-27 17:38:02 107
原创 hadoop 学习日记mark hadoop编译失败
今天在centOS 6.5成功编译hadoop 2.2.0 ,以前编译未通过,环境也是centOS 6.5 但是安装了adoop 2.3.0,因为HADOOP ECLIPSE PLUGIN 2.2 无法访问虚拟机HDFS文件系统 ,所以新装了一个CentOS虚拟机,重新编译hadoop2.2。 总结以前编译不成功的原因: 2. 安装下面的软件 $ yum inst...
2014-07-27 16:09:20 324
原创 Hadoop发行版的比较与选择
Hadoop的发行版除了社区的Apache Hadoop外,Cloudera ,Hortonworks,MapR,EMC,IBM,Intel,华为等都提供了自己的商业版本。商业版主要是提供了专业的技术支持,这对一些大型企业尤其重要。每个发行版都有自己的一些特点,本文就各个发行版做简单介绍。 2008 年成立的Cloudera 是最早将Hadoop 商用的公司,为合作伙伴提供 Hadoo...
2014-07-19 22:20:35 221
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人