当我们想整合Hadoop,Hbase,Hive,zookeeper的时候,如果刚入门,可能认为这是比较简单的问题。但是当你自己真正想整合的时候,却会遇到很多的问题。
1.hadoop与hbase哪些版本兼容?
2.hadoop与hive哪些版本兼容?
3.hbase与hive哪些版本兼容?
4.hbase与zookeeper哪些版本兼容?
所以当我们真正想做整合的时候,我们需要解决上面四个问题,有些同学,忽略上面内容,直接部署,导致产生各种问题。
第一个问题,hadoop与hbase哪些版本兼容。
这里的每一个问题,当然我们需要引用官网的内容。
上面便是对照表,那么有了这个对照表,还是不行的。为什么因为你还是没有找到源头。如果随着版本更新,我们还是跟无头苍蝇一样,摸不着北。我们该如何能找到,我们该如何随着版本的更新,自己就能找到相关内容。
首先,进入下面网址
http://hbase.apache.org/book.html#arch.overview
,进入之后,我们同样需要会使用浏览器的查找功能,这样能让我们很快的定位。
浏览器的查找功能只要按照ctrl+F即可。这只是一个小技巧,还是比较实用的,然后我们输入
[Bash shell]
纯文本查看
复制代码
1
|
"S"
= supported
|
这时候你就能找到hbase与hadoop的兼容信息了。如果你还是找不到,有下面两种方式:
1.about云论坛提问,会有比较多的热心人帮助
2.此版本内容会录制视频,欢迎捐助
hadoop生态系统零基础入门及大数据实战 第一个问题算是解决,接着我们看第二个问题
2.hadoop与hive哪些版本兼容?
hadoop与hive版本对应关系
hive版本 2.0.0 支持hadoop版本
Hadoop 2.x.y
hive版本 1.2.1 支持hadoop版本
Hadoop 1.x.y, 2.x.y
hive版本 1.0.1,
1.1.1 支持hadoop版本
Hadoop 1.x.y, 2.x.y
hive版本 1.1.0 支持hadoop版本
Hadoop 1.x.y, 2.x.y
hive版本 1.0.0支持hadoop版本
Hadoop 1.x.y, 2.x.y
hive版本0.13.1支持hadoop版本
Hadoop 0.20.x, 0.23.x.y, 1.x.y, 2.x.y
hive版本0.13.0支持hadoop版本
Hadoop 0.20.x, 0.23.x.y, 1.x.y, 2.x.y
hive版本0.12.0支持hadoop版本
Hadoop 0.20.x, 0.23.x.y, 1.x.y, 2.x.y
hive版本0.11.0支持hadoop版本
Hadoop 0.20.x, 0.23.x.y, 1.x.y, 2.x.y
hive版本0.10.0支持hadoop版本
Hadoop 0.20.x, 0.23.x.y, 1.x.y, 2.x.y
上面是今年2016年更新内容.
那么我们该如何随着版本的更新,知道版本兼容?
收下我们打开下面网址:
网址:http://hive.apache.org/downloads.html
相信只要你会英文,就能看到下面内容
接着我们第三个问题
3.hbase与hive哪些版本兼容?
hive0.90与hbase0.92是兼容的
早期的hive版本与hbase0.89/0.90兼容
当然上面的版本除非很早的时候用。
hive1.x与hbase0.98.x或则更低版本是兼容的。
hive2.x与hbase1.x及比hbase1.x更高版本兼容
如果想hbase1.x与hive1.x整合,需要编译hive1.x stream
代码本身
至于如何编译,如有时间在写文章。我们重点是上面如果版本更新,该如何获取最新信息。
我们可以进入下面网址
https://cwiki.apache.org/confluence/display/Hive/HBaseIntegration
下面中可以找到
上面我们已经解决,下面我们解决第四个问题
4.hbase与zookeeper哪些版本兼容?
对于zookeeper版本一般来讲越新越好,也就是我们安装hbase的时候,可以使用新版本。
那么这个兼容性就难不倒我们了,不过在安装过程中,为了稳定最好使用大家比较常用的版本
另外官网给出hbase1.0.0使用版本 ZooKeeper
3.4.x