【Hadoop】HBase上安装使用Phoenix来用sql语句更新操作数据,安装的过程各种坑和经验

原创文章,转载请标注来自http://blog.csdn.net/lsttoy/article/details/53607270
网络上千篇一律都是简化过的安装,导致安装不上。因此自己写了个教程。以供参考。

毕竟可以使用类似sql的标准语句来操作HBase想来还是满爽的事情。不过只能是shell。
首先,下载安装phoenix。
我们先到apache来安装
在apache找到目前对应的phoenix。由于我们的HBase版本是1.2.4,所以选择了4.9.0的版本

http://mirrors.cnnic.cn/apache/phoenix/apache-phoenix-4.9.0-HBase-1.2/bin/apache-phoenix-4.9.0-HBase-1.2-bin.tar.gz

然后拷贝出对应的文件,再重启hbase。

cd apache-phoenix-4.9.0-HBase-1.2-bin/
cp phoenix-*.jar /home/hbase/lib
cd ..
mv apache-phoenix-4.9.0-HBase-1.2-bin phoenix
cd hbase/bin
./stop-hbase.sh
./start-hbase.sh

最后,一定要记得把hbase的site文件hbase-site.xml拷贝到/home/phoenix-4.9.0/bin文件中。(重要)

最后进入phoenix文件夹的bin目录,链接HBase

./sqlline.py [zookeeperIP]

如果出现报错

Error: java.lang.RuntimeException: java.lang.NullPointerException (state=,code=0)

表示没有链接上。
可以在phoenix命令行中输入!quit进行退出操作。


如果出现连接不上,或者抛出空指针

Caused by: java.lang.RuntimeException: java.lang.NullPointerException
16/12/13 09:46:32 WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable
Error: java.lang.RuntimeException: java.lang.NullPointerException (state=,code=0)
java.sql.SQLException: java.lang.RuntimeException: java.lang.NullPointerException

解决方案暂定为可能是版本不支持,退回一个版本4.8.2试试。
另外,在开启py文件之前,记得授权。


无效,看来可能是hadoop某些文件配置出问题。
因此需要修改hadoop-env.sh

# Extra Java runtime options.  Empty by default.
#default export HADOOP_OPTS="$HADOOP_OPTS -Djava.net.preferIPv4Stack=true"
#export HADOOP_COMMON_LIB_NATIVE_DIR=${HADOOP_HOME}/lib/native
export HADOOP_OPTS="-Djava.library.path=${HADOOP_HOME}/lib/native/"

改完之后让其生效,source一下,然后通过hadoop的check一下

[root@master sbin]# hadoop checknative
16/12/13 10:56:57 WARN bzip2.Bzip2Factory: Failed to load/initialize native-bzip2 library system-native, will use pure-Java version
16/12/13 10:56:57 INFO zlib.ZlibFactory: Successfully loaded & initialized native-zlib library
Native library checking:
hadoop:  true /home/hadoop/hadoop-2.7.3/lib/native/libhadoop.so.1.0.0
zlib:    true /lib64/libz.so.1
snappy:  false 
lz4:     true revision:99
bzip2:   false 
openssl: false Cannot load libcrypto.so (libcrypto.so: cannot open shared object file: No such file or directory)!

可以看到,成功修复!

然后通过phoenix进去看看还会不会报错。


如果最后还是显示连接不上,好好看看是否有将hbase-site.xml拷贝到/home/phoenix-4.9.0/bin中。
不然永远连接不上hbase。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

乐扣老师lekkoliu

你的鼓励是我最大的科研动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值