Spark/ Hadoop/Hbase/Hive问题解决整理

本文记录Spark、Hadoop、Hbase在安装和使用过程中遇到的bug及有效的解决方法。
按照目录找相应的报错信息哦~

---

小木屋大数据

mySQL 安装
https://www.runoob.com/mysql/mysql-install.html
JDBC安装
https://www.jb51.net/article/104438.htm
JDBC jar包
https://mvnrepository.com/artifact/mysql/mysql-connector-java

Hive安装
http://dblab.xmu.edu.cn/blog/install-hive/

---

Hbase–报错解决方法

Can’t get master address from ZooKeeper; znode data == null

场景: hbase shell 建表时
解决方法：
建议通过{HBASE_HOME}目录（/usr/local/hbase）下的logs子目录中的日志文件查看具体错误原因。
比如，我在hbase-root-master-Master.log文件中，看到报错信息是

java.net.ConnectException: Call From Master/172.26.*.* to localhost:9000 failed on connection exception

所以，可能是hbase配置的问题，查看hbase安装位置中的conf/hbase-site.xml，修改value的值，再次启动hbase即可。

<property>
          <name>hbase.rootdir</name>
          <value>hdfs://master:9000/hbase</value>
</property>

---

org.apache.hadoop.hbase.PleaseHoldException: Master is initializing

解决方法：

1. 拷贝hdfs下的core-site.xml和hdfs-site.xml到hbase的conf文件夹下
2. 检查hbase的配置，hbase/conf/hbase-env.sh
   注意 export HB