hadoop课程所遇问题

一、第一次遇到启动hadoop之后，jps查看，显示NameNode未启动
解决方案：
1.停止hadoop所有进程，stop-all.sh
2.进入hadoop安装目录下，删除hadoopdata文件夹中的所有文件内容，rm - rf ./hadoopdata/
3.格式化NameNode，hdfs namenode -format
4.重新启动hadoop，start-all.sh

二、启动hadoop之后，jps查看，显示NameNode未启动，此问题持续一段时间，每次都要格式化NameNode才行
解决方案：
1.停止hadoop进程，stop-all.sh
2.重新建立一个tmp文件目录，sudo mkdir ~/hadoop_tmp
3.修改hadoop/conf目录里面的core-site.xml文件，加入以下内容，

4.重新格式化NameNode，hdfs namenode -format
5.再次启动hadoop，start-all.sh

三、ssh免密登陆，启动hadoop的时候显示要求输入密码
解决方案：
1.进入.ssh目录下查看公钥私钥文件，cd ~/.ssh/
2.发现没有公钥私钥文件后，命令执行生成秘钥（hadoop01和hadoop02和hadoop03都要做一遍这个），ssh-keygen -t
3.将生成的文件写入hadoop01服务器，ssh-copy-id -i hadoop02,ssh-copy-id -i hadoop03
4.登录hadoop02，hadoop03，成功

四、hadoop搭建的时候，jdk配置出错，source /etc/profile/不成功
解决方案：
1.进入配置文件，删除等号附近的空格

五、启动hadoop时，报错JAVA_HOME is not set
解决方案：
1.设置hadoop-env.sh文件，删除export前的“#”

六、关闭hbase时，报错显示没有那个文件或目录
解决方案：
1.在hbase-env.sh中修改pid文件的存放路径，加入以下内容，export HBASE_PID_DIR=/home/hadoop/modules/hbase/pids

七、向hdfs提交文件时，显示没有那个文件或目录

解决方案：
1.修改命令为hadoop fs -put /home/hadoop/xsaxsa.txt /input

八、查看hbase版本时报错，显示/usr/local/jdk/bin/java: 没有那个文件或目录
解决方案：
1.因为设置了两个路径，所以删除下面的expert JAVA_HOME=/usr/local/jdk

九、hbase中查看jps无法出现HMaster和HQuorumPeer
解决方案：
1.在hbase-site.xml中配置hbase.zookeeper.quorum,加入以下内容

十、使用JAVA api操作文件的上传、查看时，报错没有那个文件或目录
解决方案：
1.修改代码如下，从原先的字节流转变为字符流，用pass创建一个路径，再用file system对应类的create

十一、运行zookeeper时报错
解决方案：

1.修改数据存储文件中的路径，zookeeper-3.4.10修改为zookeeper