Hadoop的namenode datanode无法启动

  namenode没有启动

最近遇到了一个问题，执行start-all.sh的时候发现JPS一下namenode没有启动

        每次开机都得重新格式化一下namenode才可以

        其实问题就出在tmp文件，默认的tmp文件每次重新开机会被清空，与此同时namenode的格式化信息就会丢失

        于是我们得重新配置一个tmp文件目录

        首先在home目录下建立一个hadoop_tmp目录

                sudo mkdir ~/hadoop_tmp

        然后修改hadoop/conf目录里面的core-site.xml文件，加入以下节点：

                <property>

                        <name>hadoop.tmp.dir</name>

                <value>/home/chjzh/hadoop_tmp</value>

                        <description>A base for other temporary directories.</description>

                </property>

        注意：我的用户是chjzh所以目录是/home/chjzh/hadoop_tmp

                

        OK了，重新格式化Namenode

                hadoop namenode -format

        然后启动hadoop

                start-all.sh

        执行下JPS命令就可以看到NameNode了

Hadoop的datanode无法启动

hdfs-site中配置的dfs.data.dir为/usr/local/hadoop/hdfs/data

用bin/hadoop start-all.sh启动Hdoop，用jps命令查看守护进程时，没有DataNode。

访问http://localhost:50070，点击页面中的Namenode logs链接，在logs页面点击hadoop-hadoop-datanode-ubuntu.log 链接，

发现在日志中有此提示：Invalid directory in dfs.data.dir: Incorrect permission for /usr/local/hadoop/hdfs/data, expected: rwxr-xr-x, while actual: rwxr-xrwx 。原因是data文件夹权限问题，执行：chmod g-w /usr/local/hadoop/hdfs/data，修改文件夹权限后，再次启动Hadoop，问题解决。