./hadoop dfs -cat output/*
./stop-all.sh
./start-all.sh
./start-dfs.sh
hadoop namenode -format
ssh-keygen -t dsa
#cat .ssh/id_rsa.pub >> .ssh/authorized_keys //登录本地不需密码;
#scp .ssh/id_dsa.pub 10.18.11.213:~/ //这两行是设置10.18.11.213机器的;
#ssh 10.18.11.213 'cat id_dsa.pub >> .ssh/authorized_keys'
#scp .ssh/id_dsa.pub 10.18.12.113:~/ //这两行是设置10.18.12.113机器的;
#ssh 10.18.12.113 'cat id_rsa.pub >> .ssh/authorized_keys'
hadoop上的例子1:wordcount
问题:put: org.apache.hadoop.hdfs.server.namenode.SafeModeException: Cannot create directory /user/hadoop/in. Name node is in safe mode.
说明Hadoop的NameNode处在安全模式下。
那什么是Hadoop的安全模式呢?
在分布式文件系统启动的时候,开始的时候会有安全模式,当分布式文件系统处于安全模式的情况下,文件系统中的内容不允许修改也不允许删除,直到安全模式结束。安全模式主要是为了系统启动的时候检查各个DataNode上数据块的有效性,同时根据策略必要的复制或者删除部分数据块。运行期通过命令也可以进入安全模式。在实践过程中,系统启动的时候去修改和删除文件也会有安全模式不允许修改的出错提示,只需要等待一会儿即可。
现在就清楚了,那现在要解决这个问题,我想让Hadoop不处在safe mode 模式下,能不能不用等,直接解决呢?
答案是可以的,只要在Hadoop的目录下输入:
hadoop dfsadmin -safemode leave
也就是关闭Hadoop的安全模式,这样问题就解决了。
hadoop dfsadmin -safemode leave
rm -rf /home/hadoop/hadoop-0.20/hadoop_tmp/*
ssh 10.18.11.213 'rm -rf /home/hadoop/hadoop-0.20/hadoop_tmp/*'
ssh 10.18.11.214 'rm -rf /home/hadoop/hadoop-0.20/hadoop_tmp/*'
setup 图形界面设置
./stop-all.sh
./start-all.sh
./start-dfs.sh
hadoop namenode -format
ssh-keygen -t dsa
#cat .ssh/id_rsa.pub >> .ssh/authorized_keys //登录本地不需密码;
#scp .ssh/id_dsa.pub 10.18.11.213:~/ //这两行是设置10.18.11.213机器的;
#ssh 10.18.11.213 'cat id_dsa.pub >> .ssh/authorized_keys'
#scp .ssh/id_dsa.pub 10.18.12.113:~/ //这两行是设置10.18.12.113机器的;
#ssh 10.18.12.113 'cat id_rsa.pub >> .ssh/authorized_keys'
hadoop上的例子1:wordcount
问题:put: org.apache.hadoop.hdfs.server.namenode.SafeModeException: Cannot create directory /user/hadoop/in. Name node is in safe mode.
说明Hadoop的NameNode处在安全模式下。
那什么是Hadoop的安全模式呢?
在分布式文件系统启动的时候,开始的时候会有安全模式,当分布式文件系统处于安全模式的情况下,文件系统中的内容不允许修改也不允许删除,直到安全模式结束。安全模式主要是为了系统启动的时候检查各个DataNode上数据块的有效性,同时根据策略必要的复制或者删除部分数据块。运行期通过命令也可以进入安全模式。在实践过程中,系统启动的时候去修改和删除文件也会有安全模式不允许修改的出错提示,只需要等待一会儿即可。
现在就清楚了,那现在要解决这个问题,我想让Hadoop不处在safe mode 模式下,能不能不用等,直接解决呢?
答案是可以的,只要在Hadoop的目录下输入:
hadoop dfsadmin -safemode leave
也就是关闭Hadoop的安全模式,这样问题就解决了。
hadoop dfsadmin -safemode leave
rm -rf /home/hadoop/hadoop-0.20/hadoop_tmp/*
ssh 10.18.11.213 'rm -rf /home/hadoop/hadoop-0.20/hadoop_tmp/*'
ssh 10.18.11.214 'rm -rf /home/hadoop/hadoop-0.20/hadoop_tmp/*'
setup 图形界面设置