2011年11月_甲壳虫

12月 11月 09月 04月 03月 02月 01月

原创 hadoop出现文件夹无法删除，Name node is in safe mode.

今天在运行操作hadoop的时候，出现[hadoop@localhost hadoop-0.20.203.0]$ bin/hadoop dfs -rmr outputrmr: org.apache.hadoop.hdfs.server.namenode.SafeModeException: Cannot delete /user/hadoop/output. Name node is in

2011-11-25 10:57:33 6720

原创 Hadoop第一个测试实例WordCount的运行

首先确保hadoop已经正确安装、配置以及运行。拷贝WordCount.java到我们的文件夹，下载的hadoop里带有WordCount.java，路径为：hadoop-0.20.203.0/src/examples/org/apache/hadoop/examples/WordCount.java进行拷贝操作[hadoop@localhost~]$ cp hadoop-0.

2011-11-24 08:25:24 22620 3

原创 ssh localhost经过配置后，还是出现密码问题

我在进行hadoop配置的时候，需要用到ssh localhost免密码登录，在root用户下，$ ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa$ cat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keys后，ssh localhost可以免密码登录，但是在root用户下，启动hadoop有一个问题，所以启用其他的用户，

2011-11-23 10:29:57 7627 1

原创 hadoop localhost:ssh:connect to host localhost port 22:Connection refused问题

在启动的时候出现Connection refused如图解决方法，进入服务里开启cygwin sshd服务重新启动hadoop即可。

2011-11-17 15:27:53 7683 2

原创 hadoop 出现Bad connection to FS. command aborted.

在执行./hadoop fs version或者./hadoop fs -ls /命令式出现Bad connection to FS. command aborted.问题的原因是你没格式化NameNode重新格式化NameNode就行了命令为：hadoop namenode -format停止并重新启动hadoop第一次执行./

2011-11-17 14:39:16 5670 1

原创 hadoop no such file or directory问题

在使用cygwin装完hadoop后，输入命令./hadoop version出现如下错误./hadoop:line 297:c:\java\jdk1.6.0_05\bin/bin/java:No such file or directory./hadoop:line 345:c:\Java\jdk1.6.0_05\bin/bin/java:No such file or

2011-11-17 14:24:02 26400 1