cygwin配置hadoop问题笔记

1、配置完成后，执行wordcount实例报错，日志如下

java.io.FileNotFoundException: File D:/tmp/hadoop-SYSTEM/mapred/local/taskTracker/jobcache/job_201207051857_0001/attempt_201207051857_0001_m_000003_2/work/tmp does not exist.
at org.apache.hadoop.fs.RawLocalFileSystem.getFileStatus(RawLocalFileSystem.java:361)
at org.apache.hadoop.fs.FilterFileSystem.getFileStatus(FilterFileSystem.java:245)
at org.apache.hadoop.mapred.TaskRunner.setupWorkDir(TaskRunner.java:519)
at org.apache.hadoop.mapred.Child.main(Child.java:155)

解决方法：

将配置文件中路径改为绝对路径

<property>
<name>mapred.child.tmp</name>
<value>D:\tmp</value> 
</property>

2、

安装hadoop-0.20.203.0rc1有bug，换0.20.0后由于之前版本tmp数据没删干净

启动报错，datanode为0，导致namenode和mapred都有错误日志

解决方法：

删除D:/tmp/hadoop-SYSTEM/dfs/data   hadoop-SYSTEM在cygwin中看不到，在D盘根目录的tmp中可看到