Windows xp 环境下通过MyEclipse运行hadoop map reduce程序

Windows xp 环境下通过MyEclipse运行hadoop map reduce程序

1.通过MyEclipse建立一个web工程

      

2：将hadoop-1.1.2目录下面的jar和lib下面的jar全部copy到web工程中的lib中

    web工程图：

      

 

  3：修改hadoop-core-1.1.2.jar中的FileUtil.java

      在hadoop-1.1.2 src中的core目录下面找到该类，将其copy到web工程的src目录中，保持包名称不改变，如图所示：

     

  打开该类，将其中的如下部分注释掉或者删除掉：

  

 if (!rv) {
      throw new IOException("Failed to set permissions of path: " + p + 
                            " to " + 
                            String.format("%04o", permission.toShort()));
    }

该部分位于下面方法中：

private static void checkReturnValue(boolean rv, File p, 
                                       FsPermission permission
                                       ) throws IOException 

4：修改windows hosts文件，将linux hostsname和ip的映射关系写入hosts中，windows位置见图。如图所示：

     

编辑hosts文件，如图所示：

  

至此，在windows下面开发hadoop map reduce程序的环境搭建完成。

下一篇介绍在此环境下统计应用ip访问次数。