Windows xp 环境下通过MyEclipse运行hadoop map reduce程序
1.通过MyEclipse建立一个web工程
2:将hadoop-1.1.2目录下面的jar和lib下面的jar全部copy到web工程中的lib中
web工程图:
3:修改hadoop-core-1.1.2.jar中的FileUtil.java
在hadoop-1.1.2 src中的core目录下面找到该类,将其copy到web工程的src目录中,保持包名称不改变,如图所示:
打开该类,将其中的如下部分注释掉或者删除掉:
if (!rv) {
throw new IOException("Failed to set permissions of path: " + p +
" to " +
String.format("%04o", permission.toShort()));
}
该部分位于下面方法中:
private static void checkReturnValue(boolean rv, File p,
FsPermission permission
) throws IOException
4:修改windows hosts文件,将linux hostsname和ip的映射关系写入hosts中,windows位置见图。如图所示:
编辑hosts文件,如图所示:
至此,在windows下面开发hadoop map reduce程序的环境搭建完成。
下一篇介绍在此环境下统计应用ip访问次数。