MapReduce 程序本地调试 / Hadoop 操作本地文件系统

MapReduce 程序本地调试 / Hadoop 操作本地文件系统

将 hadoop 主目录下的 conf 下的配置文件全部置空.

此时运行 hadoop 命令将使用本地文件系统, 可以在本地运行 mapreduce 程序, 操作磁盘上的文件.

例如：

kentHadoopUnit jar NewsProcessMR.jar view.txt out view 

这将在本地执行 mapreduce 程序, 这可以方便本地做调试.

也可以在本地使用 streaming 方式运行作业。