IDEA 远程运行 MapperReduce

最新推荐文章于 2024-07-08 17:48:33 发布

_阿坤

最新推荐文章于 2024-07-08 17:48:33 发布

阅读量1.2k

点赞数

分类专栏： Hadoop 文章标签： idea hdfs 远程运行 Mapper Reduce

本文链接：https://blog.csdn.net/uq_jin/article/details/52263387

版权

Hadoop 专栏收录该内容

7 篇文章 0 订阅

订阅专栏

其它配置请参考：http://blog.csdn.net/uq_jin/article/details/52235121

将HDFS的四个配置文件拷贝到resources目录下

这里写图片描述

修改Configure的初始化代码

Configuration config = new Configuration();

//打包到服务器执行
config.set("mapred.jar", "D:\\workspaces\\idea_j2ee\\All-My-Practice\\hadoop\\mapreducer\\target\\mapreducer-1.0-SNAPSHOT.jar");
//解决Stack trace: ExitCodeException exitCode=1: /bin/bash: line 0: fg: no job control
//https://issues.apache.org/jira/browse/MAPREDUCE-5655
config.set("mapreduce.app-submission.cross-platform", "true");

然后就可以了