MapReudce的执行方式

服务器环境

1. 在服务器上，使用命令的方式调用，执行过程在服务器中

直接把MR程序进行打包，然后传送到服务器上
hadoop jar wordCount.jar com.lh.wordCount.RunJob

1. 在本地直接调用，执行过程在服务器上（真正企业运行环境）

1.在src目录下加入Hadoop的配置文件
2.修改Hadoop源码：NativeIO,YARNRunner
3.增加两个属性：
        config.set("mapred.jar", "C:\\Users\\DELL\\Desktop\\wc.jar");
        config.set("mapreduce.app-submission.cross-platform", "true");
4.把MR程序进行打包，然后放到本地
5.本地执行main方法

本地测试环境

1.在Hadoop/bin目录下添加winutils.exe
2.windows配置环境变量
    新建：HADOOP_HOME=D:\Study\hadoop-2.6.5
    添加：PATH=%HADOOP_HOME%\bin;%HADOOP_HOME%\sbin
3.修改Hadoop源码：NativeIO,YARNRunner
4.确保src目录下没有Hadoop的配置文件
5.增加两个属性
        config.set("fs.defaultFS", "hdfs://node001:8020");
        config.set("yarn.resourcemanager.hostname", "node001");
6.本地执行main方法