MapReduce —— 驱动类 Driver

最新推荐文章于 2024-08-10 16:30:06 发布

Nurbiya_K

最新推荐文章于 2024-08-10 16:30:06 发布

阅读量1.8k

点赞数 2

分类专栏： MapReduce 文章标签： mapreduce

本文链接：https://blog.csdn.net/Nurbiya_K/article/details/103727460

版权

MapReduce 专栏收录该内容

7 篇文章 0 订阅

订阅专栏

驱动类主要用于关联Mapper 和 Reducer 以及提交整个程序。

具体代码如下：

//驱动类
public class FlowSumDriver {
 public static void main(String[] args){
  
  Configuration conf = new Configuration() ;
  // 1. 获取job对象
  Job job = Job.getInstance(conf);
  // 2. 设置Jar的路径
  job.setJarByClass(FlowSumDriver);  
  // 3. 关联 mapper 和 reducer 
  job.setMapperClass（FlowCountMapper.class）;
  job.setReducerClass（FlowCountReducer.class）;
  // 4. 设置 mapper 输出的key 和 value 类型
  job.setMapOutputKeyClass(Text.class);
  job.setMapOutputValueClass(FlowBean.class);
  // 5. 设置最终输出的key 和 value
  job.setOutputKeyClass(Text.class);
  job.setOutputValueClass(FlowBean.class);
  // 6. 设置输入输出路径
  FileInputFormat.setInputPaths(job,new Path("e:\Input"));
  FileOutputFormat.setOutputPath(job,new Path("e:\output"))
  // 7. 提交job
  boolean  result = job.waitForCompletion(true);
  System.exit(result?0:1);
  //如果result值为true 则为0，否则为1；
  //0时正常退出系统，非0代表异常退出；
  }
 }