关于ToolRunner.run()方法运行Hadoop程序原理分析

                        关于ToolRunner.run()方法运行Hadoop程序原理分析

文章开始把我喜欢的这句话送个大家:这个世界上还有什么比自己写的代码运行在一亿人的电脑上更酷的事情吗,如果有那就是让这个数字再扩大十倍

一、相关的类及接口解释

二.关于ToolRunner典型用法关于ToolRunner

ToolRunner与上图中的类、接口无任何的继承、实现关系,它只继承了Object,没实现任何接口。

ToolRunner可以方便的运行那些实现了Tool接口的类(调用其run(String[])方法,并通过GenericOptionsParser 可以方便的处理hadoop命令行参数。

它的典型用法即:

1、定义一个类(如上图中的MyClass),继承configured,实现Tool接口。

2、在main()方法中通过ToolRunner.run(...)方法调用上述类的run(String[]方法)

 

三.例子:

package org.apache.hadoop.util;
 
import java.io.PrintStream;
 
import org.apache.hadoop.conf.Configuration;
 

public class ToolRunner {
 
  public static int run(Configuration conf, Tool tool, String[] args) 
    throws Exception{
    if(conf == null) {
      conf = new Configuration();
    }
    GenericOptionsParser parser = new GenericOptionsParser(conf, args);
    tool.setConf(conf);
    String[] toolArgs = parser.getRemainingArgs();
    return tool.run(toolArgs);
  }
  
 
  public static int run(Tool tool, String[] args) 
    throws Exception{
    return run(tool.getConf(), tool, args);
  }
  
 
  public static void printGenericCommandUsage(PrintStream out) {
    GenericOptionsParser.printGenericCommandUsage(out);
  }
  
}

加油吧,程序员!

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值