JobTracker

问:在eclipse中的写的代码如何提交作业到JobTracker中的哪?
答:(1)在eclipse中调用的job.waitForCompletion(true)实际上执行如下方法
        connect();
        info = jobClient.submitJobInternal(conf);
    (2)在connect()方法中,实际上创建了一个JobClient对象。
       在调用该对象的构造方法时,获得了JobTracker的客户端代理对象JobSubmissionProtocol。
       JobSubmissionProtocol的实现类是JobTracker。
    (3)在jobClient.submitJobInternal(conf)方法中,调用了
        JobSubmissionProtocol.submitJob(...),
        即执行的是JobTracker.submitJob(...)。
1.Hadoop的数据类型要求必须实现Writable接口。
2.java基本类型与Hadoop常见基本类型的对照
    Long    LongWritable
    Integer    IntWritable
    Boolean    BooleanWritable
    String    Text
    问:java类型如何转化为hadoop基本类型?
    答:调用hadoop类型的构造方法,或者调用set()方法。
        new LongWritable(123L);
    问:hadoop基本类型如何转化为java类型?
    答:对于Text,需要调用toString()方法,其他类型调用get()方法。
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值