Hadoop: LongWritable cannot be cast to org.apache.hadoop.io.IntWritable

最新推荐文章于 2022-09-02 16:55:08 发布

吐槽达达仔

最新推荐文章于 2022-09-02 16:55:08 发布

阅读量4k

点赞数 1

分类专栏： Hadoop 文章标签： hadoop

本文链接：https://blog.csdn.net/dacoolbaby/article/details/84514227

版权

Hadoop 专栏收录该内容

18 篇文章 0 订阅

订阅专栏

写MR Job的时候遇到一个坑爹的异常：

LongWritable cannot be cast to org.apache.hadoop.io.IntWritable

当写Map的时候，key的默认输入就是LongWritable。

因为LongWritable指代Block中的数据偏移量。

所以把它强行转换成Text当然就Error了。。

public static class TempMapper extends Mapper<LongWritable, Text, IntWritable, FloatWritable>{

  @Override
  protected void map(LongWritable key, Text value, Context context)
                throws IOException, InterruptedException {
       //code for getting date and temperature
       String temp = columns.get(3);
       context.write(new IntWritable(year), new FloatWritable(Float.valueOf(temp)));
  }
}

坑啊。。