json格式转换为简单字符串格式Mapreduce清洗实操不创建JavaBean对象

json格式转换为简单字符串格式Mapreduce清洗实操不创建JavaBean对象
对于我上一个博客通过创建JavaBean对象来将json格式转换成简单字符串格式,我想应该有更简单的办法来改变格式,于是我又写了这个博客,除了Mapper部分有所改变之外,Reducer部分和Driver部分与我的上一个博客相同。

Mapper部分

import net.sf.json.JSONObject;
import org.apache.hadoop.io.LongWritable;
import org.apache.hadoop.io.NullWritable;
import org.apache.hadoop.io.Text;
import org.apache.hadoop.mapreduce.Mapper;

import java.io.IOException;

public class WeatherDataMapNew2_1 extends Mapper<LongWritable,Text, Text, NullWritable> {
    Text k = new Text();

    @Override
    protected void map(LongWritable key, Text value, Context context) throws IOException, InterruptedException {
        String line =value.toString();
        JSONObject obj = JSONObject.fromObject(line);

        String[] words = new String[5];
        words[2] = obj.getString("city");
        words[0] = obj.getString("date");
        words[3] = obj.getString("weather");
        words[1] = obj.getString("temp");
        words[4] = obj.getString("wind");
        String stu = new String();
        for(int i = 0;i<words.length;i++){
            stu+=words[i]+",";
        }
        stu=stu.substring(0,stu.length()-1);
            k.set(stu);
            context.write(k,NullWritable.get());

    }
}

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值