ArrayWritable实例

本文介绍了ArrayWritable在Hadoop中的应用,它类似Java的ArrayList,允许在未知数据量时动态添加元素。在MapReduce中,ArrayWritable在Mapper和Reducer中起到了关键作用,用于处理和聚合数据。
摘要由CSDN通过智能技术生成

概述

  • 作用
  • Array类构造示例
  • Array类使用示例
作用

  • 类似于java的动态数据ArrayList,可以在不知有多少数据量的情况下,动态向里面加数据

Array类构造示例

  • 数组里添加很多歌Text,类似于ArrayList<string>
  • public class CookieArray extends ArrayWritable{
    		public CookieArray(){
    			super(Text.class);
    		}
    		public String toString() {
    			String[] abc = toStrings();
    			StringBuffer sBuffer = new StringBuffer();
    			for (String string : abc) {
    				sBuffer.append(string + ",");
    			}
    			if (sBuffer.length()==0) {
    				return "";
    			}
    			sBuffer.deleteCharAt(sBuffer.lastIndexOf(","));
    			return sBuffer.toString();
    		}
    }

Array类构造示例
  • Map端用其读取数据对象
  • public class logMapper extends Mapper<Text, CookieArray, xxx, yyy> {
    		public void map(T
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值