Flume SimpleAsyncHbaseEventSerializer 类解析

最新推荐文章于 2022-11-14 07:00:00 发布

zhang-hui

最新推荐文章于 2022-11-14 07:00:00 发布

阅读量2.4k

点赞数

分类专栏： others 大数据文章标签： flume source sink

本文链接：https://blog.csdn.net/zhang_hui_cs/article/details/38370795

版权

others 同时被 2 个专栏收录

7 篇文章 0 订阅

订阅专栏

大数据

5 篇文章 0 订阅

订阅专栏

基于上一篇的SimpleHbaseEventSerializer 类解析，接下来分析SimpleAsyncHbaseEventSerializer类，它和SimpleHbaseEventSerializer的主要区别在于getActions函数。

   public List<PutRequest> getActions() {
    List<PutRequest> actions = new ArrayList<PutRequest>();
    if(payloadColumn != null){
      byte[] rowKey;
      try {
        switch (keyType) {
          case TS:
            rowKey = SimpleRowKeyGenerator.getTimestampKey(rowPrefix);
            break;
          case TSNANO:
            rowKey = SimpleRowKeyGenerator.getNanoTimestampKey(rowPrefix);
            break;
          case RANDOM:
            rowKey = SimpleRowKeyGenerator.getRandomKey(rowPrefix);
            break;
          default:
            rowKey = SimpleRowKeyGenerator.getUUIDKey(rowPrefix);
            break;
        }

        // table是hbase中的表名
        // rowkey是hbase中的rowkey
        // cf是hbase中的columnFamily
        // payloadColum是hbase中的column
        // payload是hbase中的value
        PutRequest putRequest =  new PutRequest(table, rowKey, cf,
            payloadColumn, payload);
        actions.add(putRequest);
      } catch (Exception e){
        throw new FlumeException("Could not get row key!", e);
      }
    }
    return actions;
  }

与 SimpleHbaseEventSerializer的getActions的不同，不是产生put实例，而是生成PutRequest实例。