消费kafka存放HBase

java代码

package com.zcl.demo;

import java.io.IOException;
import java.util.Arrays;
import java.util.Date;
import java.util.Properties;

import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.hbase.util.Bytes;
import org.apache.kafka.clients.consumer.ConsumerRecord;
import org.apache.kafka.clients.consumer.ConsumerRecords;
import org.apache.kafka.clients.consumer.KafkaConsumer;

import com.google.protobuf.InvalidProtocolBufferException;
import com.htsc.octopus.protocol.StateEntry;
import com.zcl.utils.HBaseUtils;

/**
 * 消费指定分区的消息
 * @author 45335
 *.
 */
public class KafkaConsumerExample {
    
    public static void main(String[] args) {
        HBaseUtils hd = new HBaseUtils();
        Properties props = new Properties();
        String[] s = new String[]{"base","diskInfo","networkInfo"};
        try {
            hd.createTable("zcl", s);
        } catch (IOException e1) {
            e1.printStackTrace();
        }
        //设置brokerServer(kafka)ip地址：要读取的服务器地址
        props.put("bootstrap.servers","192.168.xxx.xx:9092");
        //group 代表一个消费组（test）（设置consumer group name）
        props.put("group.id", "test");
      //设置自动提交偏移量(offset),由auto.commit.interval.ms控制提交频率
        props.put("enable.auto.commit", "true");
        //偏移量(offset)提交频率
        props.put("auto.commit.interval.ms", "1000");
      //设置使用最开始的offset偏移量为该group.id的最早。如果不设置，则会是latest即该topic最新一个消息的offset//如果采用latest，消费者只能得道其启动后，生产者生产的消息
        //props.put("auto.offset.reset", "earliest");
        //30秒无连接自动结束会话
        props.put("session.timeout.ms", "30000");
        //序列化kv值
        props.put("key.deserializer", "org.apache.kafka.common.serialization.StringDeserializer");
        props.put("value.deserializer", "org.apache.kafka.common.serialization.ByteArrayDeserializer");
        
        //===================================================
        @SuppressWarnings("resource")
        KafkaConsumer<String, byte[]> consumer = new KafkaConsumer<String, byte[]>(props);
        // Kafka Consumer subscribes list of topics here.Kafka消费者在这里订阅主题列表
                consumer.subscribe(Arrays.asList("test"));
                while (true) {
                    ConsumerRecords<String, byte[]> records = consumer.poll(100);
                    for (ConsumerRecord<String, byte[]> record : records) {
                        if(record.key().equals("ProcessInfo")) {
                            System.out.println("ProcessInfo序列化========================");
                            try {
                                StateEntry.ProcessInfo bus =StateEntry.ProcessInfo.parseFrom(record.value());
                                //写入HBase
                                 //创建簇数组（三个簇）
//                                String[] s = new String[]{"base","diskInfo","networkInfo"};
                                try {
                                    //创建HBase表&#