Datahub 入门之读取数据并消费到Hbase中

本文介绍了如何从Datahub获取数据,并通过HbaseThread线程进行处理,最终将数据存储到Hbase中,涉及AE微服务在数据迁移过程中的应用。
摘要由CSDN通过智能技术生成

第一步:

//new thread 消费datahub数据
SendData.toHbase();

第二步:

public class SendData{
    public static void toHbase() {

        String accessId = DatahubConfig.accessId;
        String accessKey = DatahubConfig.accessKey;
        String endpoint = DatahubConfig.endpoint;
        String project = DatahubConfig.project;

        String gpsTopic = DatahubConfig.gpstopic;// topic
        String  gpsToHbaseSubId = DatahubConfig.gpshbasesubid; // 获取Hbase的subid
        String shardId = DatahubConfig.gpstopicsubShard; //topic 的shardId 
        AliyunAccount account = new AliyunAccount(accessId, accessKey);//新建阿里云用户
        DatahubConfiguration conf = new DatahubConfiguration(account, endpoint); // datahub 的配置信息
        DatahubClient client = new DatahubClient(conf);// datahub 客户端
        String threadName = "xxxxx";//消费线程名
        HbaseThread run = new HbaseThread(client,shardId,project,gpsTopic,gpsToHbaseSubId);// HbaseThread implements Runnable接口
        HbaseListener listen = new HbaseListener(client,shardId,project,OriGpsTopic,gpsToHbaseSubId,threadName);
        run.addObserver(listen); //添加监听
        Thread thread = new Thread(run);
        thread.setName(threadName);
        thread.start();
    }
}

第三步: HbaseThread线程

public class HbaseThread extends Observable implements Runnable {
   

    private DatahubClient client;

    private
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值