大数据DataX(七):HBase导入到MySQL

本文详细介绍了如何使用DataX的HbaseReader插件,将HBase数据导入到MySQL。内容涵盖normal模式和multiVersionFixedColumn模式的案例,包括在MySQL创建表、编写DataX作业配置文件、执行任务及查看结果的完整步骤。

文章目录

HBase导入到MySQL

一、HbaseReader插件

二、使用normal模式的案例

1、在mysql中创建“person3”表

2、编写DataX job配置文件

3、执行DataX任务,将HDFS数据导入到mysql

4、查看结果

三、使用multiVersionFixedColumn模式案例

1、在mysql中创建表hbase_result

2、编写DataX job配置文件

3、执行DataX任务,将HBase数据导入到mysql

4、查看结果


HBase导入到MySQL

将HBase中的数据导入到MySQL中,这里使用到“HBaseReader”和“MySQLWriter”,前面已经介绍过“MySQLWriter”,下面介绍“HBaseReader”。

一、​​​​​​​​​​​​​​HbaseReader插件

HbaseReader 插件实现了从 Hbase中读取数据。在底层实现上,HbaseReader 通过 HBase 的 Java 客户端连接远程 HBase 服务,并通过 Scan 方式读取你指定 rowkey 范围内的数据,并将读取的数据使用 DataX 自定义的数据类型拼装为抽象的数据集,并传递给下游 Writer 处理。

评论 8
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

Lansonli

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值