sqoop 从mysql 导入数据到hbase

首先我们在mysql有一张表test.tohdfs

我们在hbase中也创建一张表,


执行导入

bin/sqoop import \
--connect jdbc:mysql://make.hadoop.com:3306/test \
--username root \
--password 123456 \
--table tohdfs  \
--hbase-table hbase_tohdfs \
--column-family info  \
--hbase-create-table \

--hbase-row-key id

当然导入成功了,对hbase的数据进行查看,可以看到数据是完成整的,



第二种 我们加上 --hbase-bulkload 参数进行导入

bin/sqoop import \
--connect jdbc:mysql://make.hadoop.com:3306/test \
--username root \
--password 123456 \
--table tohdfs  \
--hbase-table hbase_tohdfs_bulk \
--column-family info  \
--hbase-create-table \                      表不存在会自己创建
--hbase-row-key id \
--hbase-bulkload                               不用指定输出的路径,后面会解释

我们看看这个命令结束后的提示


我么可以看到这里给出了一个,output的路径,可是我们hdfs上根本不存在,这个目录,导致我不知道该怎么加载这个数据,但是我么你直接去hbase中查看表的数据



哈哈,这里面已经有数据了,说明sqoop在创建之后,启用了类似,complete-bulkload 的命令对数据进行了转移,用不着我们自己再转移一次了。


完美,以上

  • 1
    点赞
  • 20
    收藏
    觉得还不错? 一键收藏
  • 3
    评论
评论 3
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值