sqoop mysql to hbase


mysql 建表
create table. student(id int(11),name varchar(255));
insert into student values(1,'yang');

hbase 建表
create 'hbase_student','info'
查看hbase中有哪些表 
list

hbase表不存在会自动创建
--hbase-create-table \

 

 

 

 

无批次
sqoop import \
--connect jdbc:mysql://node1:3306/test \
--username root \
--password root \
--table student  \
--hbase-table hbase_student \
--column-family info  \
--hbase-create-table \
--hbase-row-key id

有批次 会先写到hdfs的一个临时目录,在自己进行转移
sqoop import \
--connect jdbc:mysql://node1:3306/test \
--username root \
--password root \
--table student  \
--hbase-table hbase_student_bulk \
--column-family info  \
--hbase-create-table \                      
--hbase-row-key id \
--hbase-bulkload 


增量
sqoop import \
--connect jdbc:mysql://node1:port/test \

--username username \
--password password \
--table tablename \
--hbase-table namespace:tablename \
--column-family columnfamily \
--hbase-create-table \
--incremental append \
--check-column 'id' \
--last-value 0

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值