导入csv到hbase

准备工作

先将我们需要导入hbase的那个csv传到hdfs文件系统上:

bin/hdfs dfs -mkdir /user/mustafa/hbase/input
bin/hdfs dfs -put /home/mustafa/Desktop/groups.csv /user/mustafa/hbase/input

在hbase中创建一张需要导入数据到其中的表

export HBASE_HOME=/data/home/software/hbase-1.2.0-cdh5.16.2

# 进入hbase shell中执行
$HBASE_HOME/bin/hbase shell
create_namespace 'jiazu'
create 'jiazu:groups', {NAME => 'info', VERSIONS => 1}

开始执行

核心是要执行 `bin/yarn jar $HBASE_HOME/lib/hbase-server-1.2.0-cdh5.16.2.jar importtsv` 这个命令,但需要把hbase的jar包导入到HADOOP_CLASSPATH环境变量中

export HADOOP_CLASSPATH=$HADOOP_CLASSPATH:`$HBASE_HOME/bin/hbase mapredcp`

开始导入,在yarn上执行jar包

bin/yarn jar $HBASE_HOME/lib/hbase-server-1.2.0-cdh5.16.2.jar importtsv \
-Dimporttsv.columns=HBASE_ROW_KEY,info:name \
-Dimporttsv.separator=, \
jiazu:groups /user/mustafa/hbase/input/groups.csv

查看结果

scan 'jiazu:groups', {LIMIT => 2}

 

  • 0
    点赞
  • 7
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

fanghailiang2016

扔个包子砸我一下吧~

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值