使用Sqoop导Mysql数据到Hbase报错

在尝试使用Sqoop1.4.7从MySQL导入数据到Hbase时遇到错误,原因是该版本的Sqoop不支持HBase2.1.1以上的版本自动创建表。解决方法包括预先在Hbase中手动建表和调整导入脚本参数。
摘要由CSDN通过智能技术生成

报错日志

20/04/14 16:40:45 WARN mapreduce.HBaseImportJob: Could not find HBase table hbase_company
20/04/14 16:40:45 WARN mapreduce.HBaseImportJob: This job may fail. Either explicitly create the table,
20/04/14 16:40:45 WARN mapreduce.HBaseImportJob: or re-run with --hbase-create-table.
20/04/14 16:40:45 INFO zookeeper.ZooKeeper: Session: 0x36db06bc9c32fb9 closed
20/04/14 16:40:45 INFO zookeeper.ClientCnxn: EventThread shut down

失败原因

  • 使用sqoop导mysql数据到HDFS,不用在hive里面建表,在跑mr任务时候自动创建hive表
  • 在用sqoop导mysql数据到HDFS,没有在Hbase建表
  • 查询官方文档:sqoop1.4.7只支持HBase1.0.1之前的版本的自动创建HBase表的功能

版本信息

  • sqoop 版本1.4.7
  • Hbase 版本2.1.1

解决方法

1、在hbase里面建表

create 'hbase_company',
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值