FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask错误的解决办法(图文详解)

hbase迁移数据到hive中

hive创建表关联hbase表时报错

CREATE EXTERNAL TABLE test01
(key string, 
name string,
age string,
sex string) 
STORED BY 'org.apache.hadoop.hive.hbase.HBaseStorageHandler' 
WITH SERDEPROPERTIES ("hbase.columns.mapping" = ":key,info:name,info:age,info:sex")
TBLPROPERTIES ("hbase.table.name" = "test01", "hbase.mapred.output.outputtable" = "test01");   

问题详情:

异常一:(没注意截图了)

FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. org/apache/hadoop/hbase/mapreduce/TableInputFormatBase

异常二:

FAILED: Execution Error, return code 1 from MetaException(message:MetaException(message:java.io.IOException:java.lang.reflect.InvocationTargetException

(注:bin/hive -hiveconf hive.root.logger=DEBUG,console 进行debug)

解决方法:

1. 将hbase的以下jar导入到hive的lib目录

         hbase-client-0.98.1-cdh5.1.0.jar

        hbase-hadoop-compat-0.98.1-cdh5.1.0.jar

        hbase-protocol-0.98.1-cdh5.1.0.jar

        hbase-server-0.98.1-cdh5.1.0.jar

        htrace-core-2.04.jar

2.修改hive-env.sh文件

3.修改hive仓库metastore的字符集为latin1【该操作可选】

alter database cdhmetastore character set latin1;

4.重启hbase和hive,并执行操作

5.表创建成功后,hbase表test01数据自动同步到hive test01表中

6.End......

  • 0
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值