【Hive】解决sqoop从mysql数据库导入数据到hive报错Hive exited with status 64

最新推荐文章于 2022-10-20 21:18:49 发布
最新推荐文章于 2022-10-20 21:18:49 发布
阅读量1k 收藏 1
点赞数
分类专栏： HDFS全方位实战 HBase全方位实战 Spark实战 文章标签： hive mysql 数据库
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/yexiguafu/article/details/125293279
版权
HDFS全方位实战 同时被 3 个专栏收录
170 篇文章 147 订阅 ¥29.90 ¥99.00
订阅专栏
Spark实战
17 篇文章 10 订阅 ¥9.90 ¥99.00
订阅专栏 超级会员免费看
HBase全方位实战
9 篇文章 1 订阅 ¥9.90 ¥99.00
订阅专栏 超级会员免费看

执行如下sqoop语句：

然后报错：

重点在这条日志：

异常内容如下：

 org.apache.hadoop.hive.ql.metadata.HiveException: java.lang.RuntimeException: Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient

意思是没法实例化SessionHiveMetaStoreClient，根据我的经验，应该是缺包了或者hive metastore服务没启动，于是检查hive下有没有jdbc，果然没有，所以拷贝一个jdbc包到hive下。检查hive metastore没启动，于是启动一下。

启动hivemetastore的方法：

在hive-site.xml里指定hive.metastore.uris的port：
了解本专栏 订阅专栏 解锁全文
叹了口丶气
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
订阅专栏
sqoop mysql导入hive报错_sqoop 从mysql导入数据到hive报错
weixin_33291014的博客
01-20 430
ERROR tool.ImportTool: Encountered IOException running import job: java.io.IOException: Hive exited with status 1at org.apache.sqoop.hive.HiveImport.executeExternalHiveScript(HiveImport.java:389)at or...
Sqoop导入Hive报错:ERROR tool.ImportTool: Import failed: java.io.IOException: Hive exited with status 64
ShiningBlueOcean
03-06 2721
20/03/06 16:06:30 ERROR tool.ImportTool: Import failed: java.io.IOException: Hive exited with status 64 at org.apache.sqoop.hive.HiveImport.executeExternalHiveScript(HiveImport.java:384) at org.apac...
sqoop从mysql数据库导入hive数据报错Hive exited with status 64
qq_39214610的博客
06-20 1839
异常： File Output Format Counters 19/06/20 21:47:08 INFO hive.HiveImport: FAILED: SemanticException org.apache.hadoop.hive.ql.metadata.HiveException: java.lang.RuntimeException: Unable to instantiat...
ERROR tool.ImportTool: Import failed: java.io.IOException: Hive exited with status 64
u011250186的博客
05-19 1937
20/05/20 16:38:16 ERROR tool.ImportTool: Import failed: java.io.IOException: Hive exited with status 64 at org.apache.sqoop.hive.HiveImport.executeExternalHiveScript(HiveImport.java:384) at org.apache.sqoop.hive.HiveImport.executeScript(HiveImpo...
sqoop无法连接到hiveserver2
AnameJL的博客
07-26 453
sqoop无法连接hiveserver2解决方案
Sqoop从MySQL导数据至hive数据表异常(数据量不对,数据值不对)
argue10的博客
04-19 3895
通过数据比对，发现sqoop导入hive的数据与MySQL原始数据对应不上，表现为两点： ①查数据总数不对，MySQL的count(1) = 108120条数据，但是导入至hive发现只有108112条数据，数据发生了丢失。 ②应查数据值不对，查询到某个字段，MySQL值中仅有1,2两种值，但是hive表中包含1,2，以及一串看不懂的数字。 经反复核对数据，发现问题症结，所以就将它记录下来了。 ...
sqoop--＞hive导入数据遇到的问题；拒绝连接和ERROR tool.ImportTool: Import failed: java.io.IOException （status44）
qq_45112156的博客
07-22 2172
问题一；拒绝链接 20/07/22 10:58:33 INFO mapreduce.Job: map 0% reduce 0% 20/07/22 10:58:36 INFO mapreduce.Job: Task Id : attempt_1595382831037_0006_m_000000_0, Status : FAILED Error: java.lang.RuntimeException: java.lang.RuntimeException: com.mysql.jdbc.exceptions
sqoop从mysql中导入数据到parquet格式的hive中
07-07
sqoop导入数据到hive
2、sqoop导入（RMDB-mysql、sybase到HDFS-hive）
05-29
在本主题中，我们将深入探讨 Sqoop 的导入功能，特别是如何将数据从 MySQL 和 Sybase 数据库导入到 HDFS，并进一步加载到 Hive 表中。 ### 一、Sqoop 导入介绍 1. **语法结构**： Sqoop 导入数据的基本语法如下：...
使用kettle将mysql中的数据导入到hive中
01-07
先说说思路：1是直接从mysql输出至hive中，另外一个是先将数据搞到hdfs中，再load一下，当然这只是textfile存储格式而言，若是ORC等其他列式存储的话建议先搞一个textfile格式的中间表，再insert into table select ...
sqoop从mysql到hive的时间字段问题
01-07
一、问题发现与分析 ...经过对比：sqoop在转换MySQL的datatime字段类型为hive的string时会出现问题：默认先转为对应时间戳，再转换为北京市区时间，就会使时间多8小时。 解决办法有两个： 1、在sql里将时间字段转换为
datax数据从hive导入mysql数据缺失解决
01-18
datax数据从hive表导入mysql表,数据缺失解决
Sqoop导入丢失数据
weixin_43793061的博客
03-21 2873
sqoop是大数据架构中常用的数据导入导出组件之一，只要简单的设置一些参数就可以将数据库的数据快速导入数据仓库中。 但在实际使用过程中，常常会碰到一些问题，导致从数据库导入到数据仓库发生数据丢失的问题，以下将发生数据丢失的情况分为三种类型： 一、工具使用者使用不善导致的 sqoop数据导入过程为：将mysql数据导入到hdfs文件路径，然后再从该hdfs文件路径load到hive表中。所以需要用户...
sqoop把mysql数据导入hive中，报错：java.lang.NullPointerException at org.json.JSONObject.
xianjie0318的博客
02-09 1714
在大数据环境中，使用sqoop导入mysql数据到hive中，报错，如下解决办法：这是因为sqoop缺少java-json.jar包.下载java-json.jar包： http://www.java2s.com/Code/Jar/j/Downloadjavajsonjar.htm 把java-json.jar添加到../sqoop/lib目录：还有其他问题问题2：root用户写入HDFS文件错误...
使用Sqoop从mysql向hdfs或者hive导入数据时出现的一些错误
weixin_33739523的博客
06-28 742
1.原表没有设置主键，出现错误提示： ERROR tool.ImportTool: Error during import: No primary key could be found for table xxx. Please specify one with --split-by or perform a sequential import with '-m 1' 提示说明的很清楚...
Hive exited with status 44
qq85609655的博客
08-26 131
hadoop 在2.x之后启用了hdfs的HA功能 其配置fs.defaultFS默认是hdfs://mycluster   Sqoop导入数据包异常 2014/08/26 14:46:51 - Sqoop Import - 2014/08/26 14:46:51 - Time taken: 3.226 seconds INFO - Time taken: 3.226 seconds ...
oracle导入初始数据死机,Sqoop导入Oracle数据至hive卡死在hive.HiveImport: Connecting to jdbc:hive2不执行...
weixin_39955154的博客
04-03 617
环境信息：HDP-3.1.4已经下载好odjbc8.jar驱动程序放置在/usr/hdp/current/sqoop-client/lib/目录Sqoop读取Oracle数据库数据导入Hive时，一直卡在INFO hive.HiveImport: Connecting to jdbc:hive2:// 不懂，日志执行到下面这样子就不执行了。20/10/19 05:16:56 WARN hive.T...
Sqoop 将db2数据导入到hive中出现数据条数不一致问题分析
success could be revenge的博客
05-17 1446
import--connectjdbc:db2://host:port/database   //db2驱动--usernamexxx //用户名--passwordxxx //密码--tabledb2table //db2中的表名字--split-byid //分块建议使用主键column字段名称作为分割块的依据，这样减少导入误差--m16 //1-更大 速度主要...
【BugFix】IDEA控制台无输出问题的解决
Badme
10-20 4227
【BugFix】IDEA控制台无输出问题的解决
使用sqoop将数据从mysql导入hive报错
最新发布
06-11
在使用sqoop将数据从mysql导入hive时，可能会遇到各种错误。以下是一些常见的解决方案： 1. 检查MySQL驱动程序是否正确安装，并且在sqoop命令中正确指定驱动程序。 2. 检查源MySQL数据库中的表是否存在，并且在sqoop命令中正确指定表。 3. 检查目标Hive数据库是否存在，并且在sqoop命令中正确指定数据库。 4. 检查目标Hive表是否存在，并且在sqoop命令中正确指定表。 5. 检查源MySQL数据库中的列是否与目标Hive表中的列匹配，并且在sqoop命令中正确指定列。 6. 检查目标Hive表的分隔符是否与源MySQL表的分隔符匹配，并且在sqoop命令中正确指定分隔符。 7. 检查Hadoop和Hive环境变量是否正确设置，并且在sqoop命令中正确指定环境变量。 如果以上解决方案无法解决问题，可以尝试查看sqoop日志以获取更多信息。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

叹了口丶气

觉得有收获就支持一下吧~

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值