[sqoop篇]将MySQL库表中的数据导入到hive中报错hive.表名 already exists

alone_@

于 2022-09-02 16:57:00 发布

阅读量1.3k

点赞数

文章标签：大数据 hive sqoop mysql

本文链接：https://blog.csdn.net/alone554/article/details/126666081

版权

一、执行语句

二、报错内容

三、报错原因

hive.defaults. ods_test_stu表已经存在，所以我不能继续在hive中创建ods_test_stu表

四、解决方案

方法1.修改导入进hive中的表名，既将执行语句中的参数--hive-table ods_test_stu中的ods_test_stu改了(例如此处我将表名改为ods-test_student)

方法2.删除之前主节点导入hive中的表,也就是hive里的ods_test_stu表

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

alone_@

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
1
评论
复制链接

分享到 QQ

分享到新浪微博

扫一扫

【sqoop】使用sqoop将mysql表导入hive报错Output directory already exists

debimeng

10-04

2568

使用sqoop将mysql表导入hive报错Output directory hdfs://hadoop:9820/user/hadoop/${target_dir} already exists 场景：使用sqoop将mysql表导入hive报错如下： ERROR tool.ImportTool: Import failed: org.apache.hadoop.mapred.FileAlr...

sqoop mysql导入hive报错_使用sqoop从mysql导入数据到hive

weixin_39866881的博客

01-20

836

前言这篇文章主要是用sqoop从mysql导入数据到hive时遇到的坑的总结。环境：系统：Centos 6.5Hadoop：Apache，2.7.3Mysql：5.1.73JDK：1.8Sqoop：1.4.7Hadoop以伪分布式模式运行。一、使用的导入命令参照里面的方法，在mysql建了表，填充了数据，然后按照自己的情况输入了命令：sqoop import --connect jdbc:mysq...

1 条评论您还未登录，请先登录后发表或查看评论

14、使用Sqoop从mysql导入数据到hive报错:Could not load org.apache.hadoop.hive.conf.HiveConf. Make sure HIVE_CONF...

Norni的博客

10-12

360

问题描述使用Sqoop从mysql导入数据到hive报错:Could not load org.apache.hadoop.hive.conf.HiveConf. Make sure HIVE_CONF_DIR is set correctly 分析对于HiveConf.class类是存在的措施修改$SQOOP_HOME/conf/sqoop-env.sh # 添加以下内...

Sqoop进行导入数据到Hive时报错：ERRORtool.ImportTool:Importfailed:java.io.IOException:java.lang.ClassNotFoundExc

qq_45263520的博客

04-30

2661

在使用Sqoop进行MySQL数据导入到Hive的过程中出现一下错误提示。ERRORtool.ImportTool:Importfailed:java.io.IOException:java.lang.ClassNotFoundExceptionorg.apache.hadoop.hive.conf.HiveConf

sqoop导入mysql数据到hive中报错

wangtao6791842的专栏

11-12

4970

ERROR manager.SqlManager: Error reading from database: java.sql.SQLException: Streaming result set com.mysql.jdbc.RowDataDynamic@6c4fc156 is still active. No statements may be issued when any str

sqoop mysql导入hive_使用sqoop从mysql向hive导入数据报错

weixin_39809793的博客

01-19

615

使用sqoop从mysql向hive导数据时出现出错：Unable to instantiate org.apache.hadoop.hive.metastore.HiveMetaStoreClient[grid@rhel0 ~]$ sqoop import --connect jdbc:mysql://192.168.122.100:3306/sqoop --username sqoop -P ...

sqoop mysql to hive_使用sqoop将mysql数据导入到hive中

weixin_35965587的博客

01-18

1425

首先准备工具环境：hadoop2.7+mysql5.7+sqoop1.4+hive3.1准备一张数据库表：接下来就可以操作了。。。一、将MySQL数据导入到hdfs首先我测试将zhaopin表中的前100条数据导出来，只要id、jobname、salarylevel三个字段。再Hdfs上创建目录hadoop fs -mkdir -p /data/base　　#用于存放数据我们cd到sqoop目录下...

将hive中的表使用sqoop导出到mysql数据库中（报错与问题解决）

JJBOOM425的博客

11-22

2665

今天在hue上将数据统计了一下，然后需要导出到mysql中给别人进行展示。由于是第一次在这里导出数据，所以出了一些问题，这里总结一下解决思路与解决办法。一、首先先在mysql中创建导出的表这里要确认字段属性与hive中的一致。 CREATE TABLE `unperceived` ( `humanid` varchar(50) NOT NULL, `credentialsnum...

用sqoop将mysql的数据导入到hive表中

weixin_41279060的博客

01-22

1260

1、mysql的表结构如下： CREATE TABLE `student` ( `id` int(11) NOT NULL AUTO_INCREMENT, `stu_no` varchar(16) DEFAULT NULL, `name` varchar(64) DEFAULT NULL, `age` int(11) DEFAULT '0', `birthday` date

记一次sqoop将hive数据导入到mysql报错

Maricle_Again的博客

08-07

1031

sqoop将oracle数据导入到hive报错：Error: java.io.IOException: SQLException in nextKeyValue

GentleCAT_1的博客

06-10

1151

sqoop将oracle数据导入到hive报错：Error: java.io.IOException: SQLException in nextKeyValue1、字段属性不匹配

【Sqoop】将mysq的数据导入hive数仓报错

可乐大牛的博客

02-14

237

错误操作 bin/sqoop import \ --connect jdbc:mysql://ip:3306/demo \ --username 账号 \ --password 密码 \ --table order \ --num-mappers 1 \ --hive-import \ --fields-terminated-by "\t" \ --hive-overwrite \ --hive-table ods_order 错误详情 The connection property ‘zeroDateT

sqoop mysql导入hive报错_使用sqoop从mysql导入数据到Hive报错

weixin_32946431的博客

01-20

460

第一阶段的到HDFS的阶段没问题，MR作业也能正常完成，但是第二阶段Loading uploaded data into Hive的过程出错了。错误的日志如下：15/10/23 14:34:18 INFO mapreduce.ImportJobBase: Transferred 30 bytes in 31.2422 seconds (0.9602 bytes/sec)15/10/23 14:3...

sqoop导入数据到hive中，数据不一致

05-04

NULL 博文链接：https://kingding.iteye.com/blog/2435018

sqoop从mysql向hive增量导入数据错误汇总

m0_59887059的博客

04-07

2195

首先要理解增量的概念，每天更新的数据才需要被添加到hive中，如果全部数据都要导入，会造成冗余 1 向hive导入时报错ClassNotFound hive.metastore.jar 发生这种情况时，sqoop的lib的无法找到hive的jar包可能是hive3.0版本以上无法兼容sqoop，重新下载了hive2.0版本的，更改sqoop的配置参数，就可以正常使用了 2 hive的表格存储格式为parquet格式，使用sqoop导入数据时可能会不兼容，报数据类型的异常需要将hive的表格存储

oracle导入到hive中,sqoop操作之ORACLE导入到HIVE

weixin_39587010的博客

04-12

1265

导入表的所有字段sqoop import --connect jdbc:oracle:thin:@192.168.1.107:1521:ORCL \--username SCOTT --password tiger \--table EMP \--hive-import --create-hive-table --hive-table emp -m 1;如果报类似的错:ERROR tool.I...

使用Sqoop1.4.6从MySQL导数据到Hive失败

zhikanjiani的博客

09-16

537

SQOOP 把MySQL中的数据导入到Hive中：语句如下： sqoop import \ --connect jdbc:mysql://localhost:3306/ruoze_g6 \ --username root --password 960210 \ --delete-target-dir \ --table city_info \ --hive-import \ --hive-tab...

sqoop导入数据进hive中遇到问题的解决办法

轻言少语的博客

07-21

776

因为我是在导入成功后才写的文章，所以问题就不一一赘述了，直接解决方案。我原版本信息：hive-2.3.6 hadooop2.7 sqoop-1.4.7 在网上找了很多方法，没有解决问题，没有导入数据成功，我就换了下hive版本现版本信息： hive-1.2.1 hadooop2.7 sqoop-1.4.7 解决办法（依次执行）： 1. [root@hadoop01 ~]# cp /usr/local/hive1.2.1/lib/hive-common-1.2.1.jar /usr/

使用sqoop将mysql中的数据导入hive中错误

yds599089646的博客

12-23

151

报错： Could not load org.apache.hadoop.hive.conf.HiveConf. Make sure HIVE_CONF_DIR is set correctly. 原因：缺失hive的连接jar包解决方法：去hive的lib目录中将hive-common-XXX.jar 复制到sqoop中的lib目录中

MySQL导入hive失败_sqoop导数据到hive失败

weixin_34061587的博客

02-02

994

[hadoop@cloud1 conf]$ sqoop import --connect "jdbc:mysql://localhost:3306/comment" --target-dir "/user/hive/tmp1" --username "comment_usr" --password "comment" --query "select s--split-by "sku_id" --h...