Hive安装遇到的问题

最新推荐文章于 2024-01-03 13:08:57 发布
最新推荐文章于 2024-01-03 13:08:57 发布
阅读量690 收藏 2
点赞数
分类专栏： 大数据 文章标签： hive hadoop 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_48615104/article/details/115797276
版权

遇到的问题解决方案

问题一：guava 架包版本不同

当初始化Hive的时候爆出了如下图的错误，这是由于Hadoop包和Hive包自带的guava.jar版本不同导致的。由于版本不一致无法选择使用哪一个jar包。


处理方法：把Hadoop和Hive的jar包版本调整一致即可。
guava.jar分别在 hadoop-3.2.2/share/hadoop/common/lib/ 和 hive-3.1.2/lib/(这里是已经改过的)
在这里插入图片描述
在这里插入图片描述

问题二：环境变量配置问题

错误：java.lang.ClassNotFoundException:org.apache.hive.beeline.HiveSchemaTool
这里配置一下HADOOP的classpath。配置完后一定记得要使用 source /etc/profile命令使配置生效

最低0.47元/天 解锁文章
诗ジ☆E哥緔
关注
  • 0
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
Spark集群整合hive以及java.lang.ClassNotFoundException: org.apache.tez.dag.api.SessionNotRunning问题解决
onthe_wing的博客
08-16 931
通过spark操作hive中的数据 在集群（服务器）上整合 步骤 1.如果在spark的bin目录下存在metastore_db或者spark-warehouse文件，将这两个文件删除 2.导入配置文件 1.hive/conf/hive-site.xml 2.hadoop/etc/hadoop/core-site.xml和hdfs-site.xml 将上述三个文件放入spark/conf目录下，这样就整合好了 3.问题 如果遇到以下问题 将spark下的conf目录中的hive-site.xml里引擎的
hive启动报错 java.lang.ClassNotFoundException: org.apache.hadoop.mapred.MRVersion
weixin_30794499的博客
04-04 2795
[hadoop@hadoop001 hive-1.1.0-cdh5.7.0]$ hivewhich: no hbase in (/home/hadoop/app/hive-1.1.0-cdh5.7.0/bin:/home/hadoop/app/hadoop-2.8.1/bin:/usr/java/jdk1.8.0_45/bin:/bin:/usr/local/bin:/bin:/usr/bin:/...
9.Linux虚拟机下Hive的安装配置
weixin_52010459的博客
08-23 3756
本文详细写了Hive和Mysql的安装，并列出了在Hive配置中可能出现的一些错误
hive-exec-3.1.2 排除guava
03-19
hive-exec-3.1.2 排除guava
hive开发中常遇到的坑
08-13
hive 下dual表，Lock，explain， 数据类型，开发常见的问题
hive-jdbc-1.1.0-cdh5.4.5-standalone.jar
12-07
hive-jdbc-1.1.0-cdh5.4.5-standalone.jar Caused by: java.sql.SQLException: java.lang.ClassNotFoundException: org.apache.hive.jdbc.HiveDriver at com.trs.gateway.commons.hive.HiveFeature.getConnection(HiveFeature.java:57) at com.trs.gateway.commons.database.DatabaseUtil.connectUsingClass(DatabaseUtil.java:112) ... 7 more Caused by: java.lang.ClassNotFoundException: org.apache.hive.jdbc.HiveDriver at org.eclipse.osgi.internal.loader.BundleLoader.findClassInternal(BundleLoader.java:501) at org.eclipse.osgi.internal.loader.BundleLoader.findClass(BundleLoader.java:421) at org.eclipse.osgi.internal.loader.BundleLoader.findClass(BundleLoader.java:412) at org.eclipse.osgi.internal.baseadaptor.DefaultClassLoader.loadClass(DefaultClassLoader.java:107) at java.lang.ClassLoader.loadClass(Unknown Source) at java.lang.Class.forName0(Native Method) at java.lang.Class.forName(Unknown Source) at com.trs.gateway.commons.hive.HiveFeature.getConnection(HiveFeature.java:55) ... 8 more
Hive内容分享(一)：Hive介绍
最新发布
之乎者也·的博客
01-03 798
Hive是基于Hadoop的一个数据仓库（Data Aarehouse，简称数仓、DW），可以将结构化的数据文件映射为一张数据库表，并提供类SQL查询功能。是用于存储、分析、报告的数据系统。在Hadoop生态系统中，HDFS用于存储数据，Yarn用于资源管理，MapReduce用于数据处理，而Hive是构建在Hadoop之上的数据仓库，包括以下方面：使用HQL作为查询接口；使用HDFS存储；使用MapReduce或其它计算框架计算；执行程序运行在Yarn上。
Java JDBC 连接 Hive 报 java.lang.ClassNotFoundException: org.apache.hadoop.conf.Configuration
gedongya的博客
11-15 5901
Hive程序开发中，使用Java通过JDBC方式连接Hive，在加入 hive-jdbc-xxx.jar 的情况下，如果报如下错误： ... Caused by: java.lang.ClassNotFoundException: org.apache.hadoop.conf.Configuration at java.net.URLClassLoader.findClass(Unknow...
java连接hive类找不着_JDBC 连接 hive2 遇到的java.lang.ClassNotFoundException: org.apache.hive.jdbc.HiveDriver...
weixin_30856775的博客
02-27 2592
JDBC 连接hive2, 程序挺简单, 跟其他数据库查询类似, 连接/执行查询/得到结果package hive.server2.query;import java.sql.Connection;import java.sql.DriverManager;import java.sql.ResultSet;import java.sql.Statement;public class ApiQue...
Exception in thread “main“ java.lang.ClassNotFoundException: org.apache.hive.jdbc.HiveDriver
diligent_jianhao的博客
10-26 3623
Exception in thread “main” java.lang.ClassNotFoundException: org.apache.hive.jdbc.HiveDriver 在使用IDEA编写代码访问虚拟机上hive时，报错Exception in thread “main” java.lang.ClassNotFoundException: org.apache.hive.jdbc.HiveDriver。 我使用的hive是cdh版本的，版本为hive-1.1.0-cdh5.14.2，我的当前
jdbc连接hive数据库的驱动jar包
09-19
jdbc连接hive数据库的jar包.整理可用合集.
hive-jdbc-2.1.0-standalone.jar
12-07
Caused by: java.sql.SQLException: java.lang.ClassNotFoundException: org.apache.hive.jdbc.HiveDriver at com.trs.gateway.commons.hive.HiveFeature.getConnection(HiveFeature.java:57) at com.trs.gateway.commons.database.DatabaseUtil.connectUsingClass(DatabaseUtil.java:112) ... 7 more Caused by: java.lang.ClassNotFoundException: org.apache.hive.jdbc.HiveDriver at org.eclipse.osgi.internal.loader.BundleLoader.findClassInternal(BundleLoader.java:501) at org.eclipse.osgi.internal.loader.BundleLoader.findClass(BundleLoader.java:421) at org.eclipse.osgi.internal.loader.BundleLoader.findClass(BundleLoader.java:412) at org.eclipse.osgi.internal.baseadaptor.DefaultClassLoader.loadClass(DefaultClassLoader.java:107) at java.lang.ClassLoader.loadClass(Unknown Source) at java.lang.Class.forName0(Native Method) at java.lang.Class.forName(Unknown Source) at com.trs.gateway.commons.hive.HiveFeature.getConnection(HiveFeature.java:55) ... 8 more
Struts的java.lang.ClassNotFoundException: org.apache.commons.dbcp.BasicDataSource异常的解决方法
07-15
struts初学者的数据池配置出现java.lang.ClassNotFoundException: org.apache.commons.dbcp.BasicDataSource异常的解决办法
hive on spark mr 数据开发常见问题解决
11-20
hive工作常见问题解决收集开发人员在Hive日常开发过程中难免遇到各种各样的hive报错，这些报错信息很多时间并没有形成汇总的知识库，每次遇到问题都会重复查资料，效率非常低 现在总结一些常见的知识库，方便大家...
无法启动hive
01-07
遇到错误： Cannot create directory /tmp/hive/root/3c8d401f-f9f0-46f1-92f5-5782be24f3d7. Name node is in safe mode. 问题原因： hdfs在启动开始时会进入安全模式，这时文件系统中的内容不允许修改也不允许...
HiveSQL的编译过程
02-26
在几次升级Hive的过程中，我们遇到了一些大大小小的问题。通过向社区的咨询和自己的努力，在解决这些问题的同时我们对Hive将SQL编译为MapReduce的过程有了比较深入的理解。对这一过程的理解不仅帮助我们解决了一些...
java.lang.ClassNotFoundException: org.apache.hive.jdbc.HiveDriver
weixin_41877582的博客
12-09 9891
没有HiveDriver的jar包 <!-- https://mvnrepository.com/artifact/org.apache.hive/hive-jdbc --> <dependency> <groupId>org.apache.hive</groupId> <artifactId>hive-jdbc</artifactId>
java.lang.ClassNotFoundException: org.apache.hive.service.cli.thrift.TCLIService$Iface
weixin_43472847的博客
05-09 4881
今天编译安装了kettle8.3.10-R版本，然后连上公司的hadoop环境，测试hive2连接时报错： 错误连接数据库 [hive_hdp] : org.pentaho.di.core.exception.KettleDatabaseException: Error occurred while trying to connect to the database Error connecting to database: (using class org.apache.hive.jdbc.HiveD
hive的异常
dub_lys的博客
08-14 586
java.lang.ClassNotFoundException: org.apache.hive.jdbc.HiveDriver         at java.net.URLClassLoader$1.run(URLClassLoader.java:366)         at java.net.URLClassLoader$1.run(URLClassLoader.java:355)
hive中遇到的比较复杂的问题
06-09
在使用Hive时，可能会遇到一些比较复杂的问题，下面列举一些可能会遇到的问题： 1. 大表查询性能问题：当数据量较大时，查询性能可能会受到影响。可以考虑进行数据分区，或者进行数据压缩和索引优化等方式来提高查询性能。 2. 多重嵌套查询：当查询需要多层嵌套时，可能会导致查询性能低下。可以考虑使用JOIN操作来代替嵌套查询，或者使用子查询限制嵌套层数。 3. 巨大的MapReduce任务：当查询涉及到多个表和大量数据时，可能会生成一个巨大的MapReduce任务，导致查询性能低下。可以考虑使用MapReduce的合并操作，或者进行数据分区和压缩来提高查询性能。 4. 数据类型转换问题：当数据类型不匹配时，可能会导致查询失败或者性能低下。可以使用CAST函数进行数据类型转换，或者在数据导入时进行数据类型转换。 5. 资源分配问题：当同时有多个查询请求时，可能会导致资源分配问题。可以设置Hive的资源管理器，对查询请求进行调度和优先级分配，以保证查询性能和资源利用率。 总的来说，Hive中遇到的比较复杂的问题需要根据具体的业务场景和数据特点来进行分析和解决，需要不断地进行调整和优化，以提高Hive的查询性能和效率。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值