有关hive搭建涉及到的bug

已于 2022-03-12 13:33:03 修改
阅读量880 收藏
点赞数
分类专栏： 日常踩坑记 文章标签： hive bug
于 2022-03-09 17:19:02 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_45682261/article/details/123357758
版权
本文介绍了在搭建Hive过程中可能遇到的问题及解决方案，包括如何处理runjar进程残留导致的重启问题，修复找不到spark-assembly-*.jar的错误，解决Hive服务器连接拒绝的异常，以及重新搭建时清理MySQL中Hive数据库的步骤。
摘要由CSDN通过智能技术生成

启动了hive，再次启动

org.apache.thrift.transport.TTransportException: Could not create ServerSocket on address 0.0.0.0/0.0.0.0:9083.
    at org.apache.thrift.transport.TServerSocket.<init>(TServerSocket.java:93)
    at org.apache.thrift.transport.TServerSocket.<init>(TServerSocket.java:75)
    at org.apache.hadoop.hive.metastore.TServerSocketKeepAlive.<init>(TServerSocketKeepAlive.java:34)
    at org.apache.hadoop.hive.metastore.HiveMetaStore.startMetaStore(HiveMetaStore.java:5192)
    at org.apache.hadoop.hive.metastore.HiveMetaStore.main(HiveMetaStore.java:5134)
    at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
    at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:57)
    at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43)
    at java.lang.reflect.Method.invoke(Method.java:606)
    at org.apache.hadoop.util.RunJar.main(RunJar.java:212)
Exception in thread "main"
最低0.47元/天 解锁文章
南潇如梦
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
ls: 无法访问/usr/local/spark/lib/spark-assembly-*.jar: 没有那个文件或目录
默主归沙的博客
03-17 2628
原因：spark升级到spark2以后，原有lib目录下的大JAR包被分散成多个小JAR包，原来的spark-assembly-*.jar已经不存在，所以hive没有办法找到这个JAR包。 如何解决这问题？ cd /usr/local/hive/bin 看上图有个hive vi hive \ 就是敲一个/sparkAssemblyPath定位好， 把${SPARK_HOME}/lib/spark-assembly-*.jar替换成${SPARK_HOME}/jars/*.jar .
HIVE ls: cannot access /usr/spark/lib/spark-assembly-*.jar: No such file or directory
80后大叔爱学习
10-08 1701
找到/hive/bin进行编辑vi hive
启动Hive时报错：ls: 无法访问/usr/local/soft/spark-2.4.5/lib/jars/*.jar: 没有那个文件或目录
weixin_44077750的博客
01-05 1211
启动Hive时报错：ls: 无法访问/usr/local/soft/spark-2.4.5/lib/jars/*.jar: 没有那个文件或目录 解决办法： 1.进入Hive的安装目录： 进到 /usr/local/soft/hive-1.2.1/bin 2.修改bin目录下的hive文件 3. 进入hive文件中，将这里改成 再次启动hive就可以啦！ ...
Hive在spark2.0.0启动时无法访问../lib/spark-assembly-*.jar: 没有那个文件或目录的解决办法
热门推荐
大数据挖掘SparkExpert的博客
09-12 1万+
最近将整个架构升级到spark 2.0.0之后，发现一个问题，就是每次进行hive --service metastore启动的时候，总是会报一个小BUG。 无法访问/home/ndscbigdata/soft/spark-2.0.0/lib/spark-assembly-*.jar: 没有那个文件或目录。 而这一行究竟是怎么回事，网上没有任何有关的资料。 没办法，只好一
启动hive报错：ls:cannot access '/usr/local/spark/lib/spark-assembly-*.jar':No such file or directory
weixin_43968936的博客
11-01 2293
报错如图： spark2.0版本之后，原有lib目录下的spark-assembly-*.jar包被拆成多个jar包，存放路径是在spark的jars目录下。 解决方案： 进入hive安装目录：(我的目录是/usr/local/hive) cd /usr/local/hive cd ./bin 编辑hive 将 sparkAssemblyPath=ls ${SPARK_HOME}/lib/sp...
Hive搭建与应用手册.docx
07-24
### Hive搭建与应用手册知识点详解 #### 一、Hive基础简介 1. **基础描述** Hive是一款基于Hadoop的数据仓库工具，主要用于处理数据提取、转化与加载(ETL)工作，支持对Hadoop中大规模存储的数据进行查询与分析。...
基于大数据集群的hive搭建
10-30
5. **配置 Hive-env.sh**：在 `hive-env.sh` 文件中设置 Hadoop 相关路径及 Hive 辅助 JAR 路径： ``` export HADOOP_HOME=/opt/modules/hadoop-2.5.0 export HIVE_CONF_DIR=/opt/modules/hive/conf export HIVE...
hive搭建及使用入门简介（内含PPT、各种表创建sql及hive搭建使用笔记）
03-08
在“Hive搭建”部分，你将了解到如何在本地或集群环境中设置Hive。这通常包括安装Java环境、配置Hadoop、下载和安装Hive、创建Hive metastore服务，以及配置Hive-site.xml等步骤。确保所有依赖服务如HDFS、YARN和...
hive环境搭建
01-20
主要涉及到两个文件：`hive-env.sh` 和 `hive-site.xml`。 在`hive-env.sh`中，我们需要设置Hadoop安装路径以及Hive配置文件的位置。例如： ```bash HADOOP_HOME=/opt/cdh/hadoop-2.6.0-cdh5.14.2 export HIVE_...
hadoop全套配置详细步骤（基础环境搭建+hadoop集群搭建+hive搭建）
08-15
本文件包含hadoop集群搭建的详细步骤，包含基础环境搭建，Hadoop集群搭建，Hive搭建。小白放心食用，无坑。 其中基础环境搭建包括虚拟机安装、centos7、网络配置、xshell、notepad等环境的安装。注：本文里安装的...
Hive<找不到Spark-assemblyJar包>
Gpwner的博客
06-19 3943
版本：apache-hive-1.2.1-bin.tar.gz spark-2.1.1-bin-hadoop2.7.tgz1.问题陈述：启动Hive的时候会说找不到spark-assembly相关的Jar包cannot access /usr/local/spark/lib/spark-assembly-*.jar: No such file or directory2.原因：spark2以后，原有
启动hive，提示ls: 无法访问/home/software/spark-2.0.1-bin-hadoop2.7/lib/spark-assembly-*.jar: 没有那个文件或目录
weixin_42496757的博客
02-17 5150
[root@hadoop03 bin]# hive ls: 无法访问/home/software/spark-2.0.1-bin-hadoop2.7/lib/spark-assembly-*.jar: 没有那个文件或目录 原因是：         spark升级到spark2以后，原有lib目录下的大JAR包被分散成多个小JAR包，原来的spark-assembly-*.jar已经不存在，...
启动hive，提示ls: 无法访问/home/software/spark-2.0.1-bin-hadoop2.7/lib/spark-assembly-*.jar: 没有那个文件或目录...
weixin_30835933的博客
09-11 380
原因是：spark升级到spark2以后，原有lib目录下的大JAR包被分散成多个小JAR包，原来的spark-assembly-*.jar已经不存在，所以hive没有办法找到这个JAR包。 解决办法是：修改bin目录下的hive文件。 转载于:https://www.cnblogs.com/2016-zck/p/11506473.html...
spark&hive--练习2
很开心你能来~
08-07 311
spark&hive,将hive表中的结果导入sql中
2024年TI杯E题-三子棋游戏装置方案分享-jdk123团队-附录树莓派opencv调用摄像头bug的解决，链接在文末
jdk12123的博客
08-08 373
首先，树莓派官网系统更新到bulleye后(之前是Buster)，raspistill是不可用的，只能用libcamera-hello。如果你不修改/boot/config.txt的话，你的libcamera-hello是用不了的!当然这也是笔者踩坑的开始，因为只要你加入了dtoverlay=ov5647，你的opencv大概率就打不开摄像头了!后来，经过与官方客服的交流，得知是由于系统更新的问题，烧录2021的Buster系统，即可完美解决，树莓派Opencv调用摄像头的问题。
sgetrf M N is 103040 时报错，这是个bug么 lapack and Openblas the same，修复备忘
eloudy的专栏
08-08 381
M=N=103040时，调用 sgetrf_ 时，无论是 LAPACK 还是 OpenBLAS，都出错：openblas：lapack： 出现问题的应该是由于M和N相对数字太大，乘积超出32bit整数的表达范围，而接收此参数的类型其实为 unsigned long int，导致误传非常大的值后造成越界。如下是已经修复的代码，可以正常运行了： 遇到非负整数，比如阶数、数组下标等，尽量用 unsigned long int 类型；
【Qt】之【Bug】LNK2019: 无法解析的外部符号 __imp_FindWindowW
最新发布
paxlhhh
08-12 208
ps：尝试pro添加-lUser32，没用。
Bug 解决 | 前端项目无法正确安装依赖？
weixin_48916444的博客
08-09 712
前端项目和后端项目一样，都需要用到很多第三方的类库依赖。如果输入命令后报错了，无法安装依赖，怎么办呢？这篇文章和大家分享了一般比较常见的几种问题及解决办法。
Hive搭建教程：从内嵌到本地模式
3. 设置环境变量，通过编辑`/etc/profile`文件，将Hive的路径添加到PATH中。 4. 使环境变量生效，通过执行`source /etc/profile`命令。 5. 修改Hive的相关配置文件，如`hive-env.sh`、`hive-default.xml`等，指定...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值