Hive启动时报错：cannot access ....spark/lib/spark-assembly-*.jar: No such file or directoryog解决

最新推荐文章于 2022-05-17 11:56:09 发布
最新推荐文章于 2022-05-17 11:56:09 发布
阅读量2.3k 收藏 1
点赞数 4
分类专栏： Hive
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Fenggms/article/details/82971946
版权

在安装spark后，通过bin/hive 启动hive时报错:
ls:cannot access /export/servers/spark/lib/spark-assembly-*.jar: No such file or directoryog
在这里插入图片描述

原因分析：

spark2的jar包结构改变，安装的hive中，hive启动脚本内容与之不匹配。

解决方案：

进入hive目录中，vim bin/hive
在这里插入图片描述

找到sparkAssemblyPath：
在这里插入图片描述

修改为：

sparkAssemblyPath=`ls ${SPARK_HOME}/jars/*.jar`

在这里插入图片描述

之后可以正常启动。

Fenggms
关注
专栏目录
ls: cannot access /home/hadoop/spark-2.2.0-bin-hadoop2.6/lib/spark-assembly-*.jar: No such file or d
XiaoYu的博客
04-12 1711
ls: cannot access /home/hadoop/spark-2.2.0-bin-hadoop2.6/lib/spark-assembly-*.jar: No such file or directory解决方法打开hive的安装目录下的bin目录，找到hive文件cd $HIVE_HOME/bin vi hive将鼠标定位的位置，更改成下图...
ls: 无法访问/usr/local/spark/lib/spark-assembly-*.jar: 没有那个文件或目录
默主归沙的博客
03-17 2669
原因：spark升级到spark2以后，原有lib目录下的大JAR包被分散成多个小JAR包，原来的spark-assembly-*.jar已经不存在，所以hive没有办法找到这个JAR包。 如何解决这问题？ cd /usr/local/hive/bin 看上图有个hive vi hive \ 就是敲一个/sparkAssemblyPath定位好， 把${SPARK_HOME}/lib/spark-assembly-*.jar替换成${SPARK_HOME}/jars/*.jar .
启动hive,报错 ls: cannot access /export/spark/lib/spark-assembly-*.jar: No such file or directory,解决
a904364908的博客
09-20 4122
安装好spark,安装hive,安装的spark版本是2.1.3版本,hive版本是1.1.0 安装好hive后,启动,发现一个报错,cannot access /export/spark/lib/spark-assembly-*.jar: No such file or directory.   看了一下,出现这个问题的原因是因为spark版本升级到2.x以后,原有lib目录下的大JAR包...
启动hive出现：cannot access /usr/local/spark/lib/spark-assembly-*.jar: No such file or directory
BigData_Mining的博客
04-26 4112
原因是这个jar包在新版本的spark中的位置已经改变！我们要做的只是将hive中的启动文件中的sparkAssemblyPath这一行更改为你安装的spark的jar包路径即可。具体如下：到Hive的bin目录下编辑hive：找到下图标记的这一行；将上图红框内的内容更改为下图所示内容。问题解决！！...
HIVE ls: cannot access /usr/spark/lib/spark-assembly-*.jar: No such file or directory
80后大叔爱学习
10-08 1704
找到/hive/bin进行编辑vi hive
ls: 无法访问/export/servers/spark/lib/spark-assembly-*.jar: 没有那个文件或目录
data_curd的博客
11-04 883
连接hive数仓时，输入这个命令：!connect jdbc:hive2://xxxxx:10000 报错：ls: 无法访问/software/spark/lib/spark-assembly-*.jar: 没有那个文件或目录 这时，打开/hive/bin/hive文件，把第111行到第116行的字段全部注释下。 # add Spark assembly jar to the classpath #if [[ -n "$SPARK_HOME" && !("$HIVE_SKIP_SPARK_
启动hive包ls: cannot access '/usr/local/spark/lib/spark-assembly-*.jar': No such file or directory
06-03
启动 Hive 需要依赖 Spark，错误提示中显示 `/usr/local/spark/lib/spark-assembly-*.jar` 文件不存在，可能是因为 Spark 没有安装或者安装位置不正确。 你可以先确认一下 Spark 是否已经安装，并且 `/usr/local/...
ls: cannot access '/usr/local/spark/lib/spark-assembly-*.jar': No such file or directory
最新发布
06-03
这个错误提示是因为在你运行了 `ls` 命令之后，发现 `/usr/local/spark/lib/` 目录下并没有 `spark-assembly-*.jar` 这个文件。你可以确认一下这个文件是否存在，或者是否路径是否正确。如果你确定这个文件不存在，...
Spark3 读写 S3 Parquet, Hive, Hudi
L, there!
05-17 4783
Spark 读 S3 Parquet 写入 Hudi 表 目录 Spark 读 S3 Parquet 写入 Hudi 表 参考 关于S3，S3N和S3A的区别与联系 Spark 读写 S3 Parquet 文件 测试代码 pom.xml 配置文件 EMR Spark任务提交 spark-shell spark-submit Spark 读写 Hudi 本地测试 代码 集群上测试 spark-shell spark-sql Spark-submit Hive 中测
Hive在spark2.2.1启动时无法访问../lib/spark-assembly-*.jar: 没有那个文件或目录的解决办法
wmz960708581的博客
09-13 1904
就是每次进行hive 都会显示无法访问/home/bigdata/spark/jars/*.jar：没有那个文件或目录 没办法，只好一步一步分析，终于找到问题的症结： 直接cd $HIVE_HOME 进入hive的bin目录下的hive  vi hive 修改 SPARK_HOME后面的改成/jars/* 就不会出现这样的问题  ...
cannot access /opt/spark/lib/spark-assembly-*.jar: No such file or directory
sanjiang521的博客
11-17 517
cannot access /opt/spark/lib/spark-assembly-*.jar: No such file or directory问题叙述原因解决办法 问题叙述 安装好spark后，启动hive报错，内容如下： 原因 spark版本升级到2.x以后,原有lib目录下的大JAR包被分散成多个小JAR包，原来的spark-assembly-*.jar已经不存在，所以hive没有办法找到这个JAR包。 解决办法 打开hive下面的bin目录,找到hive文件,编辑hive文件,找到如下一行
Hive在spark2.0.0启动时无法访问../lib/spark-assembly-*.jar: 没有那个文件或目录的解决办法
大数据挖掘SparkExpert的博客
09-12 1万+
最近将整个架构升级到spark 2.0.0之后，发现一个问题，就是每次进行hive --service metastore启动的时候，总是会报一个小BUG。 无法访问/home/ndscbigdata/soft/spark-2.0.0/lib/spark-assembly-*.jar: 没有那个文件或目录。 而这一行究竟是怎么回事，网上没有任何有关的资料。 没办法，只好一
Hive<找不到Spark-assemblyJar包>
Gpwner的博客
06-19 3948
版本：apache-hive-1.2.1-bin.tar.gz spark-2.1.1-bin-hadoop2.7.tgz1.问题陈述：启动Hive的时候会说找不到spark-assembly相关的Jar包cannot access /usr/local/spark/lib/spark-assembly-*.jar: No such file or directory2.原因：spark2以后，原有
lsr: Cannot access .: No such file or directory. 解决办法
dh15303249535的博客
03-11 6445
今天运行了一段程序：分析专利引用数据集，从专利引用数据集中计算专利被引用的次数 在专利局http://data.nber.org/patents/网站下载专利数据作为测试数据，是个251MB的.txt文件... 具体原因至今不详，可能是因为我的运行环境是建立在虚拟机之上？在一次运行非正常退出后，输入命令hadoop fs -lsr出现如下结果： 一开始以...
Linux中解决cannot access ‘\r’: No such file or directory
热门推荐
123
04-28 1万+
碰到这种情况，是因为脚本文件在windows环境下编辑过后再上传到linux服务器导致换行符格式不对。使用dos2unix命令行即可解决。 进入root用户后，使用yum install dos2unix。 安装完成后使用命令 dos2unix start.sh 其中start.sh为出问题的脚本文件名，也可以使用*通配符来同时修改多个，或者使用空格隔开文件名的方式。 ...
hadoop 异常 ls: Cannot access .: No such file or directory.
weixin_33816946的博客
09-04 5437
bin/hadoop dfs -lsls: Cannot access .: No such file or directory. bin/hadoop dfs -ls /用这个命令代替试试原因是格式化后没有任何文件  
【没有assembly目录】spark2.0.0启动时无法访问spark-assembly-*.jar的解决办法
吟啸徐行
02-27 3216
1、问题描述        自从spark2.0.0发布之后，每次启动Hive的时候，总会发现一个小问题，启动 hive --service metastore的时候，会报一个小BUG: 无法访问/lib/Spark-assembly-*.jar 分析其源码架构，发现主要原因是：在//bin/hive文件中，有这样的命令：加载spark中相关的JAR包。   但
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值