未找到依赖项 ‘org.apache.spark:spark-hive_2.11:2.4.5‘

最新推荐文章于 2023-09-17 04:20:06 发布
最新推荐文章于 2023-09-17 04:20:06 发布
阅读量6.2k 收藏 3
点赞数 2
分类专栏： java 文章标签： pom idea
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u010711495/article/details/112098924
版权

idea pom刷新报错

未找到依赖项 'org.apache.spark:spark-hive_2.11:2.4.5'

找到对应的目录删除文件夹重新刷新导入即可

C:\Users\username\.m2\repository\org\apache\spark\spark-hive_2.11

总结

  • pom导入依赖错误就去对应文件夹删除依赖,然后重新导入,一般就能解决了
鸭梨山大哎
关注
专栏目录
Error while instantiating ‘org.apache.spark.sql.internal.SessionState‘
SnowXu01的博客
10-05 1454
(1) 现象截图 (2) 错误堆栈信息(文本) D:\developments\java-tools\jdk1.8.0_144\bin\java.exe -ea -Didea.test.cyclic.buffer.size=1048576 -javaagent:D:\developments\dev-software\IntelliJIDEA2020\lib\idea_rt.jar=51029:D:\developments\dev-software\IntelliJIDEA2020\bin -Dfile
Apache Spark SQL
qq_37108736的博客
03-29 364
Apache Spark SQL Spark SQL是⽤于结构化数据处理的⼀个模块。同Spark RDD 不同地⽅在于Spark SQL的API可以给Spark计算引擎提供更多地 信息，例如:数据结构、计算算⼦等。在内部Spark可以通过这些信息有针对对任务做优化和调整。这⾥有⼏种⽅式和Spark SQL进⾏交互，例如Dataset API和SQL等，这两种API可以混合使⽤。Spark SQL的...
编译Spark-Scala的时候找不到 org.apache.spark包；找不到依赖
最新发布
无骨鱼虎的博客
09-17 1023
使用idea编译Scala的时候通常会使用使用spark的插件包，例如。
基于Spark的Hive编程中，“Error:(8, 37) java: 程序包org.apache.spark.sql.api.java不存在”的解决办法
winfield821的博客
01-18 6307
依赖Spark 1.2.0中的jar包编程时会出现这个问题，虽然这个Spark版本已较旧，但一些在旧的平台上开发的人，可能还会遇到这个问题，因此将问题的解决办法写在这里。 报的错误如下图所示： 其实问题本身不高深，原因就在于spark-assembly-1.2.0-hadoop2.4.0.jar这个jar包有问题。这个包实际是由org.apache.spark等许多小的packag
spark提交作业依赖包找不到解决方法
sweet6hero的专栏
09-05 2101
 方法1：直接将依赖包拷贝到spark安装目录小jar目录 方法2：--jars依赖在命令行添加，且必须在要执行的main函数jar包前面 spark-submit --class com.test.RecommendRecordJob --master local --jars ./store-1.0-SNAPSHOT.jar ./jobs.jar...
spark 读取文件不存在，但文件在本地有啊，也没有权限问题，请大神指点下
康师傅
12-12 365
spark sql读取文件报错
本地有jar包idea还是提示程序包不存在
weixin_40983143的博客
06-03 5160
本地有jar包idea还是提示程序包不存在错误情况展示解决方式一解决方式二解决方式三解决方式四解决方式五 错误情况展示 解决方式一 查看本地maven库配置是否正确 解决方式二 rebuild一下项目 解决方式三 clean一下maven信息，然后重新install 解决方式四 重新设置一下idea，重新设置后需要再次输入License server 或者Activation code，请慎用 解决方式五 如果以上方式解决不了您的问题，那建议您重装系统吧 ...
spark程序对hadoop环境的依赖，导致checkpoint失败问题的解决
u012684933的专栏
05-28 4765
虽然没有使用hadoop，但是在windows下运行spark程序报如下错误： INFO : org.apache.spark.SparkContext - Running Spark version 1.3.1 WARN : org.apache.hadoop.util.NativeCodeLoader - Unable to load native-hadoop library for yo
sparksql整合hive,使用idea运行,启动时报:"org.apache.spark.sql.hive.hivesessionstatebuilder
06-28
2. 确认在项目中引入了正确的Spark和Hive依赖，例如： ``` <groupId>org.apache.spark <artifactId>spark-core_2.11 <version>2.4.5 <groupId>org.apache.spark <artifactId>spark-sql_2.11 <version>...
Spark：Core（三）
m0_57498038的博客
07-26 414
目录 01：上篇回顾 02：学习目标 03：外部数据源：场景 04：外部数据源：写Hbase 05：外部数据源：读Hbase 06：外部数据源：写MySQL 07：广播变量：Broadcast Variables 08：累加器：Accumulators 09：内核调度：宽窄依赖 10：内核调度：Shuffle 11：内核调度：基本概念 12：内核调度：调度流程 13：内核调度：并行度 14：SparkCore中的问题 15：SparkSQL的诞生与发展 ...
spark-core_2.11-1.5.2.logging.jar解决spark升级没有log的jar包
05-27
解决Spark升级到2.1后测试streaming-kafkaIDEA报java.lang.NoClassDefFoundError: org/apache/spark/Logging错误，将这个jar包放到spark的lib目录中，将这个jar包导进IDEA中的依赖,文档中除资源地址外，还有详细图解说明
报错org.apache.spark.sql.hive.HiveSessionStateBuilder'的原因
06-03
报错"org.apache.spark.sql.hive.HiveSessionStateBuilder"通常是由于缺少Hive相关的jar包或者配置不正确造成的。解决方法如下： 1. 确认项目中是否添加了Hive的相关依赖，可以在pom.xml文件中添加以下依赖： ```...
java spark jar包_Spark jar包找不到解决方法
weixin_33520849的博客
02-24 935
今天在使用中DataFrame往Mysql中插入RDD，但是一直报出以下的异常次信息：[[emailprotected] ~]$ bin/spark-submit --master local[2]--jars lib/mysql-connector-java-5.1.35.jar--class spark.sparkToJDBC ./spark-test_2.10-1.0.jarspark...
scala和spark用到的依赖_解决ApacheSPark中的依赖问题
weixin_33501343的博客
01-14 1916
火花版所有软件包都必须使用相同的主要SPark版本(1.6、2.0、2.1、.)。考虑以下(不正确的)构建：name:="SimpleProject"version:="1.0"libraryDependencies++=Seq("org.apache.spark"%"spark-core_2.11"%"1.6.1","org.apache.spark"%"spark-s...
idea配置spark的java开发环境
09-07 1960
建立spring boot项目。Controller能够输出。搭建过程请参考我的其他博文。 2、指定spark版本： <properties><java.version>1.8</java.version><spark.version>3.1.2</spark.version><scala.version>2.12</scala.version></properties> ...
配置idea的pom.xml文件遇到的问题
pangsg的博客
04-03 3309
今天在配置idea的pom.xml时遇到了一些问题提示我dependency 'org.apache.spark:spark-core_2.1.4:2.1.0 'not found 我就奇怪了，因为我的版本就是spark2.1.0、scala版本就是2.1.4 ，为什么会提示错误呢？我打开了我的spark文件夹，找一下这个jar包，发现版本果然有问题于是把中scala.version改为2.11就...
cdh hive on spark_Flink 与 Hive 的磨合期
weixin_39771351的博客
11-20 179
有不少读者反馈，参考上篇文章《Hive 终于等来了 Flink》部署 Flink 并集成 Hive 时，出现一些 bug 以及兼容性等问题。虽已等来，却未可用。所以笔者增加了这一篇文章，作为姊妹篇。回顾在上篇文章中，笔者使用的 CDH 版本为 5.16.2，其中 Hive 版本为 1.1.0（CDH 5.x 系列 Hive 版本都不高于 1.1.0，是不是不可理解），Flink 源代码本身对 Hi...
Unresolved Maven dependencies
热门推荐
qq_27275851的博客
07-29 1万+
在使用maven搭建springcloud项目的时候发现老师在maven依赖里面报错 Unresolved Maven dependencies “xxx.xxx.jar”。 这是由于maven没有下载到对应的jar包，或者jar包下载错误了。 本人分析可能原因有两种： 1.jar包没有下载完，我们可以手动打开本地maven仓库找到对应的jar包，然后把jar包删除重新下载，下载完后把pom中的d...
Spark常见问题汇总
aiwode1234的专栏
05-16 1181
注意：如果Driver写好了代码，eclipse或者程序上传后，没有开始处理数据，或者快速结束任务，也没有在控制台中打印错误，那么请进入spark的web页面，查看一下你的任务，找到每个分区日志的stderr，查看是否有错误，一般情况下一旦驱动提交了，报错的情况只能在任务日志里面查看是否有错误情况了1、Operation category READ is not supported in state
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值