org.apache.hadoop.yarn.api.records.LocalResource.setShouldBeUploadedToSharedCache(Z)V

最新推荐文章于 2023-06-05 16:34:14 发布
最新推荐文章于 2023-06-05 16:34:14 发布
阅读量1.9k 收藏
点赞数
文章标签： mapreduce hbase
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/THIS_GIRL/article/details/121900956
版权

在运行Hbase和Mapreduce结合案例时，出现Exception in thread “main” java.lang.AbstractMethodError: org.apache.hadoop.yarn.api.records.LocalResource.setShouldBeUploadedToSharedCache(Z)V 的异常。

原因是导的包相互冲突
我用的hbase版本是1.3.5,Hadoop版本是2.6.7
在导入的hbase-server里面，我看到导入了一些2.5.1版本的Hadoop相关的包，有一些被我导入的2.7.6版本覆盖掉了，但org.apache.hadoop:hadoop-auth:2.5.1和org.apache.hadoop:hadoop-mapreduce-client-core:2.5.1
没有被覆盖掉，我猜想它们可能和hadoop 2.7.6版本不匹配
在这里插入图片描述
在这里插入图片描述
于是将这个两个包对应的2.7.6版本导入进来，将2.5.1版本覆盖掉，问题解决！

今天不读书书书
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Java-org.apache.hadoop
06-02
Java-org.apache.hadoop是Apache Hadoop项目的核心组件，它在分布式计算领域扮演着至关重要的角色。Hadoop是由Apache软件基金会开发的一个开源框架，主要用于处理和存储大量数据。它设计的初衷是为了支持数据密集型...
hadoop-2.7.3.tar.gz 下载 hadoop tar 包下载
05-17
Hadoop是Apache软件基金会开发的一个开源分布式计算框架，它允许在廉价硬件上处理大量数据，是大数据处理领域的重要工具。2.7.3是Hadoop的一个稳定版本，提供了可靠的分布式存储系统HDFS（Hadoop Distributed File ...
hadoop-yarn-api-2.5.1-API文档-中文版.zip
04-23
赠送jar包：hadoop-yarn-api-2.5.1.jar； 赠送原API文档：hadoop-yarn-api-2.5.1-javadoc.jar； 赠送源代码：hadoop-yarn-api-2.5.1-sources.jar； 赠送Maven依赖信息文件：hadoop-yarn-api-2.5.1.pom； 包含翻译后的API文档：hadoop-yarn-api-2.5.1-javadoc-API文档-中文(简体)版.zip； Maven坐标：org.apache.hadoop:hadoop-yarn-api:2.5.1； 标签：apache、hadoop、api、yarn、jar包、java、API文档、中文版； 使用方法：解压翻译后的API文档，用浏览器打开“index.html”文件，即可纵览文档内容。 人性化翻译，文档中的代码和结构保持不变，注释和说明精准翻译，请放心使用。
hadoop写MR程序报错java.lang.AbstractMethodError: org.apache.hadoop.yarn.api.records.LocalResource.setShou
qq_32736999的博客
12-07 1936
情况：在本地书写mapreduce的时候，运行driver类 开始跑任务的时候，有时候可能会报 java.lang.AbstractMethodError: org.apache.hadoop.yarn.api.records.LocalResource.setShouldBeUploadedToSharedCache(Z)V 解决：hadoop的jar包版本问题 这是我之前的默认版本 ...
spark 运行报错：java.lang.AbstractMethodError
weixin_30342827的博客
05-23 387
报错日志如下： Caused by: java.lang.AbstractMethodError: sparkCore.JavaWordCount$2.call(Ljava/lang/Object;)Ljava/lang/Iterable; at org.apache.spark.api.java.JavaRDDLike$$anonfun$fn$1$1.apply(JavaRDDLike....
Spark使用yarn提交任务式遇到Exception in thread "main" java.lang.AbstractMethodError
kuangk0125的专栏
03-10 1738
Spark使用yarn提交任务式遇到Exception in thread "main" java.lang.AbstractMethodError 20/03/10 11:18:13 INFO Client: Setting up the launch environment for our AM container 20/03/10 11:18:13 INFO Client: Prepari...
Java集成Yarn并操作集群的Yarn资源
qq_37928228的博客
06-05 1063
Java集成Yarn并操作集群的Yarn资源
【Spark】六、org.apache.hadoop.security.AccessControlException
01-09
Exception in thread main org.apache.hadoop.security.AccessControlException: Permission denied: user=L.MOON, access=WRITE, inode=/user/lsy/result1/_temporary/0:lsy:supergroup:drwxr-xr-x Caused by: org....
大数据 （011）Hadoop-MR执行环境之---总述+本地测试环境讲解
张--小涛涛
08-03 2280
总述 上一章中我们是本地开发好打jar包上传至服务器进行执行，但是开发过程中这样显然是行不通的，因此我们需要更多的执行环境。 MR执行环境有两种：本地测试环境，服务器环境 一、本地测试环境 本地开发好环境是在windows下执行的。通过eclipse可以看到执行信息。 二、服务器环境 首先需要在src下放置服务器上...
Exception in thread "main" java.lang.AbstractMethodError: org.springframework.boot.context.confi
liuhehe的博客
12-12 2188
现象 Exception in thread "main" java.lang.AbstractMethodError: org.springframework.boot.context.config.ConfigFileApplicationListener.supportsSourceType(Ljava/lang/Class;)Z at org.springframework.cont...
Idea运行报错Exception in thread “main“ java.lang.AbstractMethodError怎么回事
weixin_45645794的博客
08-06 2703
Exception in thread “main” java.lang.AbstractMethodError 在Idea运行时报错 找到Run->Edit Configurations点进去 选择JAR manifest这个再运行一下就好了
spark streaming 启动报错 Exception in thread main java lang AbstractMethodError
weixin_42496757的博客
05-28 537
Exception in thread "main" java.lang.AbstractMethodError at org.apache.spark.util.ListenerBus$class.$init$(ListenerBus.scala:34) at org.apache.spark.streaming.scheduler.StreamingListenerBus.<init>(StreamingListenerBus.scala:30) ...
hadoop Yarn 编程API
weixin_34178244的博客
04-02 684
客户端编程库： 所在jar包： org.apache.hadoop.yarn.client.YarnClient 使用方法： 1 定义一个YarnClient实例： private YarnClient client； 2 构造一个Yarn客户端句柄并初始化 this.client = YarnClient.createYarnClient(); client.in...
错误:no such method error:org.apache.hadoop.yarn.proto.YarnProtos$LocalResourceProto.hashLong(J)I
我的博客
10-26 4448
在玩hadoop的实例的时候，发现了这么一个错误： Exception in thread "main" java.lang.NoSuchMethodError: org.apache.hadoop.yarn.proto.YarnProtos$LocalResourceProto.hashLong(J)I at org.apache.hadoop.yarn.proto.YarnProtos$L
YARN SLS-AM请求资源的协议解析
hahachenchen789的博客
07-16 559
在slsrunner.java中： startAM-&gt;startAMFromSLSTrace-&gt;createAMForJob-&gt;runNewAM 在runNewAM函数中，最后两个参数很重要： private void createAMForJob(Map jsonJob) throws YarnException { ...... for (int i = 0;...
Hadoop3.0Yarn添加网络、磁盘IO等资源资料汇总及实战配置遇到的问题和解决办法
about云
01-22 1868
Hadoop3.0扩展Yarn资源，官网给了一些英文资料，这里about云翻译为中文资料。这些资料，还是比较多的，但是在初次阅读的时候，会感到摸不着头脑。但是书读百遍其义自见。下面对这些资料进行汇总。Hadoop3.0: YARN Resource自定义资源配置说明http://www.aboutyun.com/forum.php?mod=viewthread&tid=236261.yarn默认情
Hive异常--java.lang.NoSuchMethodError: org.apache.hadoop.yarn.api.records.Resource.setMemorySize(J)V...
weixin_30535167的博客
08-30 1027
错误异常如下所示： java.lang.NoSuchMethodError: org.apache.hadoop.yarn.api.records.Resource.setMemorySize(J)V 2018-08-30T14:06:08,442 ERROR [d95cabf4-1c04-4bad-9c6d-fa8651fba8f0 main] exec.TaskRunner: Erro...
java.lang.ClassNotFoundException: org.apache.parquet.hadoop.api.ReadSupport
最新发布
05-28
这个异常是Java中的一个运行时异常，通常出现在你运行的Java程序试图使用一个不存在的类时。具体地说，它表示Java虚拟机无法找到特定的类文件。 在你的问题中，这个异常的出现可能是因为程序试图使用了一个不存在或者不可用的类org.apache.parquet.hadoop.api.ReadSupport。这个类通常是Apache Parquet文件格式的Java读取器所依赖的类，所以你需要检查你的项目中是否包含了这个类，或者是否存在其他依赖于这个类的库文件没有被正确引用。 如果以上方法都无法解决问题，你可能需要考虑升级你的Parquet库或者重新构建你的项目，以便正确地引用所有必要的依赖项。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值