org.apache.hadoop.yarn.client.api.async.impl.AMRMClientAsyncImpl - Interrupted while waiting for qu

最新推荐文章于 2021-10-09 16:41:21 发布
最新推荐文章于 2021-10-09 16:41:21 发布
阅读量3.4k 收藏
点赞数
分类专栏： Spark 文章标签： spark 大数据 kafka ambari
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/RONE321/article/details/103955822
版权

今天用华为云MRS跑Spark On Yarn 报出一个没见过的错误

2020-01-13 10:49:44,667 [AMRM Callback Handler Thread] INFO  org.apache.hadoop.yarn.client.api.async.impl.AMRMClientAsyncImpl  - Interrupted while waiting for queue
java.lang.InterruptedException
	at java.util.concurrent.locks.AbstractQueuedSynchronizer$ConditionObject.reportInterruptAfterWait(AbstractQueuedSynchronizer.java:2014)
	at java.util.concurrent.locks.AbstractQueuedSynchronizer$ConditionObject.await(AbstractQueuedSynchronizer.java:2048)
	at java.util.concurrent.LinkedBlockingQueue.take(LinkedBlockingQueue.java:442)

这种情况下不要管这个错误，这时华为客户端报的错误，请到Yarn Log中查看具体的错误信息！
在这里插入图片描述好比如说这次我的错误是Redis的IP地址写错了，这里是Full Log 详细的错误就会在这里记录
在这里插入图片描述

Rone-X
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
Java-org.apache.hadoop
06-02
Java-org.apache.hadoop是Apache Hadoop项目的核心组件，它在分布式计算领域扮演着至关重要的角色。Hadoop是由Apache软件基金会开发的一个开源框架，主要用于处理和存储大量数据。它设计的初衷是为了支持数据密集型...
hadoop-3.1.1.3.1.4.0-315.tar.gz
10-11
ambari-2.7.5 编译过程中四个大包下载很慢，所以需要提前下载，包含：hbase-2.0.2.3.1.4.0-315-bin.tar.gz ，hadoop-3.1.1.3.1.4.0-315.tar.gz ， grafana-6.4.2.linux-amd64.tar.gz ，phoenix-5.0.0.3.1.4.0-315....
【Flink】Flink 消费kafka报错 AMRMClientAsyncImpl Interrupted while waiting for queue InterruptedException
九师兄
06-27 3102
1.背景 一个flink etl程序，读取一个kafka集群的数据，到两外一个集群，然后报错 2020-06-06 15:56:00 PM [Thread: flink-akka.actor.default-dispatcher-20][ Class:org.apache.flink.runtime.executiongraph.ExecutionGraph] INFO:Source: com.dbapp.ailpha.topic.securityalarm.copy -> filter_2 -&gt
【zookeeper】集群安装配置问题
coder learner
10-19 6617
Interrupted while waiting for message on queue不知道什么原因导致zookeeper的dataDir(conf/zoo.cfg dataDir=/root/zookeeper-3.3.6/zk)目录下的myid中的值全部改成一样，修改成正确的值就可以。Interrupted while waiting for message on queue java.l
AsyncTask源码翻译
张小丫的程序员的修行之路
07-08 679
前言： /** AsyncTask enables proper and easy use of the UI thread. This class allows to perform background operations and publish results on the UI thread without having to manipulate threads and/or
使用red5-1.0.6出现的异常情况 Interrupted while waiting for write lock
翻滚01
12-15 2106
由于red5-1.0.6加入处理死锁保护机制，red5默认分配的RTMPConnectionExecutor连接线程的时间是1秒钟，如果超过这个时间，red5会强制停止该线程。 这种情况可以在 red5.properties配置文件修改   rtmp.deadlockguard.max_handling_time参数设置大一些 默认值是 # maximum amount of
手把手带你撸zookeeper源码-zookeeper启动(四)leader选举投票发送以及响应
badly的博客
08-02 545
上篇文章手把手带你撸zookeeper源码-zookeeper启动(三)(zookeeper选举时是如何基于socket建立连接的)写了zookeeper集群之间如何基于socket建立的连接，连接建立完毕之后，接下来就是开始发送投票和接收投票，然后对投票结果进行整理，最终选定哪台服务器是leader，哪个是follower 本篇文章我们接着看一下投票数据是如何发送出去的，以及如何接收到其他zk服务器发送过来的投票数据 结合上篇文章所讲，我们知道，QuorumCnxManager.toSend()...
hadoop-yarn-client-2.6.5-API文档-中文版.zip
05-01
Maven坐标：org.apache.hadoop:hadoop-yarn-client:2.6.5； 标签：apache、client、hadoop、yarn、jar包、java、中文文档； 使用方法：解压翻译后的API文档，用浏览器打开“index.html”文件，即可纵览文档内容。 ...
hadoop-yarn-client-2.7.3-API文档-中英对照版.zip
07-14
Maven坐标：org.apache.hadoop:hadoop-yarn-client:2.7.3； 标签：apache、hadoop、yarn、client、中英对照文档、jar包、java； 使用方法：解压翻译后的API文档，用浏览器打开“index.html”文件，即可纵览文档内容...
hadoop-yarn-api-2.5.1-API文档-中文版.zip
04-23
Maven坐标：org.apache.hadoop:hadoop-yarn-api:2.5.1； 标签：apache、hadoop、api、yarn、jar包、java、API文档、中文版； 使用方法：解压翻译后的API文档，用浏览器打开“index.html”文件，即可纵览文档内容。 ...
hadoop-yarn-client-2.5.1-API文档-中英对照版.zip
07-14
Maven坐标：org.apache.hadoop:hadoop-yarn-client:2.5.1； 标签：apache、hadoop、yarn、client、中英对照文档、jar包、java； 使用方法：解压翻译后的API文档，用浏览器打开“index.html”文件，即可纵览文档内容...
hadoop-yarn-common-2.6.5-API文档-中文版.zip
04-07
对应Maven信息：groupId：org.apache.hadoop，artifactId：hadoop-yarn-common，version：2.6.5 使用方法：解压翻译后的API文档，用浏览器打开“index.html”文件，即可纵览文档内容。 人性化翻译，文档中的代码和...
hadoop-yarn-client-2.5.1-API文档-中文版.zip
07-14
Maven坐标：org.apache.hadoop:hadoop-yarn-client:2.5.1； 标签：apache、hadoop、yarn、client、中文文档、jar包、java； 使用方法：解压翻译后的API文档，用浏览器打开“index.html”文件，即可纵览文档内容。 ...
hadoop-2.7.3.tar.gz 下载 hadoop tar 包下载
05-17
Hadoop是Apache软件基金会开发的一个开源分布式计算框架，它允许在廉价硬件上处理大量数据，是大数据处理领域的重要工具。2.7.3是Hadoop的一个稳定版本，提供了可靠的分布式存储系统HDFS（Hadoop Distributed File ...
Android程序报错程序包org.apache.http不存在问题的解决方法
09-02
在Android开发过程中，有时会遇到一个常见的错误，即“程序包org.apache.http不存在”。这个问题主要出现在Android 6.0（API级别23）及更高版本，因为从Android M开始，官方已经移除了对Apache HTTP客户端库的支持。...
zookeeper 启动失败
热门推荐
wangxj_2017的博客
10-01 1万+
2017-10-01 11:36:55,983 [myid:0] - WARN  [RecvWorker:0:QuorumCnxManager$RecvWorker@762] - Connection broken for id 0, my id = 0, error =  java.io.EOFException at java.io.DataInputStream.readInt(Data
AsyncTask中线程池调度分析
Android学习之旅
01-10 3017
在Android中，和异步执行相关的两个类就是Handler和AsyncTask，所以Android开发人员对于这两个类是再熟悉不过了，所以这里我不是讲解AsyncTask怎么使用，而是想分析一下AsyncTask中线程池的调度过程，然后简单的介绍一下AsyncTask的源码以及Android3.0前后，AsyncTask中线程池的区别。
【zookeeper】Interrupted while waiting for message on queue
七夜之家
03-09 7443
Interrupted while waiting for message on queue java.lang.InterruptedException at java.util.concurrent.locks.AbstractQueuedSynchronizer$ConditionObject.reportInterruptAfterWait(AbstractQueuedSynchron
Hadoop yarn源码分析(一) ApplicationMaster源码分析 2021SC@SDUSC
LeBron_W的博客
10-09 793
Hadoop源码分析(一) ApplicationMaster ApplicationMaster简介 Yarn的三大核心组件为ResourceManager(RM)，ApplicationMaster(AM)，NodeMananger(NM)。ApplicationMaster实际上是特定计算框架的一个实例，负责单个作业的管理和任务监控。AM负责与RM协商资源，并和NM协同来执行和监控Container。MapReduce只是可以运行在Yarn上的一种计算框架。 ApplicationMaster的运行
配置Hadoop集群：core-site, hdfs-site, yarn-site.xml详解
- `hadoop.tmp.dir`: 这个属性定义了Hadoop临时文件的存储目录，设置为`/opt/module/hadoop-3.1.3/data`，这是Hadoop运行时用于存放数据块副本和其他临时文件的地方。 - `hadoop.http.staticuser.user`: 配置HDFS ...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值