hadoop报错INFO ipc.Client: Retrying connect to server解决

最新推荐文章于 2022-02-13 00:46:32 发布
最新推荐文章于 2022-02-13 00:46:32 发布
阅读量1w 收藏 4
点赞数 6
分类专栏： Experience
懒羊羊
本文链接：https://blog.csdn.net/kangqiao0422/article/details/121752717
版权

hadoop big data 大数据 分布式 hdfs

报错INFO ipc.Client: Retrying connect to server

1. 问题引申

测试集群组件，使用IDEA打了jar包抛在集群上跑任务，遇到一直尝试连接error，纠正error，以作记录

2. 报错展示

error

3. 纠错思路

初始集群启动，只起了NN，DN，SNN

在这里插入图片描述

查阅logs日志，寻找error，二次启动yarn，得已解决

start-yarn.sh

在这里插入图片描述

4. 避坑指南

做小型集群测试时，启动尽量避免分批次启动任务

start-all.sh

在这里插入图片描述

5. 测试结果在这里插入图片描述

6. 问题扩展

端口占用引起的error，与之类似，有兴趣的朋友自己去研究下，比较好解决，在此不做记录。

了解更多知识请戳下：

@Author:懒羊羊

会撸代码的懒羊羊
关注
  • 6
    点赞
  • 踩
  • 4
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 8
    评论
专栏目录
Retrying connect to server 0.0.0.08032异常.md
11-18
向yarn提交任务时Retrying connect to server 0.0.0.0:8032异常
org.apache.hadoop.ipc.Client: Retrying connect to server
03-26
NULL 博文链接：https://ouyida3.iteye.com/blog/1144326
hadoop中 INFO ipc.Client: Retrying connect to server错误解决办法
weixin_44704605的博客
11-03 4058
在hadoop中运行hadoop jar MapReduce-1.0-SNAPSHOT.jar SexAndAge.AvgDriver时出现： 20/11/02 20:21:18 INFO client.RMProxy: Connecting to ResourceManager at node01/192.168.10.111:8032 20/11/02 20:21:20 INFO ipc.Client: Retrying connect to server: node01/192.168.10.111:
Error: INFO ipc.Client: Retrying connect to server: Already tried XXX time(s).
大黄的博客
02-13 8175
首先，这个坑逼错误可能是由于端口号没有开启导致的（比如9000端口），使用命令查看一下相应端口号是否存在。 sudo netstat -tpnl 若看到9000端口，则说明端口号正常开启，导致报错的原因是主节点9000端口打开了，但是不允许远程访问。 若未看到9000端口，说明datanode以及namenode没有成功启动，此时可以看一下配置文件（core-site.xml以及hdfs-site.xml）是否出现问题，真不行的话格式化namenode，命令如下。之后重启hdfs。 hdf.
org.apache.hadoop.ipc.Client: Retrying connect to server异常的解决
jishublog
06-20 1247
检查发现是DataNode一直连接不到NameNode。 检查各个节点在etc/hosts中的配置是否有127.0.1.1 xxxxxx。如果有把其屏蔽或者删除，重启各节点即可。 原因：127.0.1.1是debian中的本地回环。这个造成了hadoop解析出现问题。这个设置应该是在做伪分布式的hadoop集群的时候，留下来的。 如果照上面的方法还是出现同样的问题，或者etc/hos...
hadoop错误：INFO org.apache.hadoop.ipc.Client: Retrying connect to server
热门推荐
薛定谔的哈士奇博客
06-02 2万+
启动时错误：INFO org.apache.hadoop.ipc.Client: Retrying connect to server1    netstat   -an|grep 8020有类似tcp    0    0    127.0.0.1:8020        0.0.0：*    LISTEN说明只是进行了本地端口的监听，则进行如下修改:进入sudo vim /etc/hosts查看...
hadoop异常：虚拟机上搭建分布式集群org.apache.hadoop.ipc.Client: Retrying connect to server
Rocky
09-01 1468
hadoop异常：虚拟机上搭建分布式集群org.apache.hadoop.ipc.Client: Retrying connect to server
Hadoop client server通讯分析
04-02
在Hadoop中，客户端（Client）负责提交任务、读写数据，而服务器端则包括NameNode、DataNode和TaskTracker等组件，它们处理客户端请求，管理数据存储和任务调度。 二、HDFS通信 1. 客户端与NameNode交互： 当...
Hadoop 启动WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform… using
01-09
搭建hadoop 环境时遇到启动异常告警问题 “WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform… using builtin-java classes where applicable” 上来不多说，百度收集些相关...
HDFS上传文件报错org.apache.hadoop.fs.ChecksumException: Checksum error: file:/hyk/data/hyk.txt
01-07
当从本地上传文件到HDFS中...org.apache.hadoop.fs.ChecksumException: Checksum error: file:/hyk/data/hyk.txt [root@node01 data]# hadoop fs -put hyk.txt /hyk/test 20/02/18 12:54:39 INFO fs.FSInputChecker: Fo
hadoop数据节点通信异常【启动hadoop集群遇到错误org.apache.hadoop.ipc.Client: Retrying connect to server】
Thinking
01-15 4056
文章来源：http://anyoneking.com/archives/594 hadoop数据节点通信异常 2013-04-21 16:37   | By: 懒散狂徒  | Hadoop  | 13,898 views  | 抢沙发   | 在前几天，我们的hadoop集群很不稳定。经常会有1个数据节点挂掉。使用jps查看，tasktracker和datanode均正
hadoop无法启动 INFO ipc.Client: Retrying connect to server
weixin_31351409的博客
01-07 2542
18/01/07 02:05:32 INFO ipc.Client: Retrying connect to server: master/192.168.157.10:9000. Already tried 0 time(s); retry policy is RetryUpToMaximumCountWithFixedSleep(maxRetries=10, sleepTime=1 SECON...
异常：org.apache.hadoop.ipc.Client: Retrying connect to server: 0.0.0.0/0.0.0.0:8031. Already tried
freedom_zzz的博客
09-01 1764
项目场景： 提示：Hadoop 集群版本为3.2.2 问题描述： 在启动 Hadoop 集群后，nodemanager 日志一直提示： INFO org.apache.hadoop.ipc.Client: Retrying connect to server: 0.0.0.0/0.0.0.0:8031. Already tried 7 time(s); retry policy is RetryUpToMaximumCountWithFixedSleep(maxRetries=10, sleepTim
ipc.Client: Retrying connect to server: localhost/127.0.0.1:54310. Already tried
domenic00的专栏
04-17 258
ipc.Client: Retrying connect to server: localhost/127.0.0.1:54310. Already tried 问题是可能是由于hdfs format失败引起的，format失败的原因可能是用户对/tmp/hadoop的目录的权限不够，可以执行 sudo chown -R user /tmp/hadoop...
INFO org.apache.hadoop.ipc.Client - Retrying connect to server: 0.0.0.0/0.0.0.0:10020.
qq_42039996的博客
08-28 536
因为我的是用windows连接虚拟机进行mapreduce的一些实验，虚拟机上搭建的hadoop集群，出现这种问题伴随的还有无法用虚拟机主机名访问hadoop网页都是由于没有在本地windows的hosts文件下设置 ip:namenode 我的是192.168.199.129:master加上以后包括下面这个问题也一并解决了。 Failed to contact AM/...
错误ipc.Client: Retrying connect to server:master/192.168.0.55解决方法
xwdreamer的专栏
10-09 2万+
很诡异的一个问题，为的整个conf文件中没有一个是关于master的，但是想让wordcount在java application下运行，就会出现上述错误。 网上找了一些资料说是localhost对应的是127.0.0.1，而和当前的192.168.0.42的ip不相同造成的。
INFO ipc.Client:Retrying connect to server 9000
weixin_33995481的博客
10-09 345
hadoop使用bin/start_all.sh命令之后，使用jps发现datanode无法启动 This problem comes when Datanode daemon on the system does not start.check the started daemons using "jps" command. If it in not started,start Datano...
评论 8
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

会撸代码的懒羊羊

打赏5元，买杯咖啡醒，继续创作

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值