zookeeper: Connection reset by peer

WARN 1927 — [ad(slave1:2181)] org.apache.zookeeper.ClientCnxn : Session 0x0 for server slave1/xx.xx.xx.xx:2181, unexpected error, closing socket connection and attempting reconnect
java.io.IOException: Connection reset by peer
问题描述:最近在研究zookeeper做分布式锁,写测试代码的时候,起了1000个线程去模拟并发操作,这个时候控制台报错了,错误代码如下:

2020-05-05 13:09:10.015  WARN 1927 --- [ad(slave1:2181)] org.apache.zookeeper.ClientCnxn          : Session 0x0 for server slave1/xx.xx.xx.xx:2181, unexpected error, closing socket connection and attempting reconnect

java.io.IOException: Connection reset by peer
	at sun.nio.ch.FileDispatcherImpl.read0(Native Method)
	at sun.nio.ch.SocketDispatcher.read(SocketDispatcher.java:39)
	at sun.nio.ch.IOUtil.readIntoNativeBuffer(IOUtil.java:223)
	at sun.nio.ch.IOUtil.read(IOUtil.java:192)
	at sun.nio.ch.SocketChannelImpl.read(SocketChannelImpl.java:380)
	at org.apache.zookeeper.ClientCnxnSocketNIO.doIO(ClientCnxnSocketNIO.java:68)
	at org.apache.zookeeper.ClientCnxnSocketNIO.doTransport(ClientCnxnSocketNIO.java:366)
	at org.apache.zookeeper.ClientCnxn$SendThread.run(ClientCnxn.java:1145)

通过网上查找资料发现是因为zookeeper的参数maxClientCnxns导致的,
默认zoo.cfg里面的maxClientCnxns参数的值为60,表示最多有60个客户端保持连接,由于我们程序中起了1000个连接,所以控制台打印连接不上,我们只需要在zoo.cfg文件中修改maxClientCnxns这个配置即可,我将配置文件的参数的值改成了1000;

# The number of milliseconds of each tick
tickTime=2000
# The number of ticks that the initial
# synchronization phase can take
initLimit=10
# The number of ticks that can pass between
# sending a request and getting an acknowledgement
syncLimit=5
# the directory where the snapshot is stored.
# do not use /tmp for storage, /tmp here is just
# example sakes.
dataDir=/tmp/zookeeper/data
dataLogDir=/tmp/zookeeper/log
# the port at which the clients will connect
clientPort=2181
# the maximum number of client connections.
# increase this if you need to handle more clients
#maxClientCnxns=60
#
# Be sure to read the maintenance section of the
# administrator guide before turning on autopurge.
#
# http://zookeeper.apache.org/doc/current/zookeeperAdmin.html#sc_maintenance
#
# The number of snapshots to retain in dataDir
#autopurge.snapRetainCount=3
# Purge task interval in hours
# Set to "0" to disable auto purge feature
#autopurge.purgeInterval=1
maxClientCnxns=1000
  • 1
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
Hadoop中的"java.io.IOException: Connection reset by peer"错误通常表示与某个节点的连接被重置了。这可能是由于网络问题、节点故障或配置错误引起的。解决此问题的方法包括以下几个步骤: 1. 检查网络连接:确保网络连接正常,没有丢包或延迟等问题。可以使用ping命令或其他网络诊断工具来测试网络连接。 2. 检查节点状态:查看节点的健康状态,确保节点正常运行。可以检查节点的日志文件或使用Hadoop的监控工具来监视节点的状态。 3. 检查配置文件:检查Hadoop集群的配置文件,特别是与网络连接相关的配置。确保配置文件中的所有节点的IP地址和端口号正确,并且与集群中其他节点的配置一致。 4. 检查Zookeeper日志:如果使用了Zookeeper作为Hadoop集群的协调服务,可以查看Zookeeper的日志文件,寻找关于连接被关闭的错误信息。这些日志可能提供有关连接关闭的更多详细信息。 5. 调整配置参数:如果在Zookeeper日志中发现了连接数超过限制的错误信息,可以尝试调整Zookeeper的配置参数以增加最大连接数。修改Zookeeper配置文件中的maxClientCnxns参数,并重启Zookeeper服务使配置生效。 请注意,解决此错误可能需要进一步的调试和排查,具体的解决方法可能因情况而异。建议参考Hadoop和Zookeeper的官方文档,以获取更详细的指导和建议。<span class="em">1</span><span class="em">2</span><span class="em">3</span><span class="em">4</span>

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值