jedisPool报错没有可用连接

最近生产环境频繁报错:

redis.clients.jedis.exceptions.JedisConnectionException: Could not get a resource from the pool
...
Caused by: java.net.ConnectException: Cannot assign requested address (connect failed)
	at java.net.PlainSocketImpl.socketConnect(Native Method)
	at java.net.AbstractPlainSocketImpl.doConnect(AbstractPlainSocketImpl.java:350)
	at java.net.AbstractPlainSocketImpl.connectToAddress(AbstractPlainSocketImpl.java:206)
	at java.net.AbstractPlainSocketImpl.connect(AbstractPlainSocketImpl.java:188)
	at java.net.SocksSocketImpl.connect(SocksSocketImpl.java:392)
	at java.net.Socket.connect(Socket.java:589)
	at redis.clients.jedis.Connection.connect(Connection.java:158)

直接说解决方案:

1. 查看服务器redis连接数
# 查看redisIp:port所有的连接数
netstat -ant | grep redisIp:port | wc -l
# 查看正在使用连接数
netstat -ant | grep redisIp:port | grep ESTABLISHED | wc -l

我的查看之后,发现生产其中两台连接数占用超过55758个redis连接,并且状态 ESTABLISHED ; 初步怀疑是因为连接没有释放导致的;

2. 排查代码

项目中有通过redis实现分布式锁,怀疑是这块导致的,但排查无果,最终在同事的帮助下,发现一行代码:

if ("PONG".equals(JedisUtils.getJedis().ping())) {...}

其中JedisUtils.getJedis()表示从jedisPool中获取一个连接,从代码中可以看出,它使用完之后,并没有释放连接;而这个方法在某业务中每天大概被调用1W左右,所以导致2-3天就会出现redis.clients.jedis.exceptions.JedisConnectionException: Could not get a resource from the pool问题;

3. 预防措施

通过shell监控tcp连接情况,当发现某ip有大量连接数超过(比如200)的情况下,发送告警消息; shell脚本可以参考:shell案例,第6小节内容

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值