记录一次生产环境接口网关超时504timeout问题

文章描述了一个生产环境中遇到的问题,即接口频繁返回504网关超时错误。原因是使用jetCache时未及时释放资源,导致连接池中的资源耗尽,进而引起线程阻塞和同步锁问题。通过jstack分析确认了问题所在,并提出了修改代码以确保每次使用jetCache后立即释放资源的解决方案。
摘要由CSDN通过智能技术生成

问题场景:生产环境频繁网关超时504timeout,前端请求接口很久才返回,并且返回的是504网关超时

产生原因:由于项目中使用到了jetCache,每次获取jetCache对象之后没有主动去释放资源,导致资源被占满了,此时其他线程再次获取jetCache资源的时候就会一直在等待中,而刚好获取这个jetCache缓存的地方被加上了同步锁,导致同步锁里的代码块一直在等待获取jetCache资源,而此时连接池最大连接数设置的16,16个资源被拿空了一直没有释放,导致同步锁里的代码块获取jetCache对象一直等待获取该资源,导致其他线程想执行这个同步代码块只能阻塞等待这个同步方法结束!所以线程出现了阻塞的情况 导致接口一直响应超时

排查方式:通过jstack查询jvm线程执行信息,发现每个线程都在阻塞等待这个同步代码块执行完,再该线程里发现了获取jetCache资源的信息,后面推断是因为获取了jetcache资源 没有主动释放 导致jetcache资源池的对象被借空,所以其他线程获取jetcache资源时处理一直等待状态。

处理方法:修改获取jetCache的代码,优化成每次获取jetCache对象后,业务代码逻辑执行完之后都去释放jetCache资源!

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
接口504超时是指在客户端和服务器之间的或代理服务器无法在规定的时间内完成请求。这可能是由于服务器负载过重、络连接问题或代理服务器出现故障等原因引起的。 当客户端向服务器发送请求时,服务器并未在规定的时间内回复。这种情况可能是由于服务器无法处理来自客户端的请求,或者客户端无法接收到服务器的响应。出现接口504超时错误时,客户端会收到一个错误页面或者错误消息。 要解决接口504超时错误,可以采取以下几个步骤: 1. 检查络连接:确保客户端和服务器之间的络连接正常。可以通过尝试访问其他站来检查络是否正常工作。如果络存在问题,可以尝试重启路由器或者联系络服务提供商进行故障排查。 2. 检查服务器负载:如果服务器负载过重,可能无法及时处理来自客户端的请求。可以联系服务器管理员或者运维团队,了解服务器的负载情况,并根据需要进行调整或升级。 3. 检查代理服务器:如果使用了代理服务器,可能是代理服务器出现了故障。可以尝试绕过代理服务器直接连接目标服务器,看是否能够正常访问。如果问题仅出现在使用代理服务器时,可以联系代理服务器的管理员或者提供商,寻求帮助修复问题。 4. 增加请求超时时间:有时候服务器处理请求的时间较长,超出了客户端的请求超时时间设置。可以尝试增加请求超时时间,以给服务器更多的时间来处理请求。 总的来说,接口504超时是一种常见的络错误,可能由多种原因导致。通过检查络连接、服务器负载、代理服务器以及请求超时时间等方面,可以有针对性地解决这个问题,确保正常的请求和响应。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值