一次生产服务器大量CLOSE_WAIT事件排查

最新推荐文章于 2023-05-19 20:04:00 发布
最新推荐文章于 2023-05-19 20:04:00 发布
阅读量640 收藏 1
点赞数
分类专栏： linux系统
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/a807719447/article/details/103420055
版权

我们知道CLOSE_WAIT出现得原因就是服务器断开连接后没有经历最后一步挥手。那么当服务器出现大量CLOSE_WAIT得时候不要去怀疑别人是否有问题，问题肯定是这台服务器应用程序出问题了。

首先我们可以先统计下 CLOSE_WAIT 得数量与进程关系统计

netstat -anop|grep CLOSE_WAIT |awk '{print $7}'|sort|uniq -c

统计结果

     1 4581/java
      6 4762/java
      1 4826/java
      1 56211/java
      2 7285/java

在针对相关进程号去查看应用出了什么事情

起风哥
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
close wait 过多原因_springboot tomcat 挂掉，假死无响应原因总结和解决方案
weixin_39591916的博客
11-22 2553
tomcat假死原因以前遇到tomcat莫名奇妙的假死了，没有任何的响应，然后重启后又可以了，隔段时间又假死了。以前不懂的处理和排除原因，纠结的半死。无从入手，都想砸电脑，小伙伴们有遇到过，我遇到过4次。其实tomcat假死引起的原因有很多，要具体分析一下和排查一下。tomcat假死有以下几种可能的原因：redis的连接池资源没释放掉(tcp没释放掉，tcp状态为close_wait)数据库连接池...
Spring Cloud Eureka 最新最全解析及问题解决-笔记
陌尘吖的博客
08-23 612
Spring Cloud Eureka 1、概述 1.1、服务治理 Spring Cloud 封装了 Netflix 公司开发的 Eureka 模块来实现服务治理 在传统的 rpc 远程调用框架中，管理每个服务与服务之间依赖关系比较复杂，管理比较复杂，所以需要使用服务治理，管理服务与服务之间的依赖关系，可以实现服务调用、负载均衡、容错等，实现服务发现与注册。 1.2、服务注册与发现 Eureka 采用了 C/S 的设计架构，Eureka Server 作为服务注册功能的服务器，他是服务注册中心。而系统中的其
Zuul转发请求时出现单个服务请求卡死并大量CLOSE_WAIT的原因
weixin_42305433的博客
02-17 1773
Zuul转发请求时出现单个服务请求卡死并大量CLOSE_WAIT的原因背景第一次定位 背景 最近工作中遇到了一个问题，比较奇怪，生产环境上各个服务的请求均正常，但是有一个服务A，只要启动后，经过一段时间，再去通过浏览器访问这个服务的页面，就会一直转圈圈，此时这个服务的actuator接口是正常的，需要重启zuul就能恢复正常，但F5一会这个A服务的页面，就又会卡死，神奇的是，同样的服务A和Zuul网关版本，在不同的环境上，有时会出现，有时不出现，甚至后来问题的现象从单个服务A的不可用，变成了整个系统的无响应
SpringCloud-Zuul
godme
05-03 132
POM <dependency> <groupId>org.springframework.cloud</groupId> <artifactId>spring-cloud-starter-netflix-zuul</artifactId> <v...
服务器各种网络端口80 8080 8084处于 CLOSE_WAIT状态
yilegel写一写
09-10 1322
原因：直接打开了NGINX，没有通过systemctl 测试NGINX服务器的时候，直接在…/bin/下打开了nginx服务。
Java面试题
zhanglinlove的博客
11-15 1135
有两个字符串String s1 = “38948598490”; String s2 = “398758476”; 可能超出了long的范围，要求相加并返回字符串的值。 解答： char[] a1 = s1.toCharArray(); char[] a2 = s2.toCharArray(); StringBuilder sb = new StringBuilder(); int ...
tcp连接出现close_wait状态？_tcp_close_
09-30
在Close_Wait状态下，服务器需要等待两个事件之一发生： - 完成向客户端发送所有未发送的数据。 - 接收到客户端的FIN报文，表明客户端也准备好关闭连接。 3. **TCP四次挥手** - 第一次挥手：客户端发送FIN报文...
TCP的状态兼谈Close_Wait和Time_Wait的状态
05-07
TCP（Transmission Control Protocol）是一种面向连接的、可靠的传输层协议，它通过三次握手建立连接，四次挥手断开连接。TCP的状态转换模型是理解TCP工作原理的关键，它确保了数据的正确传输和连接的可靠建立与关闭...
CLOSE_WAIT错误详解
07-19
在TCP/IP协议栈中，CLOSE_WAIT是一个非常关键的连接状态，它涉及到客户端和服务器之间的通信。这个状态在处理网络连接时可能出现的问题时尤其重要。本文将深入探讨CLOSE_WAIT错误的含义、原因以及如何解决。 首先，...
TCP.zip_tcp 握手
09-24
2. 第二次挥手：另一方（被动关闭方）收到FIN后，发送一个ACK报文，确认序号为收到的序列号加1，然后进入CLOSE_WAIT状态，表示接收完了所有数据，但还有数据要发送。 3. 第三次挥手：被动关闭方发送自己的FIN报文，...
记录一次服务器产生大量close_wait的过程
qq_15070281的博客
11-02 512
参考文章：https://blog.csdn.net/liu_baoqing/article/details/51306647 最近在测试环境发现请求总是很慢，有的时候还会存在请求失败的问题，查询资料排查了一下，测试环境在内网，因为上个版本要调试微信公众号，在外网182开了一个二级域名并代理穿透到内网233，前后端分离的情况下（前端使用的vue），前端打包用的外网的域名调的后端的API，但是本次版...
close wait 过多原因_面试官问：大量的 TIME_WAIT 状态 TCP 连接，对业务有什么影响？怎么处理？...
weixin_39732609的博客
11-28 338
★★★建议星标我们★★★公众号改版后文章乱序推荐，希望你可以点击上方“Java进阶架构师”，点击右上角，将我们设为★“星标”！这样才不会错过每日进阶架构文章呀。2020年Java原创面试题库连载中【000期】Java最全面试题库思维导图【001期】JavaSE面试题(一)：面向对象【002期】JavaSE面试题(二)：基本数据类型与访问修饰符【003期】JavaSE面试题(三)：Java...
服务超时问题
jiangxiaoma111的专栏
02-22 2110
背景 上游一个服务在调用我们服务的时候突然出现了大量的超时。首先怀疑的是docker机器又挂掉了，然后看了下服务的调用量监控,如下图。 [外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-2BI1rZPF-1582352772453)(/assets/img/tcp_q1.png)] 从图中可以看出服务是在某个时间点突然没有任何流量（或者是服务本身问题导致不能上报监控指...
springboot配置http连接超时时间主动断开避免产生大量close_wait
初心不改
05-19 6565
与客户端联调接口，通信方式使用http连接，客户端设置了发起请求后10s就断开连接，然后果不其然，我在服务端这边收到了大量的close_wait状态，最终导致接口不可用。close_wait产生的原因就是客户端断开了连接但是没有发FIN给到服务端，所以服务端不知道还一直在跟客户端通信。
一次线上问题处理——服务大量网络连接处在close_wait状态
dmwangi的博客
05-15 2986
微服务大量连接处在close_wait起因第一轮分析新的疑问 起因 昨天早上9.30刚上班，嘴里还吃着热干面，测试发了一个截图，说是全球内测环境有个接口错误，老大看了之后，问到是不是notice（一个发送邮件短信的微服务）挂了？并随之@我了。（我内心一整狂喜，哈哈哈，总算不用天天写文档了） 第一轮分析 我先按照吩咐看下是不是挂了，看了下eureka，发现没挂啊 在看了一下springbootadmin显示，ok，果然offline了。 不知道各位看到这里有没有一个初步的结论，没有？哈哈，我一看到
Tomcat 假死原因分析
coder 的历程
11-01 1059
                                           Tomcat 假死原因分析报告       最近监控服务发现有台tomcat 的应用出现了无法访问的情况 ，由于已做了集群，基本没有影响线上服务的正常使用。下面来简单描述该台tomcat当时具体的表现：客户端请求没有响应，查看服务器端tomcat 的java 进程存活，查...
一次服务端大量CLOSE_WAIT问题的解决
热门推荐
Hello World
03-27 6万+
今天在运行服务器的时候发现一个问题，问题的表现是客户端一直在请求，但是返回给客户端的信息是异常，服务端压根没有收到请求，查看了一下配置信息没有错误，首先查看了一下是不是服务器的连接已经满了，打开netstat命令发现服务器的连接有大量的CLOSE_WAIT状态的socket，没怎么遇到这个问题，开始还真有段懵了，第一反应就是是不是客户端的问题（是不是出问题的第一反应都是别人的问题），但是马上补充了
SpringBoot工程假死，如何揪出幕后真凶的？
Cmainlove的专栏
04-09 5279
SpringBoot工程假死，如何揪出幕后真凶的？ 工作中经常会遇到程序不响应，但是进程依然存活的现象。原因有很多，比如 内存、CPU占满了（500，连接超时） 磁盘满了（500，连接超时） 今天笔者遇到的不是前两种，原因也很稀奇，tomcat线程池耗尽了，导致500连接超时。 我们是一个spring boot工程，对外提供rest接口服务，但是隔三差五的就会出现500连接超时的现象。 排除了内存、CPU、磁盘占满的case后，有个同事无意中发现这台机器出现了大量的网络连接CLOSE_WAIT。查询资料
如何解决服务器端大量close_wait
最新发布
11-24
服务器端大量的close_wait状态通常是由于服务器程序没有正确地关闭网络连接导致的。为了解决这个问题，可以采取以下几种方法： 1. 关闭连接前确保双方都关闭了连接：在服务器程序中，确保在关闭连接之前发送一个关闭请求给客户端，要求其关闭连接。这样可以避免服务器端出现大量的close_wait状态。 2. 设置合适的超时时间：在服务器程序中，为每个网络连接设置一个合适的超时时间。如果连接在超过一定时间内没有活动，那么服务器可以主动关闭连接，避免出现close_wait状态。 3. 使用连接池管理连接：通过使用连接池管理服务器和客户端之间的连接，能够更好地控制连接的创建和关闭。在每个连接使用完毕后，将其放回连接池中，而不是立即关闭。这样可以避免频繁创建和关闭连接，减少close_wait状态的产生。 4. 检查服务器程序的bug：关闭连接后产生大量的close_wait状态可能是服务器程序中存在的bug导致的。检查服务器程序的代码，确保在每个连接关闭的地方都正确处理了关闭连接的操作，避免出现资源泄漏问题。 综上所述，解决服务器端大量close_wait状态的问题需要深入分析服务器程序的代码和连接管理机制，确保连接在合适的时候被关闭，避免出现close_wait状态。同时，合理设置超时时间和使用连接池等方法也可以减少close_wait状态的产生。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值