集成HttpClient，配置不当，导致连接数沾满，请求阻塞问题

最新推荐文章于 2024-08-27 19:45:00 发布
最新推荐文章于 2024-08-27 19:45:00 发布
阅读量1k 收藏
点赞数
分类专栏： HttpClient springboot 文章标签： java http
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/angela_csdn/article/details/107831200
版权

在这里插入图片描述
直接return即可，使用HttpClient配置的连接回收机制

return EntityUtils.toString(response.getEntity(), "UTF-8");

如没有配置，可手动在抛出异常，或者非200时手动关闭
对应的 httpPost .abort()就是关闭这个连接，而并非关闭整个连接池或者client。

猫淼淼
关注
专栏目录
一次httpclient长连接高并发问题的解决历程与研究总结
qq_36261538的博客
12-15 3606
相关背景 一个基于es的搜索项目，生产环境中目前qps为4w多，所有的业务请求通过soa落在搜索微服务集群，微服务集群中每台机器底层通过httpclient请求SLB(service load balance)，SLB核心为Nginx，最终Nginx将请求分发至es物理机集群计算并返回 问题描述 生产搜索微服务间歇性告警，主要为NoHttpResponseException: ***...
HttpClient引起的TCP连接数高的问题分析
haicunzaima的专栏
02-22 1604
【问题现象】 系统上线后出现TCP连接数超过预期阀值，最高值达到8K左右，新上线代码中包含了一文件上传操作，使用的是apache的commons-httpclient包。   【问题分析】 1、先确认是否存在连接未关闭问题引起的。 观察发现，TCP连接数不是一直在增长，而是会有所下降。并且当业务低峰期TCP连接数TCP连接数会降到100左右，这说明TCP连接还是会关闭。   2、...
HttpClient 如何正确的释放资源
oscar999的专栏
01-03 4479
使用HttpClient 访问会涉及到三个层次的资源， 从上往下依次是： 1. HttpClient 类型的对象。这是Http 呼叫的客户端。 2. Http的请求的对象，一般是HttpGet 或者HttpPost, 这个代码了一个Http的链接请求。 3. 从目标地址获取的响应流 HttpResponse，某些状况下响应的结果是以流的形式返回，使用完成最好是关闭流。
预防httpClient连接数满的方法
hualizide的专栏
11-12 4417
org.apache.http.conn.ConnectionPoolTimeoutException: Timeout waiting for connection HttpClient连接池原理及一次连接时序图 HttpClient详解（二） Linux下查看tcp连接数及状态 httpClient 预防连接满了的方法
HttpClient连接池设置引发的一次雪崩
u010889990的专栏
07-16 4814
-1-事件背景我在凤巢团队独立搭建和运维的一个高流量的推广实况系统，是通过HttpClient 调用大搜的实况服务。最近经常出现Address already in us...
连接池已满问题解决思路
weixin_34332905的博客
01-07 3008
相信很多人都碰到过应用程序在连接数据库时报了“连接池已满”的错误，应该说基本上都是代码的原因，在MSDN网上找到了一篇感觉描述比较清晰的文章，文章名叫《.NET 连接池救生员》，详情请见，原文地址：http://www.netscum.dk/china/MSDN/library/data/sqlserver/TheNETConnectionPoolLifeguard.mspx，相信对大家清楚认识数...
十二、连接池线程池配置——HttpClient连接池
最新发布
流楚丶格念的博客
08-27 1595
3.x、4.x 和 5.x API 是完全不兼容的，使用起来比较麻烦。在 HttpClient 的执行过程中，连接复用是一个关键的性能优化点。通过合理配置连接池参数、正确处理连接的使用和释放，以及关注连接池的生命周期和性能监控，可以有效提高。下面是对连接池源码的重要步骤分析，包括连接的复用和非复用情况的处理，以及连接池内部的数据结构。此异常通常表示连接池中的连接用尽，导致无法获取到可用连接。这种状态表示线程在等待连接池中的连接。时，到每个主机的并发最多只有 200，但总的并发连接数为 300。
httpclient连接数java_httpclient连接耗尽问题分析
weixin_29500837的博客
02-26 1559
#在线上tomcat中发现了线程挂起：MaxtTotal是整个连接池的大小，默认20；DefaultMaxPerRoute是对于单个网站来说最大的连接数，默认是2.比如连接池默认20个连接，但是发送到a.com的连接最多默认是2个。#验证DefaultMaxPerRoute 为了验证这个，写了一个简单的controller，在处理方法中sleep很长时间，然后写一个client，开5个线程发请求，...
java使用httpclient发送post请求示例
09-04
Java 使用 HttpClient 发送 POST 请求是网络编程中常见的任务，尤其在与 Web 服务进行交互时。Apache HttpClient 是一个强大的库，允许 Java 开发者轻松地执行 HTTP 请求。在这个示例中，我们将深入探讨如何使用 ...
SpringBoot使用httpclient发送Post请求时
05-11
try(CloseableHttpClient httpClient = HttpClients.createDefault()) { HttpPost httpPost = new HttpPost(url); StringEntity stringEntity = new StringEntity(params, Charset.forName("UTF-8")); ...
一场HttpClient调用未关闭流引发的问题
热门推荐
石臻臻的杂货铺(szzdzhp001)
10-18 1万+
最近生产环境出现了一个问题,就是Job服务日志好端端的不打印日志了,服务也没有挂, 现在将此次问题解决过程记录下来~ 问题描述 生产环境有一台Job服务器，是专门用来跑所有定时任务的,然后有一天发现定时任务好像没有执行,所以上Job服务器查看日志,结果发现的情况是: 最后打印的是昨天晚上九点半的,到我看的时候就一直没有日志,没有日志就没有执行Job；当时为了快速解决问题就重启了服务器,Job...
Java HttpClient execute 永久阻塞问题
silence_lu_的博客
12-16 598
Java HttpClient execute 永久阻塞问题_SherJamYu的博客-CSDN博客_httpclient 阻塞问题
接口获取数据库连接阻塞问题
天蝎的毒刺
10-26 3829
问题描述 接口URL：http://192.168.10.200:20200/h5-customer/customer/card/consumerCard/submit?cardId=card_20171010210403659539&cityCode=110100&token=lOukBdwqvVBOpj9EUPiA 在压测提交充值卡订单接口，在并发数200情况下，jmeter 图表
httpclient端口占满，处于Close_wait状态。Timeout waiting for connection from pool
weixin_34107955的博客
11-09 633
2019独角兽企业重金招聘Python工程师标准>>> ...
记录高并发下连接数过多引发的问题调优(HTTP1.1-keepalive)
yhl11111111的博客
07-10 4985
最近在对推送服务吞吐量进行提升优化，保证上游业务tps4000提升到tps7000，主要是减少了接口响应时间，保证业务方在总推送量不变和本地服务机器不增加的前提下，每秒的吞吐量提升，提升后自然短时间内tcp连接也增加很多，1.推送服务调用个推有http请求，2.业务方调用推送服务有http请求。没想打的是恰好这个连接达到了UC ...
HttpClient 大量连接等待异常的处理
weixin_30596343的博客
08-19 607
前几天要扫一批连接，因为涉及到ua的适配测试，所以选用了httpclient处理。 httpclient其实很好用，也用过几次，还曾经写过自动刷人人网人气的程序，不过对于它掌握还是处在比较浅显的时代 我这人比较懒，学习动力还是太弱，不逼到份上都懒得学习哎！ 这次又用到这东西了就直接看了看api 就开始写了，不过写的时候发现一个问题。 开始跑100多个url的时候是没问题的，不过过...
爬虫—次数过多HTTPConnectionPool
HuQi
03-21 3395
一、常见错误 HTTPConnectionPool（host:XX）Max retries exceeded with url: 如何让请求结束后马上断开连接且释放池中的连接资源：headers={'Connection':'close'} 使用代理ip：requests.get(url=url,headers=h...
关闭防火墙解决httpclient.execute长时间停滞
u014520797的专栏
08-17 5783
1、new HttpClient 对象，HttpClient client = new DefaultHttpClient(); 2、new 请求对象，HttpGet request = new HttpGet(url);或HttpPost request = new HttpPost(url); 3、执行HttpClient .execute(request); 4、一切都很正常，但是就是
httpclient发送https请求 并且配置连接池
05-23
使用HttpClient发送HTTPS请求并配置连接池，可以按照以下步骤进行： 1. 创建SSLContext对象，用于HTTPS连接的安全认证。 ```java SSLContext sslContext = SSLContexts.createSystemDefault(); ``` 2. 创建ConnectionSocketFactory对象，用于连接池中的连接创建。 ```java SSLConnectionSocketFactory sslConnectionSocketFactory = new SSLConnectionSocketFactory(sslContext); ``` 3. 创建HttpClientConnectionManager对象，用于管理连接池中的连接。 ```java PoolingHttpClientConnectionManager poolingHttpClientConnectionManager = new PoolingHttpClientConnectionManager(Arrays.asList(sslConnectionSocketFactory)); poolingHttpClientConnectionManager.setMaxTotal(200);//设置最大连接数 poolingHttpClientConnectionManager.setDefaultMaxPerRoute(100);//设置每个路由最大连接数 ``` 4. 创建HttpClient对象，并设置连接池管理器。 ```java CloseableHttpClient httpClient = HttpClients.custom() .setConnectionManager(poolingHttpClientConnectionManager) .build(); ``` 5. 创建HttpPost对象，设置请求参数，并执行请求。 ```java HttpPost httpPost = new HttpPost("https://example.com/path"); httpPost.setEntity(new StringEntity("Hello, world!")); CloseableHttpResponse httpResponse = httpClient.execute(httpPost); ``` 完整的示例代码如下： ```java import org.apache.http.client.methods.CloseableHttpResponse; import org.apache.http.client.methods.HttpPost; import org.apache.http.entity.StringEntity; import org.apache.http.impl.client.CloseableHttpClient; import org.apache.http.impl.client.HttpClients; import org.apache.http.impl.conn.PoolingHttpClientConnectionManager; import org.apache.http.ssl.SSLContexts; import org.apache.http.conn.ssl.SSLConnectionSocketFactory; import javax.net.ssl.SSLContext; import java.util.Arrays; import java.io.IOException; public class HttpClientExample { public static void main(String[] args) throws IOException { SSLContext sslContext = SSLContexts.createSystemDefault(); SSLConnectionSocketFactory sslConnectionSocketFactory = new SSLConnectionSocketFactory(sslContext); PoolingHttpClientConnectionManager poolingHttpClientConnectionManager = new PoolingHttpClientConnectionManager(Arrays.asList(sslConnectionSocketFactory)); poolingHttpClientConnectionManager.setMaxTotal(200); poolingHttpClientConnectionManager.setDefaultMaxPerRoute(100); CloseableHttpClient httpClient = HttpClients.custom() .setConnectionManager(poolingHttpClientConnectionManager) .build(); HttpPost httpPost = new HttpPost("https://example.com/path"); httpPost.setEntity(new StringEntity("Hello, world!")); CloseableHttpResponse httpResponse = httpClient.execute(httpPost); System.out.println(httpResponse.getStatusLine().getStatusCode()); httpResponse.close(); httpClient.close(); } } ```
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值