使用ApacheHttClient时偶现异常ConnectionPoolTimeoutException

已于 2024-07-03 10:09:05 修改
阅读量166 收藏 4
点赞数 2
分类专栏： 排查问题 文章标签： http
于 2024-07-01 21:05:40 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_33606378/article/details/140109792
版权

问题表象

 http客户端请求偶现异常ConnectionPoolTimeoutException

问题原因

当使用HttpClientBuilder创建自定义的HttpClient的时候没有主动setConnectionManager导致org.apache.http.impl.client.HttpClientBuilder#build内兜底使用默认逻辑创建connectionManager的defaultMaxPerRoute只有2，maxTotal也只有20。当请求量稍一大且响应慢时连接池就会不够用，进而报错ConnectionPoolTimeoutException

核心需要搞清楚ApacheHttpClient的几个常用属性的含义

DefaultMaxPerRoute：请求 www.baidu.com 的资源和 www.bing.com 的资源那么他就会产生两个route，配置每个route默认最大的链接数

max-total：连接池里的最大连接数

参考文章

HttpClient几个连接参数_defaultmaxperroute 如何理解-CSDN博客

记一次产线httpclient maxPerRoute踩坑 - 简书

逢甘霖成大事
关注
专栏目录
org.apache.http.conn.ConnectionPoolTimeoutException: Timeout waiting for connection from pool异常处理
codesweetpotato的博客
01-02 1387
出现这个问题是由于并发量大，不断向服务器发起请求。优化HTTP调用接口代码。
HTTPConnectionPool(host=‘127.0.0.1‘, port=44245) 解决方案
qq_31375855的博客
09-15 1万+
Error: requests.exceptions.ProxyError: HTTPConnectionPool(host=‘127.0.0.1’, port=44245): Max retries exceeded with url ... (Caused by ProxyError(‘Cannot connect to proxy.’, NewConnectionError(’<urllib3.connection.HTTPConnection object at 0x7ff14a3ccdd0&
已解决——HTTPConnectionPool(host=‘117.89.172.166‘, port=31265): Max retries exceeded with url: http://da
最新发布
星辰探码的博客
08-06 887
是网络编程中常见的问题之一，但通过正确的方法和步骤，我们可以快速解决此问题。希望本文的介绍和亲测有效的解决方案能帮助开发者高效地解决类似问题，提升项目开发的顺利度。如果有其他问题或疑问，欢迎留言讨论。通过确认目标服务器的状态、检查网络连接、检查配置、使用负载均衡和验证 IP 地址和端口等方法，开发者可以快速定位并解决此类连接问题。同时，通过采取预防措施，可以减少此类问题的发生，确保项目运行顺利。
org.apache.http.conn.ConnectionPoolTimeoutException: Timeout waiting for connection from pool
qq_31817993的博客
11-16 4420
org.apache.http.conn.ConnectionPoolTimeoutException: Timeout waiting for connection from pool
已解决HTTPConnectionPool(host=‘117.89.172.166‘, port=31265): Max retries exceeded with url: http://data
努力让自己发光，对的人才能迎着光而来
02-17 1万+
已解决requests爬虫抛出异常：HTTPConnectionPool(host=‘117.89.172.166’, port=31265): Max retries exceeded with url: http://data.eartip.cn/static/tophub/index.html (Caused by ProxyError(‘Cannot connect to proxy.’, NewConnectionError(‘
没有HTTP连接池，空谈什么持久连接
afterlake的博客
10-24 942
目录 为什么需要HTTP连接池 urllib3 如何实现 HTTP 连接池 从文档入手 PoolManager RecentlyUsedContainer HTTPConnectionPool LifoQueue HTTPConnection 总结 为什么需要HTTP连接池 上世纪90年代初，因为即用即走的“请求—响应”模型，HTTP 协议得以广泛流行​。但是简单并不等同于高效，随着 HTTP 的流行，越来越多的开发者开始抱怨HTTP的性能问题​。在这种背景下，HTTP ...
宝塔打开phpmyadmin后显示HTTPConnectionPool(host=‘127.0.0.1‘, port=888)问题解决办法
weixin_59822232的博客
04-09 6776
宝塔打开phpmyadmin后无法正常访问，显示HTTPConnectionPool(host='127.0.0.1', port=888)问题的解决办法
HttpClient连接池抛出大量ConnectionPoolTimeoutException: Timeout waiting for connection异常排查...
iteye_11437的博客
07-18 3536
今天解决了一个HttpClient的异常，汗啊，一个HttpClient使用稍有不慎都会是毁灭级别的啊。 这里有之前因为route配置不当导致服务器异常的一个处理：http://blog.csdn.net/shootyou/article/details/6415248 里面的HttpConnectionManager实现就是我在这里使用的实现。   问题表现： tomcat后台日志发现...
Python HTTPConnectionPool [Errno 11004]
小白成长之旅
09-13 1万+
由于需要进行一些文章的抓取，我开了一个多进程的Pool，相信大家这个应该是了解的，可是后面遇见了两种问题，题目所描述的只是我认为比较重要的一点。第一种HTTPConnectionPool[Errno -3] Temporary failure in name resolution关于这种问题其实就是说明你的抓取速度太快了，并且你的requests连接并没有关闭，不要害怕是被封。这种情况只需要添加一个
Okhttp之连接池ConnectionPool简单分析（一）
热门推荐
菜鸟博客
07-05 2万+
ConnectionPool
HttpClient连接池抛出大量ConnectionPoolTimeoutException: Timeout waiting for connection异常排查
u010325193的博客
04-24 1万+
1 错误信息 Https请求工具类] 发送 POST 请求（HTTP）错误, httpPost: org.apache.http.conn.ConnectionPoolTimeoutException: Timeout waiting for connection from pool at org.apache.http.impl.conn.PoolingHttpClientConnecti...
爬虫—次数过多HTTPConnectionPool
HuQi
03-21 3381
一、常见错误 HTTPConnectionPool（host:XX）Max retries exceeded with url: 如何让请求结束后马上断开连接且释放池中的连接资源：headers={'Connection':'close'} 使用代理ip：requests.get(url=url,headers=h...
httpClient连接池管理，你用对了？
技术原始积累
06-12 1498
一、前言为何要用http连接池那？因为使用它我们可以得到以下好处：因为使用它可以有效降低延迟和系统开销。如果不采用连接池，每当我们发起http请求时，都需要重新发起Tcp三次握手建立链接...
HTTPConnectionPool（host:XX）Max retries exceeded with url 解决方法
weixin_36646275的博客
10-17 1万+
开发十年，就只剩下这套Java开发体系了 &gt;&gt;&gt;    ...
解决报错requests.exceptions.ConnectionError: HTTPConnectionPool(host=‘sewer.ip138.com‘, port=80)（爬虫一）
XG_17_38241417116的博客
12-31 2224
解决报错requests.exceptions.ConnectionError: HTTPConnectionPool(host='sewer.ip138.com', port=80)（爬虫一）
requests.exceptions.ProxyError: HTTPConnectionPool(host='127.0.0.1', port=8888): 解决办法
灵感点滴的分享
04-01 8923
出现这个问题是由于系统设置了代理。 打开注册表 搜索8888，可以看到有以下两个键值 删除即可
HTTPConnectionPool Max retries exceeded with url
u010137523的博客
08-05 2277
ConnectionError at /data/booking/hanyue/xiaohongshu HTTPConnectionPool(http://): Max retries exceeded with url: / (Caused by <class ‘socket.gaierror’>: [Errno -2] Name or service not known) Requ...
apache httpclient连接池PoolingHttpClientConnectionManager
mazhongjia的博客
08-11 9838
一、首先,明确以下内容: 1.http连接池不是万能的,过多的长连接会占用服务器资源,导致其他服务受阻 2.http连接池只适用于请求是经常访问同一主机(或同一个接口)的情况下 3.并发数不高的情况下资源利用率低下 那么,当你的业务符合上面3点,那么你可以考虑使用http连接池来提高服务器性能 使用http连接池的优点: 1.复用http连接,省去了tcp的3次握手和4次挥手的时间,极大降低请求响应的时间 2.自动管理tcp连接,不用人为地释放/创建连接 使用http连接池的大致流程 : 1.创
HttpClient报ConnectionPoolTimeoutException: Timeout waiting for connection from pool
一火的专栏
01-29 1232
【现象】 org.apache.http.conn.ConnectionPoolTimeoutException: Timeout waiting for connection from pool at org.apache.http.impl.conn.PoolingHttpClientConnectionManager.leaseConnection(PoolingHttpClientConnectionManager.java:286) at org.apache.http.impl.conn
requests.exceptions.ConnectionError: HTTPConnectionPool(host=‘localhost‘, port=8102)
weixin_43214402的博客
04-30 390
visdom 没有正确启动对应端口，会出现以上问题。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值