HttpClient 多线程处理

为什么要使用单例HttpClient?

在发出HTTP请求前,我们先创建了一个HttpClient对象。那么,在实际项目中,我们很可能在多处需要进行HTTP通信,这时候我们不需要为每个请求都创建一个新的HttpClient。因为HttpClient就像一个小型的浏览器,对于整个应用,我们只需要一个HttpClient就够了。看到这里,一定有人心里想,这有什么难的,用单例啊!!那么,哪里不对劲呢?或者说做的还不够完善呢?

多线程!试想,现在我们的应用程序使用同一个HttpClient来管理所有的Http请求,一旦出现并发请求,那么一定会出现多线程的问题。这就好像我们的浏览器只有一个标签页却有多个用户,A要上google,B要上baidu,这时浏览器就会忙不过来了。幸运的是,HttpClient提供了创建线程安全对象的API,帮助我们能很快地得到线程安全的“浏览器”。

在httpclient运行的过程中,每个http协议的方法,使用一个HttpConnection实例。由于连接是一种有限的资源,每个连接在某一时刻只能供一个线程和方法使用,所以需要确保在需要时正确地分配连接。HttpClient采用了一种类似jdbc连接池的方法来管理连接,这个管理工作由 MultiThreadedHttpConnectionManager完成。

MultiThreadedHttpConnectionManager connectionManager = new MultiThreadedHttpConnectionManager();
HttpClient client = new HttpClient(connectionManager);

此时,client可以在多个线程中被用来执行多个方法。每次调用HttpClient.executeMethod() 方法,都会去链接管理器申请一个连接实例,申请成功这个链接实例被签出(checkout),随之在链接使用完后必须归还管理器。管理器支持以下几个设置:

connectionStaleCheckingEnabled 这个标志对所有已经创建的 connections 都适用。除特殊情况外,此值应该设置成 true
maxConnectionsPerHost       每个主机的最大并行链接数,默认为2
maxTotalConnections       客户端总并行链接最大数,默认为20

由于是使用HttpClient的程序而不是HttpClient本身来读取应答包的主体,所以HttpClient无法决定什么时间连接不再使用了,这也就要求在读完应答包的主体后必须手工显式地调用releaseConnection()来释放申请的链接。

MultiThreadedHttpConnectionManager connectionManager = new MultiThreadedHttpConnectionManager();

HttpClient client = new HttpClient(connectionManager);
...
// 在某个线程中。
GetMethod get = new GetMethod("http://jakarta.apache.org/");
try {
	client.executeMethod(get);
	// print response to stdout
	System.out.println(get.getResponseBodyAsStream());
} finally {
	// be sure the connection is released back to the connection 
	// manager
	get.releaseConnection();
}

对每一个HttpClient.executeMethod须有一个method.releaseConnection()与之匹配。

对于httpClient的多线程问题,网上资料还提到另外一个管理器:ThreadSafeClientConnManager,暂不知其与MultiThreadedHttpConnectionManager之间的差异。


  • 1
    点赞
  • 11
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
HttpClient 是一个多线程安全的 HTTP 客户端库,可以在多个线程中共享一个 HttpClient 实例。在使用 HttpClient 发起 HTTP 请求时,可以使用多线程来提高请求处理的效率。 下面是使用 HttpClient 进行多线程请求的示例代码: ```java import java.util.concurrent.ExecutorService; import java.util.concurrent.Executors; import org.apache.http.client.HttpClient; import org.apache.http.client.methods.HttpGet; import org.apache.http.impl.client.HttpClientBuilder; public class HttpMultiThread { public static void main(String[] args) throws Exception { HttpClient httpClient = HttpClientBuilder.create().build(); ExecutorService executorService = Executors.newFixedThreadPool(10); for (int i = 0; i < 100; i++) { executorService.execute(new HttpGetRequest(httpClient)); } executorService.shutdown(); } private static class HttpGetRequest implements Runnable { private HttpClient httpClient; public HttpGetRequest(HttpClient httpClient) { this.httpClient = httpClient; } @Override public void run() { HttpGet httpGet = new HttpGet("https://www.baidu.com"); try { httpClient.execute(httpGet); } catch (Exception e) { e.printStackTrace(); } } } } ``` 在上述代码中,我们使用了 ExecutorService 来创建一个固定大小的线程池,并将多个 HttpGetRequest 任务提交给线程池执行。在每个 HttpGetRequest 任务中,我们创建一个 HttpGet 请求,并使用 HttpClient 发起请求。 需要注意的是,HttpClient 的实例应该在多个线程之间共享,因此我们在 main 方法中创建了一个 HttpClient 实例,并将其传递给每个 HttpGetRequest 任务。同时,在使用 HttpClient 发起请求时,应该保证线程安全,避免多个线程同时使用同一个 HttpGet 实例。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值