apache异步http

依赖org.apache.httpcomponents的httpclient,httpasyncclient,httpcore-nio,httpcore

 

public class AsyncHttpGetter {
 
 private HttpAsyncClient httpAsyncClient;
 
 private final static Logger logger = Logger.getLogger(AsyncHttpGetter.class);
 
 private String serverUrl;
 
 public void init(){
  initHttpClient();
 }
 
 private void initHttpClient() {
  try {
   httpAsyncClient = new DefaultHttpAsyncClient();
   httpAsyncClient.getParams()
            .setIntParameter(CoreConnectionPNames.SO_TIMEOUT, 3000)
            .setIntParameter(CoreConnectionPNames.CONNECTION_TIMEOUT, 3000)
            .setIntParameter(CoreConnectionPNames.SOCKET_BUFFER_SIZE, 8 * 1024)
            .setBooleanParameter(CoreConnectionPNames.TCP_NODELAY, true);
   httpAsyncClient.start();
  } catch (IOReactorException e) {
   logger.error("create HttpAsyncClient error!!");
  }
 }
 
 public void doAsyncGet(String requestUrl){
  try{
   HttpGet request = new HttpGet(requestUrl);
   httpAsyncClient.execute(request,null);
  }catch(Exception e){
   logger.error("doAsyncGet error:",e);
  }
 }
 
 public void doAsyncGet(Map<String,String> params){
  String requestUrl = buildRequestUrl(params);
  doAsyncGet(requestUrl);
 }
 
 private String buildRequestUrl(Map<String,String> params){
  StringBuilder sb = new StringBuilder(serverUrl);
  sb.append("?");
  int i = 0;
  for (Map.Entry<String, String> entry : params.entrySet()) {
   if (i++ > 0) {
    sb.append("&");
   }
   sb.append(entry.getKey()).append("=").append(entry.getValue());
  }
  return sb.toString();
 }
 
 public void destroy(){
  try {
   httpAsyncClient.shutdown();
  } catch (InterruptedException e) {
   logger.error("httpAsyncClient.shutdown:",e);
  }
 }

 public String getServerUrl() {
  return serverUrl;
 }

 public void setServerUrl(String serverUrl) {
  this.serverUrl = serverUrl;
 }
 
}

一个工作时写的工具包。实现了Java版的Promise 和 HttpClient。HttpClient 支持同步和异步两种方式,也支持多种不同实现。目前有Netty 和 Apache Compoenet两种实现。本次上传移除了Netty实现。主要解决生产环境中同步httpclient造成的IO阻塞问题。同步http请求将导致 tomcat 的业务线程被阻塞。一旦某接口网络出现问题,可能会阻塞tomcat业务线程,从而无法处理正常业务。很多公司使用另开线程池的方式进行异步调用来解决tomcat线程阻塞问题。但由于本系统中接口网络太不稳定,使用线程池也将导致线程池中的线程不断加大,不管使用怎样的线程池策略,最终要么线程池线程全部挂起,要么部分任务被延迟执行,要么丢失部分任务。这在我们的系统中仍然不能接受。因此才有了这个组件的开发。该组件是单线程非阻塞式的,类似于JS中的ajax请求。都使用单线程异步回调的方式。目前该组件已经初步测试通过。如果大家也需要这样的组件,可以下载尝试一下。所有关键注释都已经写了,如有不明白可以发送邮件 ath.qu.trues@gmail.com 代码分为3个maven模块。 commons-ext : 实现Promise commons-tools: 实现 异步httpclient commons-parent:父模块 测试代码在 commons-tools/src/test/java/HttpTest.java 中. 要求至少Java 8 版本。 注释已经写好。这里贴出异步http部分测试代码。 /** * 异步方法的Fluent写法 */ public void testAsyncHttpFluent() { SimpleRequest.Get("http://www.baidu.com") .header("h1", "hv1") .header("h2", "hv2") .parameter("p1", "pv1") .parameter("p2", "pv2") .chartUTF8() .build() .asyncExecute() .then(SimpleAsyncHttpClient::asString) .then(html -> { System.out.println(html); }) .catching(Throwable::printStackTrace);//如果有异常,则打印异常 }
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值