apache HttpClient 4.5.2 模拟请求http

最新推荐文章于 2024-08-25 10:00:00 发布
最新推荐文章于 2024-08-25 10:00:00 发布
阅读量652 收藏
点赞数
文章标签： java 开发工具
原文链接：https://my.oschina.net/wugong/blog/1632456
版权

简介

借鉴地址

HttpClient 是 Apache Jakarta Common 下的子项目，可以用来提供高效的、最新的、功能丰富的支持 HTTP 协议的客户端编程工具包，并且它支持 HTTP 协议最新的版本和建议。

使用HttpClient发送请求、接收响应很简单，一般需要如下几步即可：

  1. 创建CloseableHttpClient对象。
  2. 创建请求方法的实例，并指定请求URL。如果需要发送GET请求，创建HttpGet对象；如果需要发送POST请求，创建HttpPost对象。
  3. 如果需要发送请求参数，可可调用setEntity(HttpEntity entity)方法来设置请求参数。setParams方法已过时（4.4.1版本）。
  4. 调用HttpGet、HttpPost对象的setHeader(String name, String value)方法设置header信息，或者调用setHeaders(Header[] headers)设置一组header信息。
  5. 调用CloseableHttpClient对象的execute(HttpUriRequest request)发送请求，该方法返回一个CloseableHttpResponse。
  6. 调用HttpResponse的getEntity()方法可获取HttpEntity对象，该对象包装了服务器的响应内容。程序可通过该对象获取服务器的响应内容；调用CloseableHttpResponse的getAllHeaders()、getHeaders(String name)等方法可获取服务器的响应头。
  7. 释放连接。无论执行方法是否成功，都必须释放连接

实际使用场景：

pom依赖：

<!--apache模拟http请求-->
<!-- https://mvnrepository.com/artifact/org.apache.httpcomponents/httpclient -->
<dependency>
    <groupId>org.apache.httpcomponents</groupId>
    <artifactId>httpclient</artifactId>
    <version>4.5.2</version>
</dependency>
<!-- https://mvnrepository.com/artifact/org.apache.commons/commons-lang3 -->
<dependency>
    <groupId>org.apache.commons</groupId>
    <artifactId>commons-lang3</artifactId>
    <version>3.4</version>
</dependency>

测试类：

import com.jie.common.file.FileUtils;
import com.jie.common.httprequest.HttpClientUtils;
import org.junit.Test;

import java.io.IOException;
import java.util.HashMap;
import java.util.Map;

/**
 * \* Created with IntelliJ IDEA.
 * \* User: wugong.jie
 * \* Date: 2018/3/9 16:20
 * \* To change this template use File | Settings | File Templates.
 * \* Description:
 * \
 */
public class HttpRequestDemo {

    @Test
    public void httpRequestTest(){
        String filePath = "D:\\tmp\\alibaba.html";
        // 地址是我alibaba提供的StringUtils中的main方法里获取的测试地址......
        String postUrl = "http://www.alibaba.com/trade/search";
        Map<String,String> paramMap = new HashMap<String,String>();
        paramMap.put("fsb","y");
        paramMap.put("IndexArea","product_en");
        paramMap.put("CatId","");
        paramMap.put("SearchText","test");
        try {
            FileUtils.writeTxtToFile(HttpClientUtils.simplePost(postUrl,paramMap,""),filePath);
        } catch (IOException e) {
            e.printStackTrace();
        }
    }

}

工具类：

import org.apache.commons.lang3.StringUtils;
import org.apache.commons.logging.Log;
import org.apache.commons.logging.LogFactory;
import org.apache.http.HttpEntity;
import org.apache.http.NameValuePair;
import org.apache.http.ParseException;
import org.apache.http.client.config.RequestConfig;
import org.apache.http.client.entity.UrlEncodedFormEntity;
import org.apache.http.client.methods.CloseableHttpResponse;
import org.apache.http.client.methods.HttpPost;
import org.apache.http.impl.client.CloseableHttpClient;
import org.apache.http.impl.client.HttpClients;
import org.apache.http.message.BasicNameValuePair;
import org.apache.http.util.EntityUtils;

import java.io.IOException;
import java.io.UnsupportedEncodingException;
import java.util.ArrayList;
import java.util.List;
import java.util.Map;

/**
 * \* Created with IntelliJ IDEA.
 * \* User: wugong.jie
 * \* Date: 2018/3/9 15:55
 * \* To change this template use File | Settings | File Templates.
 * \* Description:
 * \
 */
public class HttpClientUtils {

    private static Log log = LogFactory.getLog(HttpClientUtils.class);

    private final static String DEFAULT_ENCODING = "UTF-8";
    private final static int DEFAULT_CONNECT_TIMEOUT = 5000; // 设置连接超时时间，单位毫秒
    private final static int DEFAULT_CONNECTION_REQUEST_TIMEOUT = 1000;// 设置从connect Manager获取Connection 超时时间，单位毫秒
    private final static int DEFAULT_SOCKET_TIMEOUT = 5000;// 请求获取数据的超时时间，单位毫秒 如果访问一个接口，多少时间内无法返回数据，就直接放弃此次调用

    /**
     * 简单http post请求
     * @author wugong
     * @date 2018/3/9 16:18
     * @modify if true,please enter your name or update time
     * @param
     */
    public static String simplePost(String url, Map<String,String> paramMap, String encoding) throws ParseException, IOException {
        String body = "";
        encoding = StringUtils.isBlank(encoding)?DEFAULT_ENCODING:encoding;
        //创建httpclient对象
        CloseableHttpClient client = HttpClients.createDefault();
        //创建post方式请求对象
        HttpPost httpPost = postForm(paramMap,url,DEFAULT_ENCODING);
        //执行请求操作，并拿到结果（同步阻塞）
        CloseableHttpResponse response = null;
        try {
            response = client.execute(httpPost);
            //获取结果实体
            HttpEntity entity = response.getEntity();
            if (entity != null) {
                //按指定编码转换结果实体为String类型
                body = EntityUtils.toString(entity, encoding);
            }
            EntityUtils.consume(entity);
        }catch (UnsupportedEncodingException e){
            e.printStackTrace();
            log.error("简单post请求遇到UnSpEcode异常",e);
            throw new IOException(e);
        } catch (IOException e) {
            e.printStackTrace();
            log.error("简单post请求遇到IO异常",e);
            throw new IOException(e);
        } catch (ParseException e) {
            e.printStackTrace();
            log.error("简单post请求遇到PE异常",e);
            throw new ParseException();
        } finally{
            //释放链接
            response.close();
        }
        return body;
    }

    /**
     * post请求url与请求参数组装
     * @author wugong
     * @date 2018/3/9 16:02
     * @modify if true,please enter your name or update time
     * @param
     */
    private static HttpPost postForm(Map<String,String> paramMap,String url,String encoding) throws UnsupportedEncodingException {
        HttpPost httpPost = new HttpPost(url);
        //装填参数
        List<NameValuePair> nvps = new ArrayList<NameValuePair>();
        if(paramMap!=null){
            for (Map.Entry<String, String> entry : paramMap.entrySet()) {
                nvps.add(new BasicNameValuePair(entry.getKey(), entry.getValue()));
            }
        }
        //设置参数到请求对象中
        httpPost.setEntity(new UrlEncodedFormEntity(nvps, encoding));
        //设置header信息
        //指定报文头【Content-type】、【User-Agent】
        httpPost.setHeader("Content-type", "application/x-www-form-urlencoded");
        httpPost.setHeader("User-Agent", "Mozilla/4.0 (compatible; MSIE 5.0; Windows NT; DigExt)");
        RequestConfig requestConfig = RequestConfig.custom()
                .setConnectTimeout(DEFAULT_CONNECT_TIMEOUT).setConnectionRequestTimeout(DEFAULT_CONNECTION_REQUEST_TIMEOUT)
                .setSocketTimeout(DEFAULT_SOCKET_TIMEOUT).build();
        httpPost.setConfig(requestConfig);
        return httpPost;
    }
}
import org.apache.commons.logging.LogFactory;

import java.io.File;
import java.io.FileOutputStream;
import java.io.IOException;

/**
 * \* Created with IntelliJ IDEA.
 * \* User: wugong.jie
 * \* Date: 2018/3/9 16:36
 * \* To change this template use File | Settings | File Templates.
 * \* Description:
 * \
 */
public class FileUtils {
    private static final Log LOG = LogFactory.getLog(FileUtils.class);
    /**
     * 纯文本文件内容写入文件file
     * @author wugong
     * @date 2018/3/9 16:38
     * @modify if true,please enter your name or update time
     * @param
     */
    public static void writeTxtToFile(String txt,String filePath) throws IOException {
        try {
            File file = new File(filePath);
            if (!file.exists()) {//如果文件不存在
                try {
                    file.createNewFile();
                } catch (Exception e) {
                    e.printStackTrace();
                }
            }
            FileOutputStream fos = new FileOutputStream(file);
            // 通过文件输入流，写入文件内容
            fos.write(txt.getBytes("utf-8"));
            fos.close();
        } catch (IOException e) {
            e.printStackTrace();
            LOG.error("纯文本文件写入file遇到IO异常", e);
            throw new IOException(e);
        }
    }

}

 

转载于:https://my.oschina.net/wugong/blog/1632456

weixin_34274029
关注
使用Apache HttpClient发送和接收JSON格式的数据
你好，我们在哪里见过啊！
06-12 1万+
JSON格式数据的优点：　   A.数据格式比较简单，易于读写，格式都是压缩的，占用带宽小，是非常轻量级的数据格式；　　B.易于解析，客户端JavaScript可以简单的通过eval()进行JSON数据的读取；　　C.支持多种语言，其中在Java端有丰富的工具操作和解析JSON；　　D.因为JSON格式能直接为服务器端代码使用，大大简化了服务器端和客户端的代码开发量，且完成任务不变，并且易于维护；...
Java | 使用HttpClient发送网络请求
@chen
03-24 2222
使用HttpClient发送网络请求 使用HttpClient发送get或post请求，访问网络资源。 一、添加maven依赖 在解析数据时往往会配合json使用，所以同时添加fastjson依赖。 <dependency> <groupId>org.apache.httpcomponents</groupId> <artifactId>httpclient</artifactId> <version>4.5.
apache HttpClient 4.5.2 模拟请求https
weixin_34307464的博客
03-09 402
1、对于HTTPS的访问，采取绕过证书的策略： package...
apache request
yidianfengfan的专栏
07-09 486
       Apache对HTTP的请求可以分为连接、处理和断开连接三个阶段。每个阶段又可以分为更多的子阶段。每一个阶段调用相应的函数进行处理。Apache中对请求的处理过程实质上就是依次调用一系列挂钩的过程。      挂钩是用来表示在处理HTTP请求中一组类似的操作，与之对应，挂钩函数就是操作函数。不过即使挂钩相同，对应的挂钩函数也未必相同。举个简单的例子，配置文件模块和虚拟主机模块都需
【Java：Apache HttpClient】HttpRequestUtils
记录开发学习笔记
07-31 1893
正式参加工作一年了，记录一下开发接口使用的Http工具类 依赖引入： <dependency> <groupId>org.apache.httpcomponents</groupId> <artifactId>httpclient</artifactId> <version>4.5.2</v...
Apache HttpClient4.5（二）
ZERO
08-21 1781
转载自：http://www.yeetrack.com/?p=782        Http连接是复杂，有状态的，线程不安全的对象，所以它必须被妥善管理。一个Http连接在同一时间只能被一个线程访问。HttpClient使用一个叫做Http连接管理器的特殊实体类来管理Http连接，这个实体类要实现HttpClientConnectionManager接口。        Http连接管理器
HttpClient-4.5.2 实战
zhujianlin1990的专栏
01-16 568
介绍：HttpClientFactory 相当与一个存储<String name,HttpClient instance>的map，不同业务需要不同的HttpClient。HttpClientUtil是一个工具类，以execute模版方法为核心，其他都是快捷方式。剥离出HttpClient实例化和HttpClientUtil工具方案集是为了减少冗余代码，缺点是每个HttpClientU...
HttpClient之get请求返回cookie信息+携带这个cookie和form-data格式的参数访问post接口
执子手 吹散苍茫茫烟波
06-06 421
一.moco框架mock接口信息 [ { "description": "这是一个能返回cookies信息的get请求", "request": { "uri": "/getCookies", "method": "get" }, "response": { "cookies": { "login": "true" }, "text": "成功获取到cookies信息啦" } },
十、HTTP 缓存——HTTP 缓存与HttpClient客户端缓存
最新发布
流楚丶格念的博客
08-25 653
在日常开发中，浏览器缓存是一个非常常见但又容易被忽视的优化手段。许多开发者在面对浏览器缓存相关问题时可能会感到困惑，因此本章内容专门用来解答这些常见问题，并帮助你更好地理解如何在 Java 应用中控制浏览器缓存。浏览器缓存是指在用户使用浏览器访问网站页面或 HTTP 服务时，根据服务器端返回的缓存控制响应头，将响应内容缓存到本地浏览器。这样，下次访问相同资源时，浏览器可以直接使用缓存内容，或者仅与服务器验证内容是否过期，从而减少网络传输的数据量，提升网站性能。public。
【API】Apache HttpClient HTTP协议的客户端/编程工具包
IN THE ZONE
09-18 1033
HttpClient 是Apache Jakarta Common 下的子项目，可以用来提供高效的、最新的、功能丰富的支持 HTTP 协议的客户端编程工具包，并且它支持 HTTP 协议最新的版本和建议； HTTP 协议是现在 Internet 上使用得最多、最重要的协议，越来越多的 Java 应用程序需要直接通过 HTTP 协议来访问网络资源； 虽然在 JDK 的 java net包中已经提供了访...
使用User-Agent防止HttpClient发送http请求时403 Forbidden和安全拦截
weixin_30585437的博客
07-19 405
问题的抛出 今天有客户反映，我们服务器通知请求对方时，他们拦截了请求。并贴了一张截图。 从截图可以看出来，对方拦截了我们的user-agent（Apache-HttpClient）。 什么是User-Agent？通常我们用浏览器访问一个网页，当我们向服务器发送请求时，浏览器会将一些头信息附加上，然后发给服务器，其中就包括User-Agent。一些网站的网页，为了防止爬虫或恶意访问，会首...
httpclient 简介、中文文档、中英对照文档 下载
寒水馨
01-09 700
httpclient 简介、中文文档、中英对照文档 下载；httpclient、org.apache.httpcomponents、中文文档、中英对照文档、下载、包含jar包、原API文档、源代码、Maven依赖信息文件、翻译后的API文档、apache、httpcomponents、httpclient、jar包、java、API文档、中英对照版；httpclient-4.2.5.jar、httpclient-4.4.1.jar、httpclient-4.4.jar、httpclient-4.5.10.j
HttpClient4.5.2调用示例（转载+原创）
qq_36688928的博客
05-15 442
转自：https://blog.csdn.net/tototuzuoquan/article/details/52248585 https://blog.csdn.net/toto1297488504/article/details/52248585 操作HttpClient时的一个工具类，使用是HttpClient4.5.2 package com.xxxx.characterche...
使用apache的httpcomponents中的httpclient 4.5对https进行访问
一个烂人的随手笔记
12-14 1万+
使用maven引入httpclient ,版本4.5.4 <dependency> <groupId>org.apache.httpcomponents</groupId> <artifactId>httpclient</artifactId> <version>4.5.2</version> <scope>test</scope
httpclient5 工具类
飞在江湖的专栏
12-08 3835
最近公司升级httpclient，从httpclient-4.3.2.jar升级到httpclient5-5.1.3.jar,写了个工具类供参考，可以去mvn仓库下载。4、不论服务端是阻塞还是异步的实现，httpclient5均能支持服务端的过滤。从支持HHTP/2到新的连接池实现。从版本号的跳跃和包名和groupId的变更都显示着这次的变动非常之大。6、使用严格连接有限保证的方式重构连接池的实现。通过减少全局连接池的锁，连接池在高并发下获得更好的性能。7、新的不严格连接有限保证连接池的实现。
Apache HttpClient4.5（一）
ZERO
12-18 1722
创建HTTP客户端 CloseableHttpClient httpClient = HttpClientBuilder.create().build();// 也可以为客户端配置请求的参数,作为所有请求的默认值 RequestConfig requestConfig = RequestConfig.custom() .setConnectionRequestTimeout(50
http请求request详解
technologyleader的专栏
04-14 5355
HttpServletRequest对象代表客户端的请求，当客户端通过HTTP协议访问服务器时，HTTP请求头中的所有信息都封装在这个对象中，通过这个对象提供的方法，可以获得客户端请求的所有信息。 获得客户机信息 　　getRequestURL方法返回客户端发出请求时的完整URL。 　　getRequestURI方法返回请求行中的资源名部分。 　　getQueryString 方法返回请求行中的参数部分。 　　getPathInfo方法返回请求URL中的额外路径信息。额外路径信息是请求URL中的位于..
java httpclient4.5_Apache HttpClient 4.5.3 使用详解
weixin_36439236的博客
02-24 1542
目录环境准备二进制 Jar 包1、本文的 HttpClient 是指 Apache 官网 HttpComponents 项目下的子项目HttpClient 。2、如果项目使用手动导入 Jar 包的方式，则可以从官网下载，地址：http://hc.apache.org/downloads.cgi3、如果只是使用 HttpClient 做单纯的 get、post 等操作，则需导入下面红色框的几个包即可...
HttpClient 4.5 利用HTTPS提交POST请求
热门推荐
just_young的专栏
08-14 1万+
最近在写一个测试服务器的程序，其中需要使用HTTPS协议，向服务器提交多个请求，由于服务器的证书是自己做的，因此要做证书的验证等工作。在网上查了许多例子，发现都不太合适，因为大部分代码都没做证书验证，所以容易受到中间人攻击。这里查阅了许多文档，并编写了自己的代码，做一个总结。 我这里使用了HttpClient 4.5版本。 参考了Oracle的文档：http://docs.oracle.com
Apache HttpClient 4.5.2中文API文档发布
1. httpclient-4.5.2.jar：这是Apache HttpClient的核心Java库文件，是实际执行HTTP请求的引擎。 2. httpclient-4.5.2-javadoc.jar：包含了httpclient-4.5.2版本的Java文档，用于查看每个类、接口、字段和方法的详细...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值