Http协议-HttpClient的使用

最新推荐文章于 2022-01-09 16:40:00 发布
最新推荐文章于 2022-01-09 16:40:00 发布
阅读量1k 收藏 1
点赞数
分类专栏： Http

Http协议

1、Http协议的请求头

HTTP Request Header 请求头
Header解释示例
Accept指定客户端能够接收的内容类型Accept: text/plain, text/html
Accept-Charset浏览器可以接受的字符编码集。Accept-Charset: iso-8859-5
Accept-Encoding指定浏览器可以支持的web服务器返回内容压缩编码类型。Accept-Encoding: compress, gzip
Accept-Language浏览器可接受的语言Accept-Language: en,zh
Accept-Ranges可以请求网页实体的一个或者多个子范围字段Accept-Ranges: bytes
AuthorizationHTTP授权的授权证书Authorization: Basic QWxhZGRpbjpvcGVuIHNlc2FtZQ==
Cache-Control指定请求和响应遵循的缓存机制Cache-Control: no-cache
Connection表示是否需要持久连接。（HTTP 1.1默认进行持久连接）Connection: close
CookieHTTP请求发送时，会把保存在该请求域名下的所有cookie值一起发送给web服务器。Cookie: $Version=1; Skin=new;
Content-Length请求的内容长度Content-Length: 348
Content-Type请求的与实体对应的MIME信息Content-Type: application/x-www-form-urlencoded
Date请求发送的日期和时间Date: Tue, 15 Nov 2010 08:12:31 GMT
Expect请求的特定的服务器行为Expect: 100-continue
From发出请求的用户的EmailFrom: user@email.com
Host指定请求的服务器的域名和端口号Host: www.zcmhi.com
If-Match只有请求内容与实体相匹配才有效If-Match: “737060cd8c284d8af7ad3082f209582d”
If-Modified-Since如果请求的部分在指定时间之后被修改则请求成功，未被修改则返回304代码If-Modified-Since: Sat, 29 Oct 2010 19:43:31 GMT
If-None-Match如果内容未改变返回304代码，参数为服务器先前发送的Etag，与服务器回应的Etag比较判断是否改变If-None-Match: “737060cd8c284d8af7ad3082f209582d”
If-Range如果实体未改变，服务器发送客户端丢失的部分，否则发送整个实体。参数也为EtagIf-Range: “737060cd8c284d8af7ad3082f209582d”
If-Unmodified-Since只在实体在指定时间之后未被修改才请求成功If-Unmodified-Since: Sat, 29 Oct 2010 19:43:31 GMT
Max-Forwards限制信息通过代理和网关传送的时间Max-Forwards: 10
Pragma用来包含实现特定的指令Pragma: no-cache
Proxy-Authorization连接到代理的授权证书Proxy-Authorization: Basic QWxhZGRpbjpvcGVuIHNlc2FtZQ==
Range只请求实体的一部分，指定范围Range: bytes=500-999
Referer先前网页的地址，当前请求网页紧随其后,即来路Referer: http://www.zcmhi.com/archives/71.html
TE客户端愿意接受的传输编码，并通知服务器接受接受尾加头信息TE: trailers,deflate;q=0.5
Upgrade向服务器指定某种传输协议以便服务器进行转换（如果支持）Upgrade: HTTP/2.0, SHTTP/1.3, IRC/6.9, RTA/x11
User-AgentUser-Agent的内容包含发出请求的用户信息User-Agent: Mozilla/5.0 (Linux; X11)
Via通知中间网关或代理服务器地址，通信协议Via: 1.0 fred, 1.1 nowhere.com (Apache/1.1)
Warning关于消息实体的警告信息Warn: 199 Miscellaneous warning

2、Http协议的响应头

HTTP Responses Header 响应头
Header解释示例
Accept-Ranges表明服务器是否支持指定范围请求及哪种类型的分段请求Accept-Ranges: bytes
Age从原始服务器到代理缓存形成的估算时间（以秒计，非负）Age: 12
Allow对某网络资源的有效的请求行为，不允许则返回405Allow: GET, HEAD
Cache-Control告诉所有的缓存机制是否可以缓存及哪种类型Cache-Control: no-cache
Content-Encodingweb服务器支持的返回内容压缩编码类型。Content-Encoding: gzip
Content-Language响应体的语言Content-Language: en,zh
Content-Length响应体的长度Content-Length: 348
Content-Location请求资源可替代的备用的另一地址Content-Location: /index.htm
Content-MD5返回资源的MD5校验值Content-MD5: Q2hlY2sgSW50ZWdyaXR5IQ==
Content-Range在整个返回体中本部分的字节位置Content-Range: bytes 21010-47021/47022
Content-Type返回内容的MIME类型Content-Type: text/html; charset=utf-8
Date原始服务器消息发出的时间Date: Tue, 15 Nov 2010 08:12:31 GMT
ETag请求变量的实体标签的当前值ETag: “737060cd8c284d8af7ad3082f209582d”
Expires响应过期的日期和时间Expires: Thu, 01 Dec 2010 16:00:00 GMT
Last-Modified请求资源的最后修改时间Last-Modified: Tue, 15 Nov 2010 12:45:26 GMT
Location用来重定向接收方到非请求URL的位置来完成请求或标识新的资源Location: http://www.zcmhi.com/archives/94.html
Pragma包括实现特定的指令，它可应用到响应链上的任何接收方Pragma: no-cache
Proxy-Authenticate它指出认证方案和可应用到代理的该URL上的参数Proxy-Authenticate: Basic
refresh应用于重定向或一个新的资源被创造，在5秒之后重定向（由网景提出，被大部分浏览器支持）

Refresh: 5; url=
http://www.zcmhi.com/archives/94.html
Retry-After如果实体暂时不可取，通知客户端在指定时间之后再次尝试Retry-After: 120
Serverweb服务器软件名称Server: Apache/1.3.27 (Unix) (Red-Hat/Linux)
Set-Cookie设置Http CookieSet-Cookie: UserID=JohnDoe; Max-Age=3600; Version=1
Trailer指出头域在分块传输编码的尾部存在Trailer: Max-Forwards
Transfer-Encoding文件传输编码Transfer-Encoding:chunked
Vary告诉下游代理是使用缓存响应还是从原始服务器请求Vary: *
Via告知代理客户端响应是通过哪里发送的Via: 1.0 fred, 1.1 nowhere.com (Apache/1.1)
Warning警告实体可能存在的问题Warning: 199 Miscellaneous warning
WWW-Authenticate表明客户端请求实体应该使用的授权方案WWW-Authenticate: Basic

3、请求方式

常用请求方式：

    get 方式: 请求资源，也可以通过url向服务器提交数据。
    例如 http://test.com?username=username&pwd=password ;
    post方式: 向服务器提交数据，请求数据跟在请求头后面再加一个空行。
    例如
    请求头
    username=username&pwd=password

其它请求方式：

  1. PUT：用于修改某个内容 
  2. DELETE,：用于删除某个内容 
  3. CONNECT：用于代理进行传输，如使用SSL 
  4. OPTIONS ：询问可以执行哪些方法 
  5. PATCH：部分文档更改 
  6. PROPFIND：(wedav) 查看属性 
  7. PROPPATCH：(wedav) 设置属性 
  8. MKCOL：(wedav) 创建集合（文件夹） 
  9. COPY：(wedav) 拷贝 
  10. MOVE：(wedav) 移动 
  11. LOCK：(wedav) 加锁 
  12. UNLOCK：(wedav) 解锁 
  13. TRACE：用于远程诊断服务器 
  14. HEAD：类似于GET, 但是不返回body信息，用于检查对象是否存在，以及得到对象的元数据

4、Java代码实现

public static void main(String[] args) throws Exception {
        // 请求共用的httpclient对象，保持同一个会话
        CloseableHttpClient httpClient = HttpClients.createDefault();
        // get请求
        String getUrl = "http://www.csdn.net/";
        httpGetMethod(httpClient, getUrl);
        // post请求
        String postUrl = "https://passport.csdn.net/account/login?from=http%3A%2F%2Fmy.csdn.net%2Fmy%2Fmycsdn";
        List<NameValuePair> params = new ArrayList<NameValuePair>();
        params.add(new BasicNameValuePair("username", "username"));
        params.add(new BasicNameValuePair("password", "password"));
        httpPostMethod(httpClient, postUrl, params);
    }

    /**
     * post请求方式
     * 
     * @param httpClient
     * @param url
     * @param params
     * @throws Exception
     */
    public static void httpPostMethod(CloseableHttpClient httpClient,
            String url, List<NameValuePair> params) throws Exception {
        HttpPost httpPost = new HttpPost(url);
        // 设置字符集编码
        HttpEntity httpEntity = new UrlEncodedFormEntity(params, "utf-8");
        // 使用HttpPost类的setEntity()方法设置请求参数
        httpPost.setEntity(httpEntity);
        // 取得HttpResponse对象
        HttpResponse httpResponse = httpClient.execute(httpPost);
        // 取得httpResponse中的响应头
        Header[] headers = httpResponse.getAllHeaders();
        // 取得httpResponse中的响应实体数据
        HttpEntity entity = httpResponse.getEntity();
        // HttpStatus.SC_OK表示连接成功
        if (httpResponse.getStatusLine().getStatusCode() != 404) {
            // 取得返回的字符串
            if (httpResponse.getEntity() != null) {

                // 打印响应头
                for (Header head : headers) {
                    System.out.println(head.toString());
                }
                // 打印返回的实体数据
                System.out.println(EntityUtils.toString(entity));
            }
        } else {
            System.out.println("fail the request");
        }
    }

    /**
     * Get请求方式
     * 
     * @param httpClient
     * @param Url
     * @throws IOException
     * @throws Exception
     */
    public static void httpGetMethod(CloseableHttpClient httpClient, String Url)
            throws Exception {
        // 创建一个 get 方法，类似于在浏览器地址栏中输入一个地址
        HttpGet httpGet = new HttpGet(Url);
        // httpGet.addHeader("Cookie", "JSESSIONID="+PublicData.COOKIE);

        // 取得HttpResponse对象
        HttpResponse httpResponse = httpClient.execute(httpGet);
        // 获取所有的响应头
        Header[] headers = httpResponse.getAllHeaders();
        // 取得响应结果httpResponse中的entity，并可以设置字符集编码
        HttpEntity entity = httpResponse.getEntity();
        // HttpStatus.SC_OK表示连接成功
        if (httpResponse.getStatusLine().getStatusCode() != 404) {
            // 取得返回的字符串
            if (httpResponse.getEntity() != null) {
                // 打印所有的响应头
                for (Header head : headers) {
                    System.out.println(head.toString());
                }
                // 获取响应，并打印服务器返回的响应实体内容
                System.out.println(EntityUtils.toString(entity, "utf-8"));
            } else {
                System.out.println("fail the request");
            }
        }

    }

5、保持会话

Cookie的使用

将获取的cookie保存到文件或数据库，等待下次访问的时候放在请求头里提交给服务器



HttpClient 4.x 库可以自己处理Cookie
有两咱广度可以添加cookie,
1.通过 httpclient.setCookieStore(cookieStore)
2.通过 httpGet 或者 httpPost 的addHeader(new BasicHeader(“Cookie”,cookie));

第一种，
HttpClient是否在下次请求中携带从服务器端请求来的Cookie，完全是由设置决定的。

httpclient.getParams.setParameter(ClientPNames.COOKIE_POLICY, CookiePolicy.BEST_MATCH) 或者 CookiePolicy.BROWSER_COMPATIBILITY
如果设置为Cookie策略为BEST_MATCH，或BROWSER_COMPATIBILITY的话，HttpClient会在请求中携带由服务器返回的Cookie。如果不设置，应该需要手动添加了CookieStore，才会保持sesson.

如果设置为Cookie策略为默认的话，没设置，则需要手动通过
httpclient.setCookieStore(cookieStore); 去设置.

注：如果用的是同一个HttpClient（上下两个请求用同一个httpclient对象。
且没去手动连接放掉client.getConnectionManager().shutdown(); ）!
都不用去设置cookie的ClientPNames.COOKIE_POLICY。httpclient都是会保留cookie的！

第二种，
通过Header去设置cookie,这种方法，就是今天要用的应用场景，
我们得到一个登录的cookie，免登录访问。
可以用浏览器登录，然后f12通过console 执行 document.cookie 得到cookie，
用这个cookie ,在访问时，设置 httpGet 或者 httpPost 的addHeader(new BasicHeader(“Cookie”,cookie));就可以免登录访问。

/**  1、获取cookie  **/
Header[] header = httpResponse.getHeaders("cookie");
/**  2、请求时提交cookie  **/
httpGet.addHeader("Cookie", “cookie Value”);

6、抓包工具的使用

1、浏览器自带的开发工具

2、fiddler的使用

如何通过fiddler来获取其它设备，比如手机上面发送的http请求

这里写图片描述



博文转自：http://blog.csdn.net/u011532367/article/details/50536248












Kugenr
关注
专栏目录
HTTP协议，httpclient协议
小屁孩的博客
01-18 2715
&gt; Http协议的重要性相信不用我多说了，HttpClient相比传统JDK自带的URLConnection，增加了易用性和灵活性（具体区别，日后我们再讨论），它不仅是客户端发送Http请求变得容易，而且也方便了开发人员测试接口（基于Http协议的），即提高了开发的效率，也方便提高代码的健壮性。因此熟练掌握HttpClient是很重要的必修内容，掌握HttpClient后，相信对于H...
httpClient使用总结
热门推荐
courage的专栏
12-15 3万+
一. httpClient初认识       虽然JDK 的 java.net 包中已经提供了访问 HTTP 协议的基本功能，但是对于大部分应用程序来说，JDK 库本身提供的功能还不够丰富和灵活。       HttpClient 是 Apache Jakarta Common 下的子项目，用来提供高效的、最新的、功能丰富的支持 HTTP 协议的客户端编程工具包。 二。 httpClient
HttpClient基于HTTP协议认证方案
jacklce的专栏
01-04 922
HttpClient基于HTTP协议认证方案   简介   HttpClient支持三种不同形式的HTTP协议验证发难：Basic，Digest和NTLM。这些都可以解决同http服务器或是代理服务器之间的认证。   认证服务器   HttpClient处理服务器认证几乎是透明的，发开者只需要做一件事情，提供一个合法login证书。此证书被保存到HttpState实例中并且可调用方
HttpClient --- HttpClientTool工具类
__静禅__
02-05 1471
package com.isoftstone.core.util; import java.io.IOException; import java.io.InterruptedIOException; import java.net.UnknownHostException; import javax.net.ssl.SSLException; import javax.net.ssl.SS...
commons-httpclient-3.0.jar JAVA中使用HttpClient可以用到
04-23
`commons-httpclient-3.0.jar`是这个库的一个稳定版本，包含了对HTTP/1.0和HTTP/1.1协议的全面支持，以及许多实用的功能和特性。 一、HttpClient核心概念 1. **HttpClient对象**：HttpClient是所有操作的基础，它...
commons-httpclient-3.1.jar
06-01
Apache HttpClient是一个强大的HTTP客户端实现库，主要用于构建Java应用程序，以实现对HTTP协议的全面、灵活且高效的处理。在这个专题中，我们将深入探讨Apache HttpClient 3.1的核心特性，以及如何在实际项目中有效...
commons-httpclient.rar
05-06
HttpClient库支持各种HTTP协议特性，如GET、POST方法、Cookie管理、重定向处理、身份验证等，使得在Java应用中实现Web服务调用变得简单易行。 HttpClient的核心功能包括： 1. **HTTP方法支持**：HttpClient提供了...
go-httpclient:使用Go语言标准库的通用HTTP客户端
03-17
`net/http`是Go语言的核心库之一，主要用于处理HTTP协议的客户端和服务器端功能。对于客户端，它提供了创建、发送HTTP请求以及接收响应的方法。其中，`http.Get()`函数是最基础的HTTP GET请求，而`http.Post()`则...
HttpClient 使用案例
weixin_30266885的博客
09-27 119
package com.qifeng.config.ygx.common.utils; import com.alibaba.fastjson.JSON; import com.alibaba.fastjson.JSONObject; import lombok.SneakyThrows; import org.apache.http.HttpEntity; impor...
HttpClient接口协议
weixin_39919087的博客
02-28 192
httpclient使用步骤 1.导入包 2.创建http请求池 CloseableHttpClient httpClient = HttpClients.createDefault(); 3.创建某个请求 post get HttpGet get = new HttpGet("http://www.baidu.com"); 数据封装问题 StringEntity stringEntity ...
HttpClient详细使用案例
qq_40100405的博客
05-03 240
SpringCloud被解决RPC远程调用的问题。我的理解是我们在一个项目中，将各种各样的服务分开写，比如商城网站登录注册，比如支付服务等等，他们之间需要互相调用。SpringCloud底层之间全部依赖HttpClient,相当于一个不带前端功能的浏览器。关于它具体的使用可参考：https://blog.csdn.net/justry_deng/article/details/81042379 ...
HttpClient的使用实例
qq_29663071的博客
04-14 365
客户端 /** * 通过探针扫描IP地址段测试 * */ public void selectByTanzhen() throws Exception { HttpServletRequest request = ServletActionContext.getRequest(); HttpServletResponse response = ServletActionCo
http协议及httpclient实现
biexf的专栏
01-29 1055
http协议的主要特点：支持客户/服务模式;简单快速;灵活(允许任意数据类型的数据对象:Content-Type标识);无连接;无状态
HTTPClient基本使用
diecheng0411的博客
08-20 222
官方网站：https://hc.apache.org/ 使用maven，在xml中引用 <!-- https://mvnrepository.com/artifact/org.apache.httpcomponents/httpclient --> <dependency> <groupId>org.apache.httpcompo...
关于HttpClient的应用
gaochenglong1的博客
07-10 277
http是关于跨域访问。分为六部：   1. 创建HttpClient对象。 2. 创建请求方法的实例，并指定请求URL。如果需要发送GET请求，创建HttpGet对象；如果需要发送POST请求，创建HttpPost对象。 3. 如果需要发送请求参数，可调用HttpGet、HttpPost共同的setParams(HetpParams params)方法来添加请求参数；对于HttpPost对
HttpClient介绍及入门案例
bubble21的博客
07-12 381
HttpClient介绍及入门案例HttpClient介绍及入门案例 什么是httpClient HttpClient主要功能 场景模拟 如何使用 入门案例 什么是httpClient？ HttpClient 是 Apache Jakarta Common 下的子项目，用来提供高效的、最新的、功能丰富的支持 HTTP 协议的客户端编程工具包，并且它支持 HTTP 协议最新的版本和建议。让Java
Http系列-HttpClient使用详情解
qq_41644069的博客
01-09 1214
1.HttpClient简介 HTTP 协议是 Internet 上使用得最多、最重要的协议之一，越来越多的 Java 应用程序需要直接通过 HTTP 协议来访问网络资源。虽然在 JDK 的 java net包中已经提供了访问 HTTP 协议的基本功能，但是对于大部分应用程序来说，JDK 库本身提供的功能还不够丰富和灵活。HttpClient 是 Apache Jakarta Common 下的子项目，用来提供高效的、最新的、功能丰富的支持 HTTP 协议的客户端编程工具包，并且它支持 HTTP 协议最新
基于HttpClient接口开发实例（一）
Dusty丶one的博客
04-19 1万+
前言 本系列将是本人的一些开发经验总结。由于身处金融IT因而因业务需求需要和银行接口打交道，恰巧最近公司有个项目和这有很大的关系，下面我们将着重从基于HttpClient接口开发的技术点+基本业务点说起。这算是公司内部比较机密的东西因而不能做过多的说明。本系列以后牵涉到的概念的业务逻辑都将是最基本的，核心的实现的逻辑不陈述。 概述 本系列陈述的将是基于HttpClient接口开发的实...
Apache Commons-HTTPClient：高效HTTP客户端工具包
1. `commons-httpclient-3.1.jar` - 这是HttpClient的主要库文件，包含了执行HTTP请求所需的核心类和方法。 2. `commons-codec-1.3.jar` - 编码解码库，对于处理如Base64编码等网络通信中常见的编码问题至关重要。 ...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值