asp.net httpclient post 请求头_爬虫学习之HttpClient练习

HttpClient

简单使用一下

首先我们创建一个运行类

创建HttpClient对象

创建HttpGet对象，设置Url访问地址

使用HttpClient发起请求，获取Response

解析响应

注意释放资源

关闭response

关闭httpClient

运行下

我们可以获取请求的信息

如果搜索信息

就会发现URL有变化，此时带了参数

我们修改代码，首先创建URIBuilder

设置参数

把URI提供给HttpGet

运行结果

我们继续改为Post请求

查看结果

Post请求如果带参数和Get相比不一样的地方是Url地址中不带参数，是在表单中进行提交的

首先声明List集合，封装表单中的参数

创建表单的Entity对象

设置表单的Entity对象到参数中

查看结果

连接池

如果每次请求都要创建HttpClient，会有频繁的创建和销毁的问题，可以使用连接池来解决问题

用代码测试下

创建连接池管理器

创建doGet方法

注意不关闭HttpClient

使用连接器管理器发起请求

设置连接数

设置每个主机的最大连接数，和上面最大连接数相比这个是设置访问主机限制

有时候因为网络，或者目标服务器原因，请求需要很长的时间才能完成，这就需要我们自定义相关时间。

配置请求信息

设置配置信息