29.1认识HttpClient

最新推荐文章于 2024-08-20 01:28:07 发布
最新推荐文章于 2024-08-20 01:28:07 发布
阅读量347 收藏
点赞数
分类专栏： javaWeb 文章标签： 前后端分离 系统之间通信
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/miss_yinghao/article/details/78600774
版权

前后台分离时，如何实现前台系统调用后台系统？
这里写图片描述

上图有两种调用方式，下面进行一一解释：

1、 通过js调用（图上蓝色线）

    a)  优点
    i.  直接调用，没有java代码中转，调用的路径更短
    ii. 节省服务器的带宽
    b)  缺点
    i.  调用接口时无法添加自己的业务逻辑（如：缓存）
    ii. 接口不安全
    1.  有些接口只能在内网公开
    iii.    Jsonp需要接口的提供方提供支持（存在局限性）

2、 通过后台java调用（图上黄色线）

    a)  优点
    i.  安全
    ii. 可以添加自己的业务逻辑
    iii.    对接口的提供方没有要求，没有局限性
    b)  缺点
    i.  间接调用接口，使得调用路径变长
    1.  不是真正的缺点，添加自己业务逻辑
    ii. 占用内网的带宽
    1.  发布上线时需要考虑服务器机房的网络带宽

总结：在实际企业开发中，以上2种方式都会使用，往往都是这2种方式结合使用。

如何在java中发起http请求？ – HttpClient

这里写图片描述

创建一个maven项目，在该项目中配置httpclient的标签

<dependency>
        <groupId>org.apache.httpcomponents</groupId>
        <artifactId>httpclient</artifactId>
        <version>4.3.5</version>
    </dependency>

学习如下几个文件：
这里写图片描述

回想我们使用浏览器的步骤：
1.打开浏览器
2.输入要访问的网址，例如：百度
3.按下回车键，执行我们的请求
4.如果成功就显示页面，该页面是浏览器对html渲染后的效果；如果不成功也会返回给我们一个状态码。
5.使用完成后关闭浏览器

我们在使用httpclient的时候与上述浏览器的使用步骤是一致的。下面贴出详细代码：

DoGET.java

package cn.itcast.httpclient;

import org.apache.http.client.methods.CloseableHttpResponse;
import org.apache.http.client.methods.HttpGet;
import org.apache.http.impl.client.CloseableHttpClient;
import org.apache.http.impl.client.HttpClients;
import org.apache.http.util.EntityUtils;

public class DoGET {

    public static void main(String[] args) throws Exception {

        // 创建Httpclient对象
//        打开浏览器
        CloseableHttpClient httpclient = HttpClients.createDefault();

        // 创建http GET请求
//        输入网址
        HttpGet httpGet = new HttpGet("http://www.baidu.com/");

        CloseableHttpResponse response = null;
        try {
            // 执行请求
//            按下回车键
            response = httpclient.execute(httpGet);
            // 判断返回状态是否为200
            if (response.getStatusLine().getStatusCode() == 200) {
//                浏览器度html进行渲染
                String content = EntityUtils.toString(response.getEntity(), "UTF-8");
                System.out.println("输出内容："+content);
            }
        } finally {
//            关闭浏览器
            if (response != null) {
                response.close();
            }
            httpclient.close();
        }

    }

}

DoGETParam.java

package cn.itcast.httpclient;

import java.net.URI;

import org.apache.http.client.methods.CloseableHttpResponse;
import org.apache.http.client.methods.HttpGet;
import org.apache.http.client.utils.URIBuilder;
import org.apache.http.impl.client.CloseableHttpClient;
import org.apache.http.impl.client.HttpClients;
import org.apache.http.util.EntityUtils;

public class DoGETParam {

    public static void main(String[] args) throws Exception {

        // 创建Httpclient对象
        CloseableHttpClient httpclient = HttpClients.createDefault();

        // 定义请求的参数
        URI uri = new URIBuilder("http://www.baidu.com/s").setParameter("wd", "java").build();

        System.out.println(uri);

        // 创建http GET请求
        HttpGet httpGet = new HttpGet(uri);

        CloseableHttpResponse response = null;
        try {
            // 执行请求
            response = httpclient.execute(httpGet);
            // 判断返回状态是否为200
            if (response.getStatusLine().getStatusCode() == 200) {
                String content = EntityUtils.toString(response.getEntity(), "UTF-8");
                System.out.println(content);
            }
        } finally {
            if (response != null) {
                response.close();
            }
            httpclient.close();
        }

    }

}

DoPOST.java

(首先测试百度是否可以走post请求)
这里写图片描述
发现报错，说明百度不支持post请求。
换一个连接地址：开源中国http://www.oschina.net/
这里写图片描述
请求成功，说明支持post请求。

编写代码，用程序对该网站做请求：

package cn.itcast.httpclient;

import org.apache.http.client.methods.CloseableHttpResponse;
import org.apache.http.client.methods.HttpPost;
import org.apache.http.impl.client.CloseableHttpClient;
import org.apache.http.impl.client.HttpClients;
import org.apache.http.util.EntityUtils;

public class DoPOST {

    public static void main(String[] args) throws Exception {

        // 创建Httpclient对象
        CloseableHttpClient httpclient = HttpClients.createDefault();

        // 创建http POST请求
        HttpPost httpPost = new HttpPost("http://www.oschina.net/");

        CloseableHttpResponse response = null;
        try {
            // 执行请求
            response = httpclient.execute(httpPost);
            // 判断返回状态是否为200
            if (response.getStatusLine().getStatusCode() == 200) {
                String content = EntityUtils.toString(response.getEntity(), "UTF-8");
                System.out.println(content);
            }
        } finally {
            if (response != null) {
                response.close();
            }
            httpclient.close();
        }

    }

}

执行该代码发现报403错误，但是刚测试可以进行post请求，这是什么原因呢？是开源做了一个限制，不允许程序访问网站，是为了防止爬虫。解决办法是伪装成浏览器。如何伪装呢？我们发现通过浏览器请求都会加如下信息：
这里写图片描述
我们在程序中加上上述语句即可。

package cn.itcast.httpclient;

import org.apache.http.client.methods.CloseableHttpResponse;
import org.apache.http.client.methods.HttpPost;
import org.apache.http.impl.client.CloseableHttpClient;
import org.apache.http.impl.client.HttpClients;
import org.apache.http.util.EntityUtils;

public class DoPOST {

    public static void main(String[] args) throws Exception {

        // 创建Httpclient对象
        CloseableHttpClient httpclient = HttpClients.createDefault();

        // 创建http POST请求
        HttpPost httpPost = new HttpPost("http://www.oschina.net/");
//    **伪装成浏览器进行访问**
        **httpPost.setHeader("User-Agent","Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/53.0.2785.116 Safari/537.36");**
        CloseableHttpResponse response = null;
        try {
            // 执行请求
            response = httpclient.execute(httpPost);
            // 判断返回状态是否为200
            if (response.getStatusLine().getStatusCode() == 200) {
                String content = EntityUtils.toString(response.getEntity(), "UTF-8");
                System.out.println(content);
            }
        } finally {
            if (response != null) {
                response.close();
            }
            httpclient.close();
        }

    }

}

DoPOSTParam.java

package cn.itcast.httpclient;

import java.util.ArrayList;
import java.util.List;

import org.apache.http.NameValuePair;
import org.apache.http.client.entity.UrlEncodedFormEntity;
import org.apache.http.client.methods.CloseableHttpResponse;
import org.apache.http.client.methods.HttpPost;
import org.apache.http.impl.client.CloseableHttpClient;
import org.apache.http.impl.client.HttpClients;
import org.apache.http.message.BasicNameValuePair;
import org.apache.http.util.EntityUtils;

public class DoPOSTParam {

    public static void main(String[] args) throws Exception {

        // 创建Httpclient对象
        CloseableHttpClient httpclient = HttpClients.createDefault();

        // 创建http POST请求
        HttpPost httpPost = new HttpPost("http://www.oschina.net/search");

        // 设置2个post参数，一个是scope、一个是q
        List<NameValuePair> parameters = new ArrayList<NameValuePair>(0);
        parameters.add(new BasicNameValuePair("scope", "project"));
        parameters.add(new BasicNameValuePair("q", "java"));
        parameters.add(new BasicNameValuePair("fromerr", "RgI0EeI0"));
        // 构造一个form表单式的实体
        UrlEncodedFormEntity formEntity = new UrlEncodedFormEntity(parameters);
        // 将请求实体设置到httpPost对象中
        httpPost.setEntity(formEntity);
        httpPost.setHeader("User-Agent","Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/53.0.2785.116 Safari/537.36");
        CloseableHttpResponse response = null;
        try {
            // 执行请求
            response = httpclient.execute(httpPost);
            // 判断返回状态是否为200
            if (response.getStatusLine().getStatusCode() == 200) {
                String content = EntityUtils.toString(response.getEntity(), "UTF-8");
                System.out.println(content);
            }
        } finally {
            if (response != null) {
                response.close();
            }
            httpclient.close();
        }

    }

}

上面浏览器中参数的设置依据，都是先用浏览器进行访问，然后按照浏览器的访问格式编写代码用程序去进行访问。
这里写图片描述

以上代码都是先打开浏览器然后访问最后做关闭。每次都创建然后销毁，性能比较差。和数据库的连接有点相像，数据库用的是连接池。这里我们使用连接管理器，来创建浏览器。

package cn.itcast.httpclient;

import org.apache.http.client.methods.CloseableHttpResponse;
import org.apache.http.client.methods.HttpGet;
import org.apache.http.conn.HttpClientConnectionManager;
import org.apache.http.impl.client.CloseableHttpClient;
import org.apache.http.impl.client.HttpClients;
import org.apache.http.impl.conn.PoolingHttpClientConnectionManager;
import org.apache.http.util.EntityUtils;

public class HttpConnectManager {

    public static void main(String[] args) throws Exception {
        PoolingHttpClientConnectionManager cm = new PoolingHttpClientConnectionManager();
        // 设置最大连接数
        cm.setMaxTotal(200);
        // 设置每个主机地址的并发数
        cm.setDefaultMaxPerRoute(20);

        doGet(cm);
        doGet(cm);
    }

    public static void doGet(HttpClientConnectionManager cm) throws Exception {
//        打开浏览器
        CloseableHttpClient httpClient = HttpClients.custom().setConnectionManager(cm).build();

        // 创建http GET请求
        HttpGet httpGet = new HttpGet("http://www.baidu.com/");

        CloseableHttpResponse response = null;
        try {
            // 执行请求
            response = httpClient.execute(httpGet);
            // 判断返回状态是否为200
            if (response.getStatusLine().getStatusCode() == 200) {
                String content = EntityUtils.toString(response.getEntity(), "UTF-8");
                System.out.println("内容长度：" + content.length());
            }
        } finally {
            if (response != null) {
                response.close();
            }
            // 此处不能关闭httpClient，如果关闭httpClient，连接池也会销毁
            // httpClient.close();
        }
    }

}

上面的连接管理器打开了一个浏览器，可以在该浏览器中执行多个uri，相当于打开一个浏览器里面有多个tab，如下图：
这里写图片描述

如果有些tab页访问过后不再需要，也没有进行关闭的话，就会造成打开的tab越来越多。不可用的tab就会占用资源，就需要我们定期清理无效连接，需要通过一个线程将无效的连接关闭：
ClientEvictExpiredConnections.java

package cn.itcast.httpclient;

import org.apache.http.conn.HttpClientConnectionManager;
import org.apache.http.impl.conn.PoolingHttpClientConnectionManager;

public class ClientEvictExpiredConnections {

    public static void main(String[] args) throws Exception {
        PoolingHttpClientConnectionManager cm = new PoolingHttpClientConnectionManager();
        // 设置最大连接数
        cm.setMaxTotal(200);
        // 设置每个主机地址的并发数
        cm.setDefaultMaxPerRoute(20);

        new IdleConnectionEvictor(cm).start();
    }

    public static class IdleConnectionEvictor extends Thread {

        private final HttpClientConnectionManager connMgr;

        private volatile boolean shutdown;

        public IdleConnectionEvictor(HttpClientConnectionManager connMgr) {
            this.connMgr = connMgr;
        }

        @Override
        public void run() {
            try {
                while (!shutdown) {
                    synchronized (this) {
                        wait(5000);
                        // 关闭失效的连接
                        connMgr.closeExpiredConnections();
                    }
                }
            } catch (InterruptedException ex) {
                // 结束
            }
        }

        public void shutdown() {
            shutdown = true;
            synchronized (this) {
                notifyAll();
            }
        }
    }

}

当我们发起一个http请求的时候都要设置一定的参数，创建连接的最长时间，传输的最长时间等。此处的参数如果不设置会出问题的，比如未设置连接创建时间，就意味着一直连接下去，比如连到一个网站该网站未响应那么我们的程序就会一直去连接，那该程序就一直卡在这里无法继续运行。所以最好还是手动设置一下，可以提高体验性能：
RequestConfigDemo.java

package cn.itcast.httpclient;

import org.apache.http.client.config.RequestConfig;
import org.apache.http.client.methods.CloseableHttpResponse;
import org.apache.http.client.methods.HttpGet;
import org.apache.http.impl.client.CloseableHttpClient;
import org.apache.http.impl.client.HttpClients;
import org.apache.http.util.EntityUtils;

public class RequestConfigDemo {

    public static void main(String[] args) throws Exception {

        // 创建Httpclient对象
        CloseableHttpClient httpclient = HttpClients.createDefault();

        // 创建http GET请求
        HttpGet httpGet = new HttpGet("http://www.baidu.com/");

        // 构建请求配置信息
        RequestConfig config = RequestConfig.custom().setConnectTimeout(1000) // 创建连接的最长时间
                .setConnectionRequestTimeout(500) // 从连接池中获取到连接的最长时间
                .setSocketTimeout(10 * 1000) // 数据传输的最长时间
                .setStaleConnectionCheckEnabled(true) // 提交请求前测试连接是否可用
                .build();
        // 设置请求配置信息
        httpGet.setConfig(config);

        CloseableHttpResponse response = null;
        try {
            // 执行请求
            response = httpclient.execute(httpGet);
            // 判断返回状态是否为200
            if (response.getStatusLine().getStatusCode() == 200) {
                String content = EntityUtils.toString(response.getEntity(), "UTF-8");
                System.out.println(content);
            }
        } finally {
            if (response != null) {
                response.close();
            }
            httpclient.close();
        }

    }

}

上面分析了Httpclient中各个文件的作用，下面就把它集成到项目中去使用。我们在程序中肯定使用连接管理器来实现。使用连接管理器，用到的连接池一般都是由spring来管理，下面就需要spring与Httpclient做整合。

YingZiBo
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
29.1.2 恢复数据
weixin_41275260的博客
06-25 43
29.1.2　恢复数据 使用mysqldump备份的数据恢复起来也比较简单，可以直接使用mysql命令恢复，也可以登录MySQL命令行使用SOURCE命令恢复数据，还可以使用cat命令结合Linux管道符恢复数据。 例如，以备份的mysqldump_databases_goods.sql文件恢复goods数据库为例，笔者将goods数据库删除。 mysql> DROP ...
spring一个项目调用另一个项目接口的方法，HttpClient调用
热门推荐
qq_39478853的博客
11-04 1万+
客户端代码 所需jar  HttpClient代码 import java.io.UnsupportedEncodingException; import java.nio.charset.Charset; import net.sf.json.JSONObject; import org.apache.http.HttpEntity; import org.ap
29.1：manacher算法
最新发布
深入探索技术领域，持续学习成长，追求实践与进步，共同构建技术未来
08-20 68
29.1：manacher算法
【例29.1】 求阶乘题解
fkjdfdryr的博客
12-02 254
主要就是利用一个循环，一个累加计数器，把阶乘解求出即可。
3174：【例29.1】 求阶乘
yp1102013的博客
04-29 211
输入一个正整数nn,对于所有数据,1≤n≤20。=1×2×...×n。利用for循环求n!
认识与学习Bash
笔落_惊风雨的博客
04-15 484
通配符常用于命令行或脚本等bash环境* 匹配0个或无穷个任意字符?匹配一个任意字符c.txt.txtab.txt[xxx] 匹配中括号内的任意一个字符；[0-9] 代表0到9之间所有数字ab.txt[-] 中括号内有减号，代表在编码顺序内的所有字符；[0-9] 代表0到9之间所有数字ls[^] 中括号内有指数符号，代表反向；[^abc] 代表有一个非a或b或c的字符。
再多亿人就会爆炸 3177：练29.1 人口增长问题
yangkehanSG的博客
03-15 496
int main()int i,n;double x;cin>>x>>n;for(i=1;i<=n;i++)x=x*1.001;return 0;
每日练习（3-29.1）
weixin_40805072的博客
03-29 126
一、 输出杨辉三角 （声明下，有些代码是学习了别人的代码，然后我用自己的思维去详述，对于小白还是比较有用的） 1.先就题论题吧。就说咋打印出这个东西。先从简单的来。 1 1 1 1 2 1 1 3 3 1 1 4 6 4 1 1 5 10 10 5 1 ...
Spring Boot 29.1.2连接到生产数据库
大强博客
03-27 235
生产数据库连接也可以使用池进行自动配置 DataSource。Spring Boot使用以下算法来选择特定的实现：我们更喜欢HikariCP的性能和并发性。如果HikariCP可用，我们总是选择它。否则，如果Tomcat池DataSource可用，我们使用它。如果HikariCP和Tomcat池数据源都不可用，并且 Commons DBCP2可用，那么我们使用它。如果你使用spring-boot-...
Linux内核2.6.29.1
01-21
Linux内核2.6.29.1是Linux操作系统的核心组成部分，它负责管理系统的硬件资源，提供基础服务供用户空间的应用程序使用。这个版本的内核发布于2009年，是Linux内核2.6系列的一个稳定更新。在这个版本中，开发者们对...
emacs-29.1.tar.gz
03-03
最新版本为“emacs-29.1”，这表明它是 Emacs 的一个重要更新。 在描述中提到的“py依赖包”，意味着这个版本的 Emacs 特别关注 Python 开发者的需求。Emacs 本身已经内置了对多种编程语言的支持，包括 Python。它...
Wired_driver_29.1_32.zip
05-13
《有线驱动程序29.1_32.zip：多语言文档样式表解析》 "Wire_driver_29.1_32.zip"这个压缩包文件，从名称来看，很显然是一个与有线设备驱动程序相关的软件包。驱动程序是操作系统与硬件设备之间的重要桥梁，确保操作...
quartus29.1的破解文件
03-05
quartus29.1版的破解文件，自己用过，绝对好用！
29.1-投影.ppt
05-28
29.1-投影.ppt
23.Nginx实现多个项目的统一访问地址
YingZiBo的博客
11-19 9090
本地开发环境开发项目的过程 1.开发项目 2.启动Tomcat 3.通过浏览器进行地址访问：http://127.0.01:{port}/{path}进行相关的测试修改等。 以上3是存在问题的：本地开发环境的访问地址和上线环境的地址是不一样的。可能会引发一下问题 1）可能将访问的url硬编码到java中，如果项目发布上线，没有修改地址，会导致访问不到的情况。如果咋本地还需要改回本
14.通用Mapper中的方法详解
YingZiBo的博客
11-17 6517
package cn.itcast.mybatis.mapper; import static org.junit.Assert.*; import java.io.InputStream; import java.util.ArrayList; import java.util.Date; import java.util.List; import javax.persistence.Id
Jsonp请求只能是GET不能是POST
YingZiBo的博客
12-05 6106
现象： 1）controller中限定方法为get请求method=RequestMethod.GET 2）接口测试工具，使用POST请求不成功，后台报错 [org.springframework.web.servlet.PageNotFound] - Request method ‘POST’ not supported 3）前端ajax调用同样的接口，type:POST,dataTy
28.ResponseEntity与ResponseBody注解的关系
YingZiBo的博客
11-21 5154
1.ResponseEntity的优先级高于@ResponseBody。在不是ResponseEntity的情况下才去检查有没有@ResponseBody注解。如果响应类型是ResponseEntity可以不写@ResponseBody注解，写了也没有关系。2.ResponseEntity中的body和build什么时候使用？ 看返回类型的泛型，build()的泛型是void，如果返回的是某一个对
obs-studio-29.1.3-full-installer-x64.exe
08-21
obs-studio-29.1.3-full-installer-x64.exe是一个可以安装OBS Studio软件的文件。 OBS Studio是一款开源的免费软件，专门用于实时录制和流媒体直播。这个软件非常适用于视频游戏玩家、教育工作者和内容创作者等各种...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值