URLConnection与HttpURLConnection

已于 2022-12-25 17:19:29 修改
阅读量1k 收藏 2
点赞数 1
分类专栏： # java工具类 文章标签： java 开发语言
于 2022-12-25 17:16:08 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_42847719/article/details/128435563
版权

1.介绍

java原生的 不需要导包 URLConnection是java.net包中的一个抽象类，其主要用于实现应用程序与URL之间的通信。HttpURLConnection继承自URLConnection，也是抽象类。在网络爬虫中，可以使用URLConnection或HttpURLConnection请求URL获取流数据，通过对流数据的操作，获取具体的实体内容

2.实例化


    @Test
    void contextLoads() throws Exception {

        String urls = "https://**.jd.com/";
        URL url = new URL(urls);
        URLConnection conn = url.openConnection();
        HttpURLConnection conn1 = (HttpURLConnection) url.openConnection();
    }

 3.获取网页内容

  @Test
    void contextLoads() throws Exception {

        String urls = "https://**.jd.com/";
        URL url = new URL(urls);
        HttpURLConnection conn = (HttpURLConnection) url.openConnection();
        //获取流数据
        InputStream in = conn.getInputStream();
        //定义BufferedReader输入流读取响应实体内容
        BufferedReader reader = new BufferedReader(new InputStreamReader(in));
        String line;
        String html = "";
        while ((line = reader.readLine()) != null) {
            html+=line;
        }
        System.out.println(html);
        reader.close();
    }

4.GET请求

 针对实例化的HttpURLConnection，可以使用setRequestMethod(String method)方法设置HTTP请求方法，其可设置的请求方法包括GET、POST、HEAD、OPTIONS、PUT、DELETE以及TRACE。程序4-46演示了设置GET的操作。在程序4-46中，setDoInput(true)表示URL连接可用于输入，setRequestMethod("GET")表示设置的请求方法为GET。基于getResponseCode()方法可以获取响应状态码，如果该状态码为200，则利用实例化的StringBuffer将响应内容读取出来

  @Test
    void contextLoads() throws Exception {
        //初始化URL
        URL url = new URL("https://**.jd.com/");
        HttpURLConnection conn = (HttpURLConnection) url.openConnection();
        //允许input
        conn.setDoInput(true);
        conn.setRequestMethod("GET");  //设置请求方式
        conn.connect();           //连接操作
        int statusCode = conn.getResponseCode();   //获取响应状态码
        String responseBody = null;
        if (HttpURLConnection.HTTP_OK == statusCode) {
            //定义BufferedReader输入流来读取URL的响应 ，这里设置编码
            BufferedReader bufferedReader = new BufferedReader(new InputStreamReader(conn.getInputStream()));
            //读取内容
            String readLine = null;
            StringBuffer response = new StringBuffer();
            while (null != (readLine = bufferedReader.readLine())) {
                response.append(response);
            }
            bufferedReader.close();
            responseBody = response.toString();
        }
        System.out.println(responseBody);

    }

 5.模拟提交表单（POST请求）

在使用POST提交参数时，必须将setDoOutput(boolean dooutput)方法中的参数设置为true。

  @Test
    void contextLoads() throws Exception {
         StringBuffer params = new StringBuffer();
        params.append("wen").append("=").append("ajax");
        post("https://**.jd.com/", params);

    }

    public String post(String path, StringBuffer params) throws Exception {
        //初始化URL
        URL url = new URL(path);
        HttpURLConnection conn = (HttpURLConnection) url.openConnection();
        //允许output
        conn.setDoOutput(true);
        conn.setRequestMethod("POST");     //设置请求方式
        byte[] bytes = params.toString().getBytes();
        conn.getOutputStream().write(bytes); //在连接中参加参数

        //定义BufferedReader输入流来读取URL的响应 ，这里设置编码
        BufferedReader bufferedReader = new BufferedReader(new InputStreamReader(conn.getInputStream(),
                StandardCharsets.UTF_8));
        String line;
        String html = "";
        while ((line = bufferedReader.readLine()) != null) {
            html += line;
        }
        bufferedReader.close();
        return html;
    }

6.设置请求头 

token也在请求头中

 7.连接超时设置

8.代理服务器的使用


    @Test
    void contextLoads() throws Exception {

        //代理的IP及端口设置
        Proxy proxy = new Proxy(Proxy.Type.HTTP, new InetSocketAddress("171.97.67.160", 32123));
        URL url = new URL("https://**.jd.com/");
        URLConnection conn = url.openConnection(proxy);//添加代理
        conn.connect(); //建立连接

    }

9. HTTPS请求认证

使用URLConnection与HttpURLConnection直接访问一些以https://为前缀的URL时，也会产生错误。为此，在使用URLConnection与HttpURLConnection之前，也需要创建信任管理器（忽略证书验证）。

import org.junit.jupiter.api.Test;
import org.springframework.boot.test.context.SpringBootTest;

import javax.net.ssl.*;
import java.io.BufferedReader;
import java.io.InputStreamReader;
import java.net.HttpURLConnection;
import java.net.Socket;
import java.net.URL;
import java.security.cert.X509Certificate;


@SpringBootTest
class JsoupApplicationTests {

    @Test
    void contextLoads() throws Exception {
        initUnSecureTSL();
        URL url = new URL("https://**.jd.com/");
        HttpURLConnection conn = (HttpURLConnection) url.openConnection();
        //允许input
        conn.setDoInput(true);
        conn.setRequestMethod("GET");  //设置请求方式
        conn.connect();           //连接操作
        int statusCode = conn.getResponseCode();   //获取响应状态码
        String responseBody = null;
        if (HttpURLConnection.HTTP_OK == statusCode) {
            //定义BufferedReader输入流来读取URL的响应 ，这里设置编码
            BufferedReader bufferedReader = new BufferedReader(new InputStreamReader(conn.getInputStream()));
            //读取内容
            String readLine = null;
            StringBuffer response = new StringBuffer();
            while (null != (readLine = bufferedReader.readLine())) {
                response.append(response);
            }
            bufferedReader.close();
            responseBody = response.toString();
        }
        System.out.println(responseBody);


    }

    private static void initUnSecureTSL() {
        //创建信任管理器 （不验证证书）
        final TrustManager[] trustManagers = {
                new X509ExtendedTrustManager() {


                    public void checkClientTrusted(X509Certificate[] x509Certificates, String s, Socket socket) {

                    }

                    public void checkServerTrusted(X509Certificate[] x509Certificates, String s, Socket socket) {

                    }


                    public void checkClientTrusted(X509Certificate[] x509Certificates, String s, SSLEngine sslEngine) {

                    }

                    @Override
                    public void checkServerTrusted(X509Certificate[] x509Certificates, String s, SSLEngine sslEngine) {

                    }

                    @Override
                    public void checkClientTrusted(X509Certificate[] x509Certificates, String s) {

                    }

                    @Override
                    public void checkServerTrusted(X509Certificate[] x509Certificates, String s) {

                    }

                    @Override
                    public X509Certificate[] getAcceptedIssuers() {
                        return new X509Certificate[0];//或者return null
                    }

                }
        };
        try {
            //使用指定的信任管理器初始化
            final SSLContext sslContext = SSLContext.getInstance("SSL");
            sslContext.init(null, trustManagers, new java.security.SecureRandom());
            //基于信任管理器创建套接字工厂
            final SSLSocketFactory sslSocketFactory = sslContext.getSocketFactory();
            //为  HttpsURLConnection配置套接字工厂
            HttpsURLConnection.setDefaultSSLSocketFactory(sslSocketFactory);
            //正常访问Https协议网站
        } catch (Exception e) {
            e.printStackTrace();
        }
    }

}

10.工具类



import java.io.BufferedReader;
import java.io.InputStreamReader;
import java.net.HttpURLConnection;

import java.net.URL;
import java.nio.charset.StandardCharsets;


public class HttpURLConnectionUtil {

    /**
     * get 请求  需要将请求拼接
     */
    public String get(String path) throws Exception {
        //初始化URL
        URL url = new URL(path);
        HttpURLConnection conn = (HttpURLConnection) url.openConnection();
        //允许input
        conn.setDoInput(true);
        conn.setRequestMethod("GET");  //设置请求方式
        conn.setConnectTimeout(30000);  //连接超时，单位毫秒
        conn.setReadTimeout(30000);    //读取超时， 单位毫秒
        conn.connect();           //连接操作
        int statusCode = conn.getResponseCode();   //获取响应状态码
        String responseBody = null;
        if (HttpURLConnection.HTTP_OK == statusCode) {
            //定义BufferedReader输入流来读取URL的响应 ，这里设置编码
            BufferedReader bufferedReader = new BufferedReader(new InputStreamReader(conn.getInputStream()));
            //读取内容
            String readLine = null;
            StringBuffer response = new StringBuffer();
            while (null != (readLine = bufferedReader.readLine())) {
                response.append(response);
            }
            bufferedReader.close();
            responseBody = response.toString();
        }
        return responseBody;
    }

    /**
     * get 请求  带token
     */
    public String get(String path, String token) throws Exception {
        //初始化URL
        URL url = new URL(path);
        HttpURLConnection conn = (HttpURLConnection) url.openConnection();
        //允许input
        conn.setDoInput(true);
        conn.setRequestMethod("GET");  //设置请求方式
        conn.setConnectTimeout(30000);  //连接超时，单位毫秒
        conn.setReadTimeout(30000);    //读取超时， 单位毫秒
        //设置请求头
        conn.setRequestProperty("User-Agent", "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) "
                + "Chrome/104.0.0.0 Safari/537.36");
        conn.setRequestProperty("content-type", "application/json");
        conn.setRequestProperty("X-Access-Token", token);
        conn.connect();           //连接操作
        int statusCode = conn.getResponseCode();   //获取响应状态码
        String responseBody = null;
        if (HttpURLConnection.HTTP_OK == statusCode) {
            //定义BufferedReader输入流来读取URL的响应 ，这里设置编码
            BufferedReader bufferedReader = new BufferedReader(new InputStreamReader(conn.getInputStream()));
            //读取内容
            String readLine = null;
            StringBuffer response = new StringBuffer();
            while (null != (readLine = bufferedReader.readLine())) {
                response.append(response);
            }
            bufferedReader.close();
            responseBody = response.toString();
        }
        return responseBody;
    }

    /**
     * post 请求带参  无token
     *
     * @param path
     * @param params
     * @return
     * @throws Exception
     */
    public String post(String path, StringBuffer params) throws Exception {
        //初始化URL
        URL url = new URL(path);
        HttpURLConnection conn = (HttpURLConnection) url.openConnection();
        //允许output
        conn.setDoOutput(true);
        conn.setRequestMethod("POST");     //设置请求方式
        conn.setConnectTimeout(30000);  //连接超时，单位毫秒
        conn.setReadTimeout(30000);    //读取超时， 单位毫秒
        byte[] bytes = params.toString().getBytes();
        conn.getOutputStream().write(bytes); //在连接中参加参数

        //定义BufferedReader输入流来读取URL的响应 ，这里设置编码
        BufferedReader bufferedReader = new BufferedReader(new InputStreamReader(conn.getInputStream(),
                StandardCharsets.UTF_8));
        String line;
        String html = "";
        while ((line = bufferedReader.readLine()) != null) {
            html += line;
        }
        bufferedReader.close();
        return html;
    }

    /**
     * post 请求 带参数 带token
     *
     * @param path
     * @param params
     * @param token
     * @return
     * @throws Exception
     */
    public String post(String path, StringBuffer params, String token) throws Exception {
        //初始化URL
        URL url = new URL(path);
        HttpURLConnection conn = (HttpURLConnection) url.openConnection();
        //允许output
        conn.setDoOutput(true);
        conn.setRequestMethod("POST");     //设置请求方式

        conn.setConnectTimeout(30000);  //连接超时，单位毫秒
        conn.setReadTimeout(30000);    //读取超时， 单位毫秒
        //设置请求头
        conn.setRequestProperty("User-Agent", "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) "
                + "Chrome/104.0.0.0 Safari/537.36");
        conn.setRequestProperty("content-type", "application/json");
        conn.setRequestProperty("X-Access-Token", token);
        byte[] bytes = params.toString().getBytes();
        conn.getOutputStream().write(bytes); //在连接中参加参数

        //定义BufferedReader输入流来读取URL的响应 ，这里设置编码
        BufferedReader bufferedReader = new BufferedReader(new InputStreamReader(conn.getInputStream(),
                StandardCharsets.UTF_8));
        String line;
        String html = "";
        while ((line = bufferedReader.readLine()) != null) {
            html += line;
        }
        bufferedReader.close();
        return html;
    }

}

Royalreairman
关注
  • 1
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
谈谈Java利用原始HttpURLConnection发送POST数据
09-03
主要给大家介绍java利用原始httpUrlConnection发送post数据，设计到httpUrlConnection类的相关知识，感兴趣的朋友跟着小编一起学习吧
UrlConnection连接和Socket连接的区别
03-28
NULL 博文链接：https://zhoujianghai.iteye.com/blog/1195988
Android基于HttpUrlConnection类的文件下载实例代码
08-29
本文通过实例代码给大家介绍了Android基于HttpUrlConnection类的文件下载功能，非常不错，具有参考借鉴价值，需要的的朋友参考下吧
HttpUrlConnection使用详解
AP0906424的博客
10-10 1780
一，HttpURLconnection的介绍 在Android开发中网络请求是最常用的操作之一， Android SDK中对HTTP(超文本传输协议)也提供了很好的支持，这里包括两种接口: 1、标准Java接口(java.NET) —-HttpURLConnection，可以实现简单的基于URL请求、响应功能； 2、Apache接口(org.appache.http)—-HttpClient，使用起来更方面更强大。 但在android API23的SDK中Google将HttpClient移除了。Goo
HttpURLConnection使用方法
TiankkTT的博客
09-04 3788
HttpURLConnection的connect()函数，实际上只是建立了一个与服务器的tcp连接，并没有实际发送http请求。无论是post还是get，http请求实际上直到HttpURLConnection的getInputStream()这个函数里面才正式发送出去。在用POST方式发送URL请求时，URL请求参数的设定顺序是重中之重， 对connection对象的一切配置（那一堆set函数） 都必须要在connect()函数执行之前完成。
【Java基础】- HttpURLConnection详解
最新发布
记录总结工作过往
06-07 6571
HttpURLConnection对象不能直接构造，需使用URL类中的openConnection()方法来创建实例。
HttpUrlConnection 基础使用
那些年的代码
08-30 398
From https://developer.android.com/reference/java/net/HttpURLConnection.html HttpUrlConnection: A URLConnection with support for HTTP-specific features. See the spec for details. Uses of this class fo...
HttpURLConnection链接详解
热门推荐
small_love的专栏
01-10 1万+
简单来说，HttpURLConnection 是 Java 提供的发起 HTTP 请求的基础类库，提供了 HTTP 请求的基本功能，不过封装的比较少，在使用时很多内容都需要自己设置，也需要自己处理请求流和响应流。
HttpURLConnection设置代理的两种方式
m0_66757371的博客
08-24 5434
第二种：1.5之后，可以通过Proxy类建立链接。第一种：直接设置代理。
Httpurlconnection
11-24
代码包含了httpurlconnection基本操作，一些正常的操作。
Java 中HttpURLConnection附件上传的实例详解
08-29
主要介绍了Java 中HttpURLConnection附件上传的实例详解的相关资料,希望通过本文大家能掌握这样的知识内容，需要的朋友可以参考下
URLConnection发送HTTP请求的方法_动力节点Java学院整理
08-29
主要介绍了URLConnection发送HTTP请求的方法，主要介绍了如何通过Java（模拟浏览器）发送HTTP请求，有兴趣的可以了解一下
HttpURLConnection OKHttp实现请求
01-30
分别使用HttpURLConnection OKHttp实现请求
Android使用URLConnection提交请求的实现
01-20
URL的openConnection()方法将返回一个URLConnection对象，该对象表示应用程序和URL之间的通信连接。程序可以通过URLConnection实例向该URL发送请求，读取URL引用的资源。 通常创建一个和URL的连接，并发送请求、读取...
Android HttpURLConnection 读取网络图片.rar
07-10
　这次的HttpURLConnection仅针对Http连接，效率胜于URLConnection。new URL对象将网址传入 　HttpURLConnection conn = (HttpURLConnection) imageUrl.openConnection();// 取得连接 　conn.connect(); 　...
java利用java.net.URLConnection发送HTTP请求的方法详解
08-30
如何通过Java（模拟浏览器）发送HTTP请求是我们在日常经常会遇到的问题，下面这篇文章主要给大家介绍了关于java利用java.net.URLConnection发送HTTP请求的相关资料，文中介绍的非常详细，需要的朋友可以参考借鉴，...
Android HttpURLConnection.getResponseCode()错误解决方法
01-06
正文：我在使用HttpURLConnection.getResponseCode()的时候直接报错是IOException错误，responseCode = -1。一直想不明白，同一个程序我调用了两次，结果有一个链接一直OK，另一个却一直报这个错误。后来发现两个...
HttpURLConnection 与URLConnection的区别
06-02
`HttpURLConnection` 是 `URLConnection` 的一个子类，它们之间的主要区别在于 `HttpURLConnection` 提供了更多的 HTTP 请求方式和响应的处理方法，适用于 HTTP 和 HTTPS 请求。 具体区别如下： 1. `HttpURLConnection` 的实例可以使用 `setRequestMethod()` 方法设置请求方式，例如 GET、POST、PUT、DELETE 等，而 `URLConnection` 只能使用默认的 GET 请求方式。 2. `HttpURLConnection` 的实例可以使用 `getResponseCode()` 方法获取 HTTP 响应码，例如 200、404、500 等，而 `URLConnection` 只能获取到响应的输入流。 3. `HttpURLConnection` 的实例可以使用 `setRequestProperty()` 方法设置请求头信息，例如 User-Agent、Content-Type 等，而 `URLConnection` 只能设置少量的请求头信息。 4. `HttpURLConnection` 支持缓存，通过 `setUseCaches()` 方法控制，而 `URLConnection` 不支持缓存。 5. `HttpURLConnection` 可以设置连接超时时间和读取超时时间，而 `URLConnection` 只能设置连接超时时间。 综上所述，当我们需要进行 HTTP 或 HTTPS 请求时，推荐使用 `HttpURLConnection`。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

Royalreairman

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值