HttpClient ||GET请求||带参数的GET请求

最新推荐文章于 2024-08-06 17:13:24 发布

小草dym

最新推荐文章于 2024-08-06 17:13:24 发布

阅读量7.7k

点赞数 1

分类专栏：网络爬虫

本文链接：https://blog.csdn.net/qq_39368007/article/details/104845973

版权

本文介绍了如何使用Java的HttpClient库进行GET请求。内容涵盖基础的GET请求以及如何发送带参数的GET请求，以实现网络爬虫的数据抓取功能。

摘要由CSDN通过智能技术生成

HttpClient

网络爬虫就是用程序帮助我们访问网络上的资源，我们一直以来都是使用HTTP协议访问互联网的网页，网络爬虫需要编写程序，在这里使用同样的HTTP协议访问网页。

这里使用Java的HTTP协议客户端 HttpClient这个技术，来实现抓取网页数据。

GET请求

package cn.itcast.crawler.test;

import org.apache.http.client.methods.CloseableHttpResponse;
import org.apache.http.client.methods.HttpGet;
import org.apache.http.impl.client.CloseableHttpClient;
import org.apache.http.impl.client.HttpClients;
import org.apache.http.util.EntityUtils;

import java.io.IOException;

public class HttpGetTest {

    public static void main(String[] args)  {
        //创建HttpClient对象
        CloseableHttpClient httpClient = HttpClients.createDefault();

        //创建HttpGet对象，设置url访问地址
        HttpGet httpGet = new HttpGet("http://www.itcast.cn