java中模拟浏览器访问网页(三)

一.前言

看完上一节中浏览器访问网页的行为分析之后,你是不是很好奇在Java程序中要怎么去访问一个网页呢?先来回想一下浏览器访问网页的最基本流程:
封装请求->发送请求->接收响应->解析并作出动作
那么在Java中,我们要完成这套动作,用到的就是HttpURLConnection这个类,他可以帮助我们去完成一个请求网页的动作

二.如何发送一个请求

HttpUrlConnection实例

HttpUrlConnection是Java自带的类,所以并不需要导入第三方的jar包,而在通常情况下,获取HttpUrlConnection实例的方法是通过一个URL来打开一个连接从而获取实例,如下:

HttpURLConnection conn = null;
try {

    URL realUrl = new URL("www.163.com");
    conn = (HttpURLConnection) realUrl.openConnection();
}catch (Exception e) {
    //Url出错
}

这里值得注意的是,这样仅仅是打开一个连接而已,此时并未发送请求,接下来要做的,是设置HttpUrlConnection的参数:

            //设置post方法
            conn.setRequestMethod("POST");
            //不使用缓存
            conn.setUseCaches(false);
            // 发送POST请求必须设置如下两行
            conn.setDoOutput(true);
            conn.setDoInput(true);
            //读取超时时间
            conn.setReadTimeout(8000);
            //连接超时时间
            conn.setConnectTimeout(8000);
            //这一句很重要,设置不要302自动跳转,后面会讲解到
      
  • 3
    点赞
  • 24
    收藏
    觉得还不错? 一键收藏
  • 3
    评论
你可以使用Java的HttpURLConnection类来模拟浏览器访问百度搜索。以下是一个简单的示例代码: ```java import java.io.BufferedReader; import java.io.InputStreamReader; import java.net.HttpURLConnection; import java.net.URL; import java.net.URLEncoder; public class BaiduSearch { public static void main(String[] args) { try { // 搜索关键词 String keyword = "java"; // 编码关键词 String encodedKeyword = URLEncoder.encode(keyword, "UTF-8"); // 百度搜索地址 String baiduSearchUrl = "https://www.baidu.com/s?wd=" + encodedKeyword; // 创建URL对象 URL url = new URL(baiduSearchUrl); // 创建HttpURLConnection对象 HttpURLConnection connection = (HttpURLConnection) url.openConnection(); // 设置请求方法 connection.setRequestMethod("GET"); // 设置请求头信息,模拟浏览器访问 connection.setRequestProperty("User-Agent", "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.110 Safari/537.3"); // 获取响应状态码 int responseCode = connection.getResponseCode(); if (responseCode == HttpURLConnection.HTTP_OK) { // 获取响应数据 BufferedReader in = new BufferedReader(new InputStreamReader(connection.getInputStream(), "UTF-8")); String inputLine; StringBuilder response = new StringBuilder(); while ((inputLine = in.readLine()) != null) { response.append(inputLine); } in.close(); // 输出响应数据 System.out.println(response.toString()); } else { System.out.println("请求失败,响应状态码为:" + responseCode); } } catch (Exception e) { System.out.println("请求失败,出现异常:" + e.getMessage()); } } } ``` 运行该代码后,控制台会输出百度搜索结果的HTML代码。注意,这里只是一个简单的示例,实际应用还需要处理一些异常情况,如网络异常、响应状态码非200等。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 3
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值