使用HttpClient登陆网站 抓取页面数据

本文介绍如何利用HttpClient Java库实现网站登录并抓取页面数据。通过HttpPost提交登录信息,获取Cookie,然后用HttpGet携带Cookie访问目标页面,从而成功获取到图书馆用户信息。示例代码展示了详细步骤。
摘要由CSDN通过智能技术生成

使用HttpClient开源工具包访问网络比HttpURLConnection省了不少事

步骤如下:

1.使用HttpPost提交表单数据,比如用户名密码什么的,HttpClient.getCookieStore().getCookies(),拿到到登陆Cookie

2.使用HttpGet获取要得到的页面,执行的时候带上得到的Cookie数据才能正确访问


我就抓取到了整个学校图书馆的用户信息啊哈哈哈(弱密码安静



代码如下


package njupt;

import java.io.FileOutputStream;
import java.io.IOException;
import java.io.InputStream;
import java.io.OutputStream;
import java.util.ArrayList;
import java.util.List;

import org.apache.http.Consts;
import org.apache.http.HttpResponse;
import org.apache.http.NameValuePair;
import org.apache.http.client.HttpClient;
import org.apache.http.client.entity.UrlEncodedFormEntity;
import org.apache.http.client.methods.HttpGet;
import org

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值