使用HttpClient 4.x登陆带有验证码的网站

本文介绍了如何使用HttpClient 4.x库处理带有验证码的网站登录问题。首先阐述了登录流程,包括浏览器如何处理cookie和验证码。接着,通过实例展示了获取验证码图片并将其保存到本地,再人工输入验证码进行登录的过程。还提到了在POST请求中构造所需参数来模拟登录,最终成功登录并能抓取其他网页信息。建议将HTTPClient操作封装为独立类以避免二次请求时的错误。
摘要由CSDN通过智能技术生成

        对于爬虫来说,验证码通常是实现过程中的一个巨大的障碍,因为验证码的多样性,有的甚至变态至极,所有一般来说使用代码自动识别验证码是非常困难的,本问的内容就是讲如何将验证码保存到本地,然后通过人工输入验证码实现登陆,从而抓取网页信息。


        首先说说整个登陆的流程,当我们打开一个网站的时候,浏览器就会记录该网站的cookie,用于识别信息,同时服务器会向浏览器发送一张验证码的图片,并与该cookie的信息是相关联的,并以此识别用户,然后post提交数据的时候一同提交就实现认证登陆了。


        以下登陆我们学校的教务处作为例子,这是我们教务处的登陆界面。



        右键打开chrome的审查元素,跟踪到验证码的链接。


评论 13
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值