Python爬虫绕过登录的小技巧

本文介绍了Python爬虫如何绕过登录页面的验证,包括使用cookie、selenium启动Chrome和Firefox浏览器,并提供了如何处理图形验证码的方法。通过分析网站cookie,结合浏览器驱动,可以在自动化过程中保持登录状态,简化爬虫流程。
摘要由CSDN通过智能技术生成

前言

很多时候我们做 Python 爬虫时或者自动化测试时需要用到 selenium 库,我们经常会卡在登录的时候,登录验证码是最头疼的事情,特别是如今的文字验证码和图形验证码。文字和图形验证码还加了干扰线,本文就来讲讲怎么绕过登录页面。

登录页面的验证,比如以下的图形验证码。

还有我们基本都看过的 12306 的图形验证码。

 

 

绕过登录方法

 

绕过登录基本有两种方法,第一种方法是登录后查看网站的 cookie,请求 url 的时候把 cookie 带上,第二种方法是启动浏览器带上浏览器的全部信息,包括添加的书签和访问网页的 cookie 信息。

第一种 cookie 方法我们要分析别人网站的 cookie 值,找出相应的值然后添加进去,对于我们不熟的网站,他们可能也会做加密或者动态处理,所以有些网站也不是那么好操作。如果是自己公司的网站需要测试,我们可以询问对应的开发那个 cookie 值是区分独立用的值,拿出来放在请求里面就行。

 

添加 cookie 绕过登录

比如我们登录百度账号比较费

Python爬虫中,我们经常会遇到需要登录的情况,而登录验证码是一个非常头疼的问题,特别是文字验证码和图形验证码。为了绕过登录页面,我们可以使用一些方法,例如使用cookie、requests库编写脚本来跳过验证码等处理。使用cookie可以保存登录状态,使得我们可以继续请求需要登录的页面。首先,我们需要理解这个原理。 在进行Python模拟登录时,我们需要注意cookie的有效期。一般来说,cookie会有一个失效时间,如果cookie失效了,我们就需要重新登录或者进行Python模拟登录,并保存新的cookie。因此,我们可以通过定时删除cookie的方式来实现自动重新登录。 总结起来,要在Python爬虫跳过登录,我们可以使用cookie来保存登录状态,并定时删除失效的cookie,以保持登录状态。这样就能够继续访问需要登录的页面了。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* [Python爬虫绕过登录的小技巧](https://blog.csdn.net/Dome_/article/details/90022350)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"] - *2* *3* [python爬虫使用cookie跳过登陆验证(一)](https://blog.csdn.net/weixin_37719937/article/details/97417842)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"] [ .reference_list ]
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值