scrapy处理豆瓣登录验证码的三种方式

在python爬虫登录豆瓣时候,遇到登录验证码的处理问题时,有三种验证码处理方式。首先获取登录页面,将验证码图片下载下来,利用三种不同验证码识别的方法来获取验证码,然后登录:

    def start_requests(self):
        yield scrapy.Request(
            self.login_url,
            callback=self.parse_login
        )
    #解析登录页面,得到验证码链接
    def parse_login(self,response):
        captcha_url = response.xpath('//img[@id="captcha_image"]/@src').extract_first()
        yield scrapy.Request(
            captcha_url,
            meta={'login_response':response},
            callback=self.login

 

    def login(self,response):
        login_response = response.meta.get('login_response')
        captcha_data = response.body
        #遍历验证码识别方式,直到一种可以识别出来的方式
        for method in [self.get_captcha_by_self(captcha_data)]:
        #for method in ['self.g
  • 1
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 1
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值