Python使用urlib添加头部实现https请求 同时使用PyExecJS-1.4.0触发JS

运行环境:Python3.6

运行代码:

#!/usr/bin/env python
# -*-coding:utf-8-*-
import execjs
from html.entities import name2codepoint
from html.parser import HTMLParser
from urllib import request
import time

class ImgParser(HTMLParser):
    num = 1

    def __init__(self):
        # 定义要搜寻的标签
        self.processing = None
        HTMLParser.__init__(self)  # 继承父类的构造函数
        self.addr = ''

    def handle_starttag(self, tag, attrs):
        # 判断是否在要搜寻的标签内
        if tag == 'img':
            self.num += 1
            print(self.num)
            for key, value in attrs:
                if key == 'src':
                    self.addr = 'https://e.189.cn'+value
                    # 在类的成员函数中,使用类中的另一个成员函数,前面必须要指定类名
                    if self.num == 2 :
                        ImgParser.getImage(self)  # 合法

    def getImage(self):
        ctx = execjs.compile("""
         function add() {
              return new Date().getTime();
            }
        """)
        add_ = str(ctx.call("add"))
        req_rnd = request.Request(self.addr+'&rnd='+add_)
        req_rnd.add_header('User-Agent', 'Mozilla/5.0 (Windows NT 6.1; WOW64; rv:53.0) Gecko/20100101 Firefox/53.0')
        req_rnd.add_header('Connection', 'keep-alive')
        req_rnd.add_header('Referer', 'https://e.189.cn/register/mobile/step1.do')
        with request.urlopen(req_rnd) as u:
            data = u.read()
            filename = self.addr.split('/')[-1]
            print(self.addr + '&rnd=' + add_)
            f = open('G:\yzl_python_pycharm\LLB\defcaptcha.png', 'wb')
            f.write(data)
            f.close()



parser = ImgParser()
req = request.Request('https://e.189.cn/register/mobile/step1.do')
req.add_header('Host', 'e.189.cn')
req.add_header('User-Agent', 'Mozilla/5.0 (Windows NT 6.1; WOW64; rv:53.0) Gecko/20100101 Firefox/53.0')
req.add_header('Accept', 'text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8')
req.add_header('Accept-Language', 'zh-CN,zh;q=0.8,en-US;q=0.5,en;q=0.3')
req.add_header('Cookie', 'JSESSIONID=aaaKzX9Z_0juP_pF3SMVv')
req.add_header('Connection', 'keep-alive')
req.add_header('Upgrade-Insecure-Requests', '1')
with request.urlopen(req) as f:
    data = f.read()
    parser.feed(data.decode('utf-8'))


  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值