阿里巴巴逆向js,request模块获取数据

python爬虫案例(电商平台)


前言

本文的文字及图片来源于网络,仅供学习、交流使用,不具有任何商业用途,版权归原作者所有,如有问题请及时联系我们以作处理


一、逆向解析阿里巴巴平台详情页面的sign值

先找一个商品详情页面,根据页面上显示得数据去寻找该路由,然后利用谷歌自带得debug模式一步步去分析js加载情况…
在这里插入图片描述
获取到阿里巴巴生成的sign值地js函数,输入值加入商品得id就可以计算得到阿里巴巴得sign值
python代码如下:

import js2py


def get_des_psswd(data):
    jsstr = get_js()

    # 使用获取上下js2py生成一个上下文环境
    context = js2py.EvalJs()
    context.execute(jsstr)
    # ctx = execjs.compile(jsstr)  # 加载JS文件
    return (context.h(data))
    # return (ctx.call('h', data))  # 调用js方法  第一个参数是JS的方法名,后面的data和key是js方法的参数


def get_js():
    f = open("./des.js", 'r', encoding='utf-8')  # 打开JS文件
    line = f.readline()
    htmlstr = ''
    while line:
        htmlstr = htmlstr + line
        line = f.readline()
    return htmlstr


if __name__ == '__main__':  # 66f15958d3db6ded2e31b63c6dff914e_1637574478506
    print(get_des_psswd(
        'f3e524beffeb74de6684f41df6206d83&1638771084690&12474478&{\"fcGroup\":\"offer-cbu\",\"fcName\":\"offerdetail-service\",\"fcArgs\":\"{\\\"serviceName\\\":\\\"offerFavoriteService\\\",\\\"params\\\":{\\\"offerId\\\":598029856572}}\"}'))

二、在请求头中加入sign值获取数据

1>获取评论成交数数据

代码如下(通过在请求头中加入sign数据,可以有效访问到接口里面得数据,切换IP可以重新获取):

# 评论获取
def comments(b, seller_id, seller_member_id):
    global g
    # 获取时间戳
    t = time.time()
    good_collection_time = int(round(t * 1000))  # 毫秒级时间戳
    good_collection_token = unqueue_cookies()
    # 分割获取token值
    good_collection_token = good_collection_token['_m_h5_tk'].split('_')[0]
    # 拼接sign值进行js加密
    sign = good_collection_token + '&' + str(
        good_collection_time) + '&12574478&' + '{"fcGroup":"offer-cbu","fcName":"offerdetail-service","fcArgs":"{\\"serviceName\\":\\"offerSatisfactionService\\",\\"params\\":{\\"memberId\\":\\"%s\\",\\"sellerId\\":%s,\\"offerId\\":%s,\\"isSignedForTm\\":false}}"}' % (
               seller_member_id, seller_id, str(b['Z']))
    # 将sign值加密
    sign = get_des_psswd(sign)
    # 发送请求
    try:

        data = {"sellerId\\":str(b['Z'])}   # 拼接商品id数据

        data = quote(data, 'utf-8')

        good_comments_url = 'https://h5api.m.1688.com/h5/mtop.mbox.fc.common.gateway/1.0/?jsv=2.4.11&appKey=12574478&t=' + str(good_collection_time) + '&sign=' + sign + '&api=mtop.mbox.fc.common.gateway&v=1.0&type=jsonp&isSec=0&timeout=20000&dataType=jsonp&callback=mtopjsonp4&data=' + data

        comments_count = 0
        while True:
            try:

                # 获取接口数据
                headers = {
                    "user-agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/92.0.4515.131 Safari/537.36",
                    "referer": 'https://detail.1688.com/',
                    'cookie': cookies()
                }
                SESSION.keep_alive = False  # 关闭多余连接
                comments_response_html = SESSION.get(good_comments_url,
                                                     headers=headers, timeout=5, verify=False, proxies=g[0])
                good_comments = comments_response_html.text.split('(')
                good_comments = good_comments[1].split(')')[0]
                good_comments = json.loads(good_comments)
                good_comment = good_comments['data']['result']['totalsStr']
                break
            except Exception as e:
                print(e)
                if comments_count < 2:
                    g = proxy_ip()
                    comments_count += 1
                    continue
                else:
                    comments_count += 1
                    continue

    except Exception as g:
        print(g)
        good_comments = ''

    return good_comment


2>效果展示

在这里插入图片描述

三、总结

在这小编分享一波2022最新的Python教程。获取方式,私信小编.。。。

  • 1
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
根据提供的引用内容,似乎是在讨论对于一个加密的网址进行解密的问题。其中使用了AES加密算法和CryptoJS库来实现解密操作。具体代码如下: const CryptoJS = require('crypto-js'); function getRealUrl(hh) { var s = "qnbyzzwmdgghmcnm"; var aa = hh.split("/"); var aaa = aa.length; var bbb = aa[aaa - 1].split('.'); var ccc = bbb; var cccc = bbb; var r = /^\ ?[1-9][0-9]*$/; if (r.test(ccc) && cccc.indexOf('jhtml') != -1) { var srcs = CryptoJS.enc.Utf8.parse(ccc); var k = CryptoJS.enc.Utf8.parse(s); var en = CryptoJS.AES.encrypt(srcs, k, { mode: CryptoJS.mode.ECB, padding: CryptoJS.pad.Pkcs7 }); var ddd = en.toString(); ddd = ddd.replace(/\//g, "^"); ddd = ddd.substring(0, ddd.length - 2); var bbbb = ddd + '.' + bbb; return bbbb; } } getRealUrl() 这段代码是用于对加密的网址进行解密,具体的解密过程如下: 1. 将加密前的字符串cc分割成数组aa,获取数组长度aaa和数组最后一个元素bbb。 2. 判断最后一个元素bbb是否符合一定的格式要求。 3. 如果符合要求,则将cc转换成CryptoJS的Utf8格式的srcs,并生成一个Utf8格式的密钥k。 4. 使用AES加密算法将srcs和k进行加密操作,采用ECB模式和Pkcs7填充方式。 5. 将加密结果转换成字符串ddd,并替换其中的'/'字符为'^'。 6. 截取ddd中除去最后两个字符的部分,然后与bbb拼接起来,得到解密后的网址bbbb。 7. 返回解密后的网址bbbb。 关于js逆向深圳信数据服务的问题,根据提供的引用内容,目前并没有相关的信息来回答该问题。请提供更多相关的信息,以便更好地回答您的问题。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* *2* [js逆向-某市公共资源交易网](https://blog.csdn.net/weixin_46672080/article/details/126003502)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"] - *3* [aqistudy真气网JS逆向 + 数据采集(20220801)](https://blog.csdn.net/zhu6201976/article/details/126124548)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"] [ .reference_list ]

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值