js逆向实操1（爬取企名片数据）

MagnusChuen

已于 2024-05-11 16:41:38 修改

阅读量904

点赞数 16

分类专栏： js逆向实操文章标签： javascript 开发语言 ecmascript python 网络爬虫爬虫前端

于 2024-05-09 20:47:24 首次发布

本文链接：https://blog.csdn.net/2401_84219403/article/details/138629185

版权

在学会基本的爬虫操作后，网页抓取之路并不顺畅，因为js的盛行，现在大多数数据都被加密了，遂开始了逆向的学习。这篇文章分享我自己实操的第一个案例，教程可以参考b站教学

首先观察页面https://www.qimingpian.com/innovate

在点击加载更多之后注意到recommendeditemlist这个包，点击预览可以看到其中encrypt_data这个数据，这个就是加密过后的企业数据。

使用post请求可以得到一样的结果：

import requests

headers = {
    'accept': 'application/json, text/plain, */*',
    'accept-language': 'zh-CN,zh;q=0.9',
    'cache-control': 'no-cache',
    'content-type': 'application/x-www-form-urlencoded',
    'origin': 'https://www.qimingpian.com',
    'pragma': 'no-cache',
    'priority': 'u=1, i',
    'sec-ch-ua': '"Chromium";v="124", "Google Chrome";v="124", "Not-A.Brand";v="99"',
    'sec-ch-ua-mobile': '?0',
    'sec-ch-ua-platform': '"Windows"',
    'sec-fetch-dest': 'empty',
    'sec-fetch-mode': 'c