爬虫之js逆向（易车网实例）

最新推荐文章于 2024-09-04 19:39:39 发布

程序员唐丁

最新推荐文章于 2024-09-04 19:39:39 发布

阅读量1.6k

点赞数 2

分类专栏：爬虫文章标签： python 爬虫 js

本文链接：https://blog.csdn.net/m0_45903982/article/details/117857128

版权

爬虫专栏收录该内容

4 篇文章 1 订阅

订阅专栏

本文分享了如何通过逆向JavaScript代码，识别并解决汽车网站易车网配置参数API的加密签名问题，以实现对奥迪A6L等车型配置数据的爬取。涉及技术包括JS函数解析、API请求头揭秘和加密签名生成技巧。

摘要由CSDN通过智能技术生成

前几天想对中国市场上所有汽车品牌的所有车型的配置参数做一个统计分析，但是苦于没有数据，因此想着用爬虫去获取相关数据。然后发现几个著名的汽车网站的数据也大同小异，所以最后锁定易车网平台来获取所有品牌旗下的所有车型的配置参数。然后在爬取过程中我发现配置参数的数据并不在网页源代码中，经过检查发现数据是访问一个后台API获取的。然而在我直接访问这个API链接时报了以下错误：

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-LDIARVr7-1623512289225)(/Users/dingcong/程序员唐丁/唐丁博客/配图/易车api异常.png)]

然后经过一通分析与定位发现了需要传给后台校验的请求头参数是："x-sign"和"x-timestamp"两个

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-0Y79hhcD-1623512289253)(/Users/dingcong/程序员唐丁/唐丁博客/配图/易车请求头.png)]

经过分析可以知道"x-timestamp"是一个实时时间戳，这个通过函数很容易解决，可是"x-sign"是一个加密签名，我们应该怎么办呢？

这个时候就得说说JS逆向了。

首先我们用chrome浏览器通过检查找到生成"x-sign"的js函数

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-XzVlAY6h-1623512289262)(/Users/dingcong/程序员唐丁/唐丁博客/配图/js分析代码.png)]

然后将生成"x-sign"的js函数都抠出来，如果js代码较短我们可以用Python进行复写，如果较长那么我们可以选择用Python直接调用这部分的js代码。

经过分析我找到了生成"x-sign"的js函数段

function yiche(t) {
    var a = (new Date).getTime();
    var n = {cid: 508, param: ""};
    n.param = "{\"cityId\":1501,\"serialId\":\"+ +2573\"}";
    r = g("cid=" + 508 + "&param=" + param + Y + a);
    return a, r
}