本文介绍了一种使用Python爬虫抓取车主之家网站全系车型（包括历史停售车型）配置参数的方法。文章首先展示了爬取结果的效果，接着详细讲述了在Windows环境下，利用Python 3.9.4和相关库进行网页抓包分析的过程。作者发现车主之家APP存在车型配置页面闪退问题，因此转向网页抓包，并发现数据可能是通过js动态加载。然后，文章介绍了如何获取所有品牌数据、车型参数配置的json以及数据存储的方案，并给出了程序的入口和运行效果。
车主之家全系车型（包含历史停售车型）配置参数爬虫
先上效果图
环境：
win10 ，Contos7.4
python3.9.4
pycharm2021
retrying=1.3.3
requests=2.22.0
fake_useragent
抓包分析
车主之家安卓APP选择车型后打开配置页面闪退，放弃APP抓包：
踏个坑，车主之家APP车型参数配置页面打开就闪退，刚开始还以为是机型不适配的问题，后来陆续的换了好几台手机都是闪退，那应该就是一个bug。这儿浪费了很长时间！！！
web页面抓包：
web页面也没有明显的数据接口，初步分析数据应该是通过js动态加载
订阅专栏 解锁全文
扫一扫
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
