本文介绍了如何使用Python爬虫抓取微信小程序中的成考题库。首先分析了微信小程序的https请求，揭示了关键参数，然后详细阐述了实战编码过程，包括获取试题类型、试卷科目、试卷分组、试题等数据，并将数据存储到MySQL数据库。文章提供了四级页面采集的完整流程，帮助读者理解并实现微信小程序的爬取。
⛳️ 实战场景
从本篇博客开始，我们会针对微信小程序编写一系列的爬虫，这些爬虫依旧通过案例进行串联，保证对大家的学习有所帮助。
正式开始前先准备工具，一个可以解析 https 协议请求的软件 fiddler，电脑版微信。
由于在 2022 年 5 月份，微信调整了其小程序架构，所以在正式开始前需要对环境进行一下基础配置，便于抓取到网络包。
如果你的 fiddler 启动之后，可以成功抓取数据包，无需该步操作。
找到下述路径的文件夹，然后清空该文件夹，接下来重新启动微信，此时就可以获取小程序中的 https 请求了，效果图如下所示。
C:\Users\Administrator\AppData\Roaming\Tencent
订阅专栏 解锁全文
扫一扫
2825
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
