本文介绍了如何使用Python爬虫配合Charles工具抓取和分析手机App的数据。首先，详细讲解了如何配置Charles，包括设置手机代理服务器和安装PC及Android设备的证书。通过这些步骤，可以成功捕获并解析HTTPS请求，从而获取App的网络交互信息，为爬虫开发提供数据支持。
Python爬虫
对于现在的爬虫程序来说，PC端网页数据往往并不理想。比如就拿CSDN来说，一篇帖子是否上热榜其根据的是App端数据，并不是PC端网页数据。
这也是时代的进步，从PC端到移动端，而且还有像小红书一样的App，其根本不提供PC端网页，只有App，要爬取这些数据，普通的Python爬虫肯定已经淘汰。
所以，我们需要借助Charles来抓取手机的HTTP与HTTPS数据包。尽然要通过Charles软件来抓取，我们首先要做的就是安装它。下载地址如下：
https://www.charlesproxy.com/latest-release/download.do
然后点击对应的操作系统进行下载即可。
配置Charles
安装完成之后&#
最低0.47元/天 解锁文章
扫一扫
1581
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
