爬取北邮人论坛美食帖子
我们想要拿到北邮人论坛美食模块的帖子
因为北邮人论坛是一个需要账号、密码登录的网站。
所以我们需要拿到账户登录的cookie,便于后续python可持续化的爬取数据
通过在这个见面输入账户,密码来抓包获取cookie的信息。
抓到一个ajax_login.json 通过这个API接口,我们可以知道已经登录进入网站,通过python的session创建对话,我们就可以持久化的访问北邮人论坛。(世界上有个小小的反爬机制 x-requested-with 判断是否为ajax请求,ajax..
原创
2021-06-08 00:31:46 ·
692 阅读 ·
1 评论