登录时按F12,查看抓取的请求找不到post

往后端提交数据的时候是post请求,登录接口一定是post接口

没有勾选持续记录的话post会被冲掉

要使用Edge浏览器抓取微博博文数据,通常涉及到网络请求分析、数据提取和处理等步骤。这里提供一个基本的思路: 1. 使用Edge浏览器打开微博博文页面。 2. 在浏览器中打开开发者工具(通常是按F12或者右键选择“检查”)。 3. 进入“网络”(Network)标签页,然后刷新页面,这样你可以观察到页面加载的所有网络请求。 4. 到加载微博博文数据的请求。这通常需要根据请求的名称、URL或者响应内容来判断哪个是博文数据。有,可以通过检查请求头中的“Referer”字段来排除不相关的请求。 5. 分析该请求的详情,包括请求的URL、请求方法(如GET或POST)、请求头(Headers)和请求参数(Query String)。 6. 如果需要模拟该请求,可以使用Postman这样的工具,根据分析得到的细节构造请求。 7. 发送请求后,你会得到响应数据,通常为JSON格式。可以查看响应的详细内容,并从中提取你需要的微博博文数据。 8. 如果要自动化这个过程,可以使用脚本语言如JavaScript配合Edge的开发者工具API,或者使用其他编程语言配合相关库(如Python的requests库)来编写代码,实现数据的自动抓取。 需要注意的是,微博作为第三方服务,其数据抓取应遵守相关法律法规以及微博的服务条款。此外,由于网页结构和API可能会发生变化,实际操作需要根据具体情况调整抓取策略。
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值