获取不到正确的requests请求结果

在进行网页爬取时,遇到一个问题,即通过requests发送请求得到的数据与实际抓包获取的数据不符,尝试设置allow_redirects=False未解决问题。使用fiddler分析headers和data也未能成功。最终发现只需将data参数改为data=data,即可正确获取JSON响应。
摘要由CSDN通过智能技术生成

​ 爬取过程中一直获取到的结果和抓包获取的不一样,一直以为是页面发生了跳转,添加了allow_redirects=False,还是不对。使用fiddler抓包到的headers和data访问也不对,最后换浏览器,还是不对,多次尝试后,将data=data,居然拿到了正确的json

import json

import requests

headers = {
   
        'Accept': 'application/json, text/javascript, */*; q=0.01',
        'Accept-Encoding': 'gzip, deflate, br',
        'Accept-Language': 'zh-CN,zh;q=0.9,en;q=0.8',
       
评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值