【求解】会爬虫的各位,谁能帮我看看,为什么获取到的信息只有第一条,我要的是好几页呀,如果不要循环直接写入数字是获取成功的??

import requests
import jsonif __name__ == "__main__":    #1 指定url    post_url ="http://www.gscloud.cn/wsd/gscloud_wsd/dataset/query_data"    #2 UA伪装    header = {        "User-Agent":"Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/89.0.4389.82 Safari/537.36"    }    for offset in range(0,360,60):        offset=str(offset)        param = {            'tableInfo': '{"offset":offset,"pageSize":60,"totalPage":0,"totalSize":0,"sortSet":[{"id":"datadate","sort":"desc"}],"filterSet":[{"id":"path","value":"125"},{"id":"row","value":"35"}]}',            'pid':'411'        }        #3 post请求参数处理(用get请求一致)        #4 请求发送        response = requests.get(url=post_url,params=param,headers=header)    #5 获取响应数据:json方法返回的是obj    dic_obj = response.json()    #6 持久化存储    fp = open("./di.json","w",encoding="utf-8")    json.dump(dic_obj,fp=fp,ensure_ascii=False)    print("over!!!")

 1. List item

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值