Python发送请求，构造URL

最新推荐文章于 2024-09-05 10:14:29 发布

置顶

cuiljiang

最新推荐文章于 2024-09-05 10:14:29 发布

阅读量3.5k

点赞数 2

分类专栏： python 爬虫

本文链接：https://blog.csdn.net/cuiljiang/article/details/88353264

版权

本文介绍了Python中如何使用Requests库构造请求URL，包括通过params方法构造请求以及发送JSON格式数据的URL，主要应用于爬虫脚本和接口测试。文中详细讲解了在需要将数据类型设置为JSON时的操作步骤。

摘要由CSDN通过智能技术生成

请求URL的方法（一）

在分析完爬取数据之后，通过params方法构造请求。程序来源：崔庆才

from pyquery import PyQuery as pq
import requests

def getPage(page):
    url = 'https://m.weibo.cn/api/container/getIndex?'     #在怎么来？分析Ajax请求
    hd = {"User-Agent": 'Mozilla'}                         # 模仿浏览器
    params = {'type': 'uid',
              'value': '2830678474',
              'containerid': '1076032830678474',
              'page': page}                                 # 作为参数增加到url中去
    try:
        r = requests.get(url, headers=hd, params=params)
        r.raise_for_status()
        return r.json()                                     # 解析为JSON返回
    except:
        print('-----')

def parsePage(json):
    if json:
        items = json.get('data').get('cards')               # 是一个列表