python爬虫之爬取外包平台zbj服务商

three_hundred

已于 2023-06-08 15:09:49 修改

阅读量150

点赞数

分类专栏： python爬虫文章标签： python 爬虫开发语言

于 2023-06-02 12:00:40 首次发布

本文链接：https://blog.csdn.net/three_hundred/article/details/131000063

版权

python爬虫专栏收录该内容

1 篇文章 0 订阅

订阅专栏

1、F12查看数据是XHR请求回来的

2、查看标头和荷载信息

3、编码请求与解析

import requests
# 请求地址
url = 'https://supei.zbj.com/api/ftServiceDomainService/search'
# 请求头
headers = {
    "User-Agent" : "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/113.0.0.0 Safari/537.36",
    "Referer" : "https://beijing.zbj.com/search/service/?l=0&kw=python&r=2",
    "Cookie" : "复制浏览器上的"
}
# 请求数据
data= {
    "sign": "P20220704001",
    "extensions": [2, 22],
    "localCityId": "3374",
    "query": {
        "query": "python", 
        "size": 48, 
        "start": 0
    }
}
# 发起请求
resp = requests.post(url,headers=headers,data=data)
# 数据解析
for item in resp.json()['data']['list']:
    print(item['id'])
    print(item['shopId'])
    print(item['shopName'])
    print('--------------')
resp.close()

4、运行结果：

1898059
15939650
北京人和科技
--------------
587309
11656226
匠派品牌
--------------

...

注明：文章只供学习所用。