python 爬虫 Form Data爬取穷游网的数据

数据

穷游网郑州市的旅游景点为例
景点列表

请求方式

分页的时候,是向同一个url发请求,不同的是Form Data里的page参数
数据获取方式

参考代码

#!/usr/bin/env python 
# -*- coding:utf-8 -*-
import json
import requests

headers = {
    "Content-Type": "application/x-www-form-urlencoded"
}
url = 'https://place.qyer.com/poi.php?action=list_json'
data = {
    'page': '1',
    'type': 'city',
    'pid': '11771',
    'sort': '32',
    'subsort': 'all',
    'isnominate': '-1',
    'haslastm': 'false',
    'rank': '6'
}
if __name__ == '__main__':
    r = requests.post(url, data=data, headers=headers)
    r.encoding = 'utf-8'
    # 将str转为dict对象
    data = json.loads(r.text)
    data_list = data['data']['list']
    print(data_list)
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值