Requests库实战(四)---爬取肯德基餐厅地址信息

该博客介绍了如何利用Python的requests库进行POST请求,从肯德基官网获取特定城市的餐厅地址信息。通过设置查询字符串参数和表单数据,实现了动态搜索并抓取页面内容。最后将爬取的数据保存到本地文件。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

功能:爬取查询后的肯德基餐厅的地址信息
地址:http://www.kfc.com.cn/kfccda/storelist/index.aspx
亮点是post请求的参数有两组:查询字符串参数,表单数据。
对于post请求,由于url中隐藏了许多参数,所以引入了表单数据,查询字符串参数用于拼接url,表单数据用于查询内容。理论上查询字符串参数用params传递,表单数据用data传递。但是实践证明都放入params或data中传也没问题。

完整代码

import requests
#请求url:http://www.kfc.com.cn/kfccda/ashx/GetStoreList.ashx?op=keyword
url='http://www.kfc.com.cn/kfccda/ashx/GetStoreList.ashx?'
name=input('输入要查询的城市:')
#查询字符串参数
params={
    'op': 'keyword' #查询字符串参数
}
#表单数据
data={
    'cname': '',
    'pid': '',
    'keyword': name, 
    'pageIndex': '1',
    'pageSize': '10',
    
}

header={
    'User-Agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/91.0.4472.101 Safari/537.36 Edg/91.0.864.48'
}
r=requests.post(url=url,params=params,data=data,headers=header) #用params也是一样的
text=r.text
with open('./text.text','w',encoding='utf-8') as f:
    f.write(text)
print("爬取成功!")
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值