python爬虫学习（六）kfc门店地址

最新推荐文章于 2022-07-23 20:24:03 发布

haimian_baba

最新推荐文章于 2022-07-23 20:24:03 发布

阅读量517

点赞数

文章标签： python

本文链接：https://blog.csdn.net/haimian_baba/article/details/103728647

版权

在学习Python爬虫的过程中，尝试抓取KFC门店地址时遇到挑战。错误地将URL指向了无效接口，导致每次请求返回-1000的错误代码。经过一段时间的排查，了解到这是一个教训，提醒我们在未来要更加注意URL的正确性。此外，还探索了如何将爬取的数据以JSON格式存储到文本文件中。

摘要由CSDN通过智能技术生成

这个项目比药监局简单，但是我在抓取url的时候抓成了http://www.kfc.com.cn/kfccda/ashx/GetStoreList.ashx
每次的输出都是-1000，弄了蛮久。
以此为鉴。

第二就是text格式文件可以用json对象输出

# -*- coding: utf-8 -*-

import requests
import json
if __name__ == '__main__':
    all_data_list = []
    url= 'http://www.kfc.com.cn/kfccda/ashx/GetStoreList.ashx?op=keyword'
    path=input('请输入要查询的地址：')

    headers = {
        'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/76.0.3809.87 Safari/537.36'
    }

    #参数
    for pageIndex in range(1,5):
        pageIndex = str(pageIndex)
        data={
            'cname':'',
            'pid':'',
            'keyword': path,    #地址
            'pageIndex': pageIndex,     #页数
            'pageSize': '20'      #一页显示多少个
        }
        response= requests.post(url

最低0.47元/天解锁文章

haimian_baba

关注

0
点赞
踩
2

收藏

觉得还不错? 一键收藏
0
评论
python爬虫学习（六）kfc门店地址

这个项目比药监局简单，但是我在抓取url的时候抓成了http://www.kfc.com.cn/kfccda/ashx/GetStoreList.ashx每次的输出都是-1000，弄了蛮久。以此为鉴。第二就是text格式文件可以用json对象输出# -*- coding: utf-8 -*-import requestsimport jsonif __name__ == '__ma...
复制链接

扫一扫