爬取下厨房美食的本周最受欢迎的菜品并且存储到Excel文件中

最新推荐文章于 2023-03-02 16:48:18 发布

暮晨清雪

最新推荐文章于 2023-03-02 16:48:18 发布

阅读量404

点赞数 1

文章标签：美食 python

本文链接：https://blog.csdn.net/m0_65384516/article/details/126664916

版权

本文介绍了如何使用Python爬取下厨房网站本周最受欢迎的菜品，并将数据保存到Excel文件中。通过分析页面URL变化规律，实现翻页功能，最终展示爬取结果。

摘要由CSDN通过智能技术生成

首先，我们找到页面的url

点击下一页，观察url的变化

我们可以发现，page后面的值在发生变化，那么就直接上代码

import requests
import openpyxl
from bs4 import BeautifulSoup
lst = []
count=0
class Xiachufang():

    def __init__(self):
        self.url = 'https://www.xiachufang.com/explore/?page={0}'
        self.headers={'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/104.0.0.0 Safari/537.36'}
    def send_requests(self, url):
        resp = requests.get(url, headers=self.headers)
        return resp.text
    def parse_html(self,html):
        global count
        bs = BeautifulSoup(h