使用 Pyppeteer 自动化获取小红书内容并进行关键字匹配

本文链接：https://blog.csdn.net/weixin_43182483/article/details/143110141

在本篇文章中，我将介绍如何使用 Python 的 Pyppeteer 库从小红书网页中自动化获取内容，并基于关键字进行筛选处理。此代码的核心功能是模拟浏览器操作，保持登录状态，并通过抓取指定的页面内容来进行关键字的匹配和处理。

import asyncio
from pyppeteer import launch
import time

async def main():
    # 启动浏览器
    browser = await launch(
        headless=False,  # 设置为 False 以便查看浏览器操作
        executablePath='C:/Program Files (x86)/Microsoft/Edge/Application/msedge.exe'  # 替换为你本地的浏览器路径
    )

    # 打开新页面
    page = await browser.newPage()

    # 设置 cookies，使用从浏览器开发者工具获取的相关 cookies
    cookies = [
        {'name': 'web_session', 'value': '0400698f828b7256176a7b3225354b01eb79fa', 'domain': '.xiaohongshu.com'},
        {'name': 'access-token-creator', 'value': 'customer.ares.AT-5e220b25926c4d419b9cfdacc0c50afe-2fc8629ad23d432584af8789582dbb83', 'domain': '.xiaohongshu.com'},
        {'