puppeteer监听response并封装为express服务调用

const express = require('express');
const puppeteer = require('puppeteer');
const app = express();
let browser; // 声明一个全局变量来存储浏览器实例

app.get('/getInfo', async (req, res) => {
    try {
        const page_param = req.query.page; // 获取名为"page"的查询参数值
        const page = await browser.newPage(); // 在每次请求中重复使用现有的浏览器实例
        const responsePromise = new Promise((resolve) => {
            //监听所有请求的响应
            page.on('response', async (response) => {
                const url = response.url();
                //某个接口url包含/api/movie/
                if (url.includes('/api/movie/')) {
                    const data = await response.text();
                    // console.log("data",data)
                    resolve(data)
                }
            });

        });

        if (!page_param) {
            await page.goto('https://spa2.scrape.center');
        } else {
            await page.goto('https://spa2.scrape.center/page/' + page_param);
        }
        let content = await responsePromise; // 等待所有请求完成
        res.send(content);
        await page.close(); // 请求完成后关闭页面,而不是关闭整个浏览器实例
    } catch (error) {
        console.error(error);
        res.status(500).send('Internal Server Error');
    }
});

app.listen(3000, async () => {
    console.log('Server is running on port 3000');
    console.log('请访问:', 'http://localhost:3000/getInfo');

    // 在服务器启动时创建浏览器实例
    try {
        browser = await puppeteer.launch({
            headless: true,
        });
    } catch (error) {
        console.error('Failed to launch browser:', error);
    }
});

// 在应用程序关闭时关闭浏览器实例
process.on('exit', async () => {
    if (browser) {
        await browser.close();
    }
});

//访问:http://localhost:3000/getInfo?page=1

在这里插入图片描述

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

飞得更高肥尾沙鼠

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值