网络爬虫 puppeteer 入门demo（爬取百度新闻）

最新推荐文章于 2024-08-05 16:21:44 发布

Kishn

最新推荐文章于 2024-08-05 16:21:44 发布

阅读量512

点赞数 2

文章标签： chrome

本文链接：https://blog.csdn.net/weixin_44104659/article/details/105847787

版权

本文介绍如何利用Chrome的puppeteer库进行网络爬虫实战，通过实例演示爬取百度新闻的步骤，涵盖了设置头部信息、页面导航、元素定位等基本技巧。

摘要由CSDN通过智能技术生成

//引入
const puppeteer = require('puppeteer')
getFocus(); 
async function getFocus() {
   
    //打开浏览器 这里要找到你安装的Chromium.app
    const browser = await puppeteer.launch({
   
        executablePath: 'chromium/chrome-mac/Chromium.app/Contents/MacOS/Chromium',
        headless: false,
        devtools: true
    })