nodejs-puppeteer爬虫抓取网页

视频演示：

puppeteer爬虫

---

功能

1、抓取网页信息（基本上只要你会了这个，其它网页都可以抓取，照猫画虎，so easy）
2、抓取的数据重新整理，写入数据库
3、网页的图片可以抓取上传到阿里云oss或七牛云

安装：

1、npm更换源
npm config set puppeteer_download_host=https://npm.taobao.org/mirrors

2、安装依赖
yarn add puppeteer
yarn add trim nodejs-snowflake date-and-time node-html-parser mysql2

3、运行
node parse.js

源码

需要的小伙伴，请留言或私信。