使用node.js+puppeteer爬取数据,实现无视接口是否加密都可以爬取数据
使用nodejs实现爬虫,无视接口是否加密
准备工作:
安装node所需要的的开发环境,以及安装puppeteer包–>在终端中输入npm install puppeteer即可安装,不过这个包比较大,最好切换到淘宝镜像进行安装,这里不做过多赘述;并且我们还需要将爬取到的数据放到数据库,所以还需要安装mysql包,也是直接在终端输入npm install mysql即可。
puppeteer介绍:
Puppeteer 是 Chrome 开发团队在 2017 年发布的一个 Node.js 包,用来模拟
原创
2020-05-22 11:50:56 ·
1340 阅读 ·
0 评论