![](https://img-blog.csdnimg.cn/20201014180756754.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Spider
atopx
一个真正热爱编程且具有极客精神的程序猿,python、golang、rust
展开
-
关于数据库选择和写爬虫的思路
mongodb mysql redis的区别和使用场景mysql是关系型数据库, 支持事务mongodb, redis是非关系型数据库(noSQL), 不支持事务mysql, mongodb, redis的使用根据如何方便进行选择希望速度快的时候, 选择mongodb或者是redis数据量过大的时候, 选择频繁使用的数据存入redis, 其他的存入MongoDBMongoDB不用提前...原创 2018-12-23 11:19:03 · 1277 阅读 · 1 评论 -
Node.js 写爬虫
示例代码使用request配合cheerio实现简单爬虫let request = require('request'); // 需要先安装request库let cheerio = require('cheerio'); // 需要先安装cheeriolet url = "http://example.webscraping.com/places/default/view/china...原创 2019-01-23 16:24:58 · 161 阅读 · 0 评论