- 博客(2)
- 收藏
- 关注
原创 分布式爬虫之数据处理
redis作为缓存,mysql用来做数据实际存储import astimport reimport timeimport pymysqlimport redisclass Settings(object):#redis 的连接配置redis_conn_config = dict(host=‘localhost’,port=6379,db=‘0’,password=None,...
2020-03-17 21:55:21 182
原创 分布式爬虫之数据存储
分布式爬虫 数据存储分布式爬虫之数据存储redis作为缓存,mysql用来做数据实际存储import astimport reimport timeimport pymysqlimport redisclass Settings(object): #redis 的连接配置 redis_conn_config = dict( host='local...
2020-03-17 21:53:02 335
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人