因为redis支持主从同步,而且数据都是缓存在内存中,所以基于redis的分布式爬虫,对请求和数据的高频读取效率非常高 转载于:https://www.cnblogs.com/sea-stream/p/11192549.html