qq_43135333的博客

原创 使用scrapy爬取某瓣妹子图片

爬取某瓣大熊妹子图片 需要源码私我 第一次写博客，刚接触scrapy（写的不好，多多见谅） 本人还是本着技术为主(fu)，妹子为辅（zhu）的目的来学习的 爬虫的路上，一定不满足于使用requests+解析器来实现，这时候scrapy出现了，选择哪种还是得根据需求来，不必拘泥固定模式。scrapy对于小型任务来讲还是不错的，省去了自己码多线程，异步的时间，需要手写的也就解析跟管道处理两块。 话不多...