- 博客(2)
- 收藏
- 关注
原创 菜鸟用scrapy爬取虎扑图片
注意:以下代码是参考网上各路大神爬虫的代码,然后根据自己要爬的网站对代码进行修改,如有雷同,那必须是参考了您的代码。 转载请注明出处,谢谢!!!!! 一、首先,我们需要先装scrapy,可以参考http://www.cnblogs.com/txw1958/archive/2012/07/12/scrapy_installation_introduce.html这篇文章来安装
2017-03-10 15:24:41 1533
原创 用scrapy爬取GIF图
本篇内容与上一篇大致一致,主要不同的地方为pipelines.py,因为ImagesPipeline不支持GIF格式,因此我们需要重构保存图片方法。 一、items.py import scrapy class HupuGifItem(scrapy.Item): # define the fields for your item here like: #
2017-03-11 14:56:45 1280
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人