最近在做一个爬去某奢侈品网站图片的项目,需要把不同网站上爬取得图片放在不同的目录下,而且需要自定义图片的名称,图片下载一般都会用到ImagesPipeline,因此,通过查看源码,在Python3-scrapy1.5版本下,代码如下:
pipeline.py中添加如下代码:
class GoodsImagePipeline(ImagesPipeline):
def get_media_requests(
最近在做一个爬去某奢侈品网站图片的项目,需要把不同网站上爬取得图片放在不同的目录下,而且需要自定义图片的名称,图片下载一般都会用到ImagesPipeline,因此,通过查看源码,在Python3-scrapy1.5版本下,代码如下:
pipeline.py中添加如下代码:
class GoodsImagePipeline(ImagesPipeline):
def get_media_requests(