Python入门之爬虫--自动下载图片

最新推荐文章于 2024-08-17 17:18:53 发布

一路狂奔的兔子

最新推荐文章于 2024-08-17 17:18:53 发布

阅读量1.1w

点赞数 1

分类专栏：程序拾遗文章标签： Python 爬虫自动图片下载

本文链接：https://blog.csdn.net/zlllg/article/details/80354186

版权

这个互联网上的数据90%的访问都是爬虫来完成的，爬虫由于检索速度快，定向性高，效率高而受到许多公司和个人的喜爱，如果我们想把一个网站上的图片全部下载下来，可以会花费我们很多时间，如果用爬虫来做的话，我们只要输入一条命令，剩下的工作基本都由爬虫来做完了，是不是很神奇，比如我们爬https://www.dbmeinv.com/这个上面的图片

这个是爬下来之后的效果，我们来看一下原码吧：

# -*- coding:utf-8 -*-
import urllib
import urllib2
import re
import os
import time

class ImageSpider(object):
    num = 0;
    def __init__(self):
        pass

    def saveImage(self, imageUrl, imageName):
        headers = {"User-Agent" : "Mozilla/5.0 (Macintosh; Intel Mac OS X 10_7_0) AppleWebKit/535.11 (KHTML, like Gecko) Chrome/1    7.0.963.56 Safari/535.11"}
        request = urllib2.Request(imageUrl, headers = headers)
        imageData = urllib2.urlopen(req