python 抓取图片保存在本地

import re
import urllib

# Download picture and save in disk
def downImg(url, dirPath, name):
    fr = urllib.urlopen(url)
    stream = fr.read(-1)
    fr.close()
    print dirPath+'/'+name
    fw = open(dirPath+'/'+name, 'w')
    fw.write(stream)
    fw.close()

def getPageCode(url, fromCharset, toCharset):
    fr = urllib.urlopen(url)
    pageCode = fr.read()
    fr.close()
    return pageCode

def getImgUrl(pageCode):
    pattern = re.compile(r'http\://[\w\-\./]+\.jpg')
    return re.findall(pattern, pageCode)

def main():
    dirPath = '/home/damin/img'
    nameEnding = 1
    start = 'http://www.22mm.cc/mm/qingliang/'
    allUrl = [start+'index.html']
    x = 2
    while x<=10:
        allUrl += [start+'index_'+str(x)+'.html']
        x += 1
    for url in allUrl:
        # 1. get page code
        print url
        pageCode = getPageCode(url, 'gb2312', 'utf8')
        # 2. get all img url
        imgUrl = getImgUrl(pageCode)
        # 3. download the picture
        for src in imgUrl:
            filename = 'MM'+ str(nameEnding) +'.jpg'
            nameEnding += 1
            downImg(src, dirPath, filename)

if __name__ == '__main__':
    main()

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值