校花网爬图片,存到本地。

总的来说,就是将图片转换成二进制,再存下来。/20171219

import requests
import re
from multiprocessing import Pool

def getpage(url):
    response = requests.get(url)
    html = response.text
    return html

def prase(html):
    imgurls_names = re.findall(r'alt="(.+?)".+?(/d/file/.+?\.jpg)', html)
    #return imgurls_names
    for imgurls_name in imgurls_names:
        #print(img_url,name)
        yield imgurls_name

def writef(item):
    name,img_url = item[0],item[1]
    img_response = requests.get('http://www.xiaohuar.com'+img_url)
    img_data = img_response.content
    print('下载图片 '+name+' ing')
    with open(r'G:\pycharm工程\20171218\新建文件夹\%s.jpg' % name,'wb') as f:
        f.write(img_data)
    print('下载图片 ' + name + ' done')
def main(page):
    url = 'http://www.xiaohuar.com/list-1-'+str(page)+'.html'
    html = getpage(url)
    # print(html)
    for item in prase(html):
        print(item)
        writef(item)

if __name__ == '__main__':
    # main()
    # for i in range(3):
    #     main(i)
    pool = Pool()
    pool.map(main, [i for i in range(20)])
    pool.close()
    pool.join()


  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值