Python爬虫实战(四) :下载煎蛋网所有妹子照片

煎蛋网是一个适合开车的网站,各种妹子福利图片。

网站:http://jandan.net/ooxx

里面有两种格式的图片:gif和jpg,写个程序将所有页面的妹子图全部下载下来。


#coding=utf-8
import requests
import urllib.request
from random import randint
from bs4 import BeautifulSoup

def getHtml(url):
    page = requests.get(url)
    html =page.text
    return html

def getimg(html):
    soup = BeautifulSoup(html, 'html.parser')
    img_info = soup.find_all('a')                
    global x
    for index,img in enumerate(img_info):
        if not img.get('href'):
            return
        imgstr = "http:" + img.get('href')   #有更好的标签,但爬下来之后发现gif图片动不了,因此改为此标签
        if imgstr[-4] != '.':
            continue
        print ("正在下载第{}张图片".format(x))
        urllib.request.urlretrieve(imgstr,'%s%s' % (x,imgstr[-4:]))
        x = x+1
        
            
if __name__=='__main__':
    x = 1
    for i in range(1,72):
        url  = ("http://jandan.net/ooxx/page-%s#comments" % str(i))
        html = getHtml(url)
        getimg(html)

    print ("OK!DownLoad ALL!") 



阅读更多
换一批

没有更多推荐了,返回首页