Python爬虫实战(四) :下载煎蛋网所有妹子照片

原创 2017年09月04日 22:03:47

煎蛋网是一个适合开车的网站,各种妹子福利图片。

网站:http://jandan.net/ooxx

里面有两种格式的图片:gif和jpg,写个程序将所有页面的妹子图全部下载下来。


#coding=utf-8
import requests
import urllib.request
from random import randint
from bs4 import BeautifulSoup

def getHtml(url):
    page = requests.get(url)
    html =page.text
    return html

def getimg(html):
    soup = BeautifulSoup(html, 'html.parser')
    img_info = soup.find_all('a')                
    global x
    for index,img in enumerate(img_info):
        if not img.get('href'):
            return
        imgstr = "http:" + img.get('href')   #有更好的标签,但爬下来之后发现gif图片动不了,因此改为此标签
        if imgstr[-4] != '.':
            continue
        print ("正在下载第{}张图片".format(x))
        urllib.request.urlretrieve(imgstr,'%s%s' % (x,imgstr[-4:]))
        x = x+1
        
            
if __name__=='__main__':
    x = 1
    for i in range(1,72):
        url  = ("http://jandan.net/ooxx/page-%s#comments" % str(i))
        html = getHtml(url)
        getimg(html)

    print ("OK!DownLoad ALL!") 



python 爬取煎蛋网妹子的图片

昨晚跑完步,回家看了点小甲鱼的python视频,讲了点爬虫相关知识,于是今天兴致来了,尝试自己写写看,晚上再回去看看他是怎么实现的。 写的过程中发现对于正则表达式这块真是个坑,很多时候都我都是将一些...
  • killvoon
  • killvoon
  • 2016年04月20日 15:27
  • 2429

python爬虫之反爬虫情况下的煎蛋网图片爬取初步探索

本次爬虫网址:http://jandan.net/ooxx 前言:   前段时间一直在折腾基于qqbot的QQ机器人,昨天用itchat在微信上也写了一个机器人,相比webqq,微信的...
  • van_brilliant
  • van_brilliant
  • 2017年12月06日 19:04
  • 1168

python3 爬煎蛋ooxx妹子图

import re import urllib.request import random import os import http.server import http.client from u...
  • Jonnter
  • Jonnter
  • 2017年01月06日 18:14
  • 1171

python项目之 爬虫爬取煎蛋jandan的妹子图-上

python项目之 爬虫爬取煎蛋jandan的妹子图-上抓取妹子图练练手。网页url格式 http://jandan.net/ooxx/page-1777#comment 只需改变页码177...
  • lyffly2011
  • lyffly2011
  • 2016年03月08日 14:20
  • 8093

Python爬虫入门学习例子之煎蛋网(福利哦)

初学Python爬虫,学习资料是这篇博客:Python爬虫入门教程 经过前边两个例子(糗事百科爬虫和百度贴吧爬虫)的学习,我自己写了一个练习的例子:爬煎蛋网的妹子图,福利哦(*^__^*)  #煎蛋网...
  • login_sonata
  • login_sonata
  • 2016年10月03日 22:51
  • 1897

python爬取煎蛋网

  • 2016年05月24日 10:35
  • 2KB
  • 下载

煎蛋网妹子图python爬虫

  • 2017年09月02日 21:07
  • 4KB
  • 下载

Python爬虫实战(四) :下载煎蛋网所有妹子照片

煎蛋网是一个适合开车的网站,各种妹子福利图片。 网站:http://jandan.net/ooxx 里面有两种格式的图片:gif和jpg,写个程序将所有页面的妹子图全部下载下来。 #coding=...
  • qq523176585
  • qq523176585
  • 2017年09月04日 22:03
  • 13601

爬虫之煎蛋网妹子图 大爬哦

今天为了测试一下urllib2模块中的headers部分,也就是模拟客户端登陆的那个东东,就对煎蛋网妹子图练了一下手,感觉还可以吧。分享一下!代码如下# coding:UTF-8import urll...
  • Marksinoberg
  • Marksinoberg
  • 2016年05月13日 23:51
  • 14956

Python爬虫入门-利用requsets库爬取煎蛋网妹子图

其实之前是想利用煎蛋网来联系一下scrapy的ImagesPipeline爬取煎蛋网的妹子图并下载下来保存到本地,无奈这个ImagePipeline一点都不给面子一直报404错误,而且我还不知道问题出...
  • suwenkun1126
  • suwenkun1126
  • 2017年09月24日 17:43
  • 967
内容举报
返回顶部
收藏助手
不良信息举报
您举报文章:Python爬虫实战(四) :下载煎蛋网所有妹子照片
举报原因:
原因补充:

(最多只允许输入30个字)