python 3 最简单的小爬虫

#coding=utf-8
from bs4 import BeautifulSoup
import urllib.request
import re


def gethtml(url):
    page=urllib.request.urlopen(url).read()
    html=page.decode('utf-8')#中文转码
    return html


def getimage(html):
    reg=r'src="(.+?\.jpg)" pic_ext'
    imgre=re.compile(reg)
    imagelist=imgre.findall(html)
    #imagelist=re.findall('src="(.+?\.jpg)" pic_ext',html,re.M)
    return imagelist


def download(imagelist,local):
    x=0
    for i in imagelist:
        urllib.request.urlretrieve(i,local+'%s.jpg'%x)
        x+=1
if __name__=='__main__':
    url='http://tieba.baidu.com/p/2460150866'
    html=gethtml(url)
    
    pic=getimage(html)
    local='C:\\downloadpicture\\'
    #download(pic,local)
这个算是第一个入门爬虫的例子了,是模仿的教程 一点一点拼出来 实现的是爬去页面中的图片并下载下来

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值