python简单爬虫--转源码

在网上看到一个爬虫,感觉很有意思,爬了一堆图片用来测试。下面是源码,做了一些简单说明。

#coding=utf-8
import urllib
import re
#思路:先获取所有页面信息,使用正则匹配图片地址信息,下载图片到本地
#根据一个url地址获取该url的所有页面信息
def gethtml(url):
	page=urllib.urlopen(url)
	html = page.read()
	return html
	
#正则表达式来从网页信息中筛选匹配出图片地址信息,并下载到本地,默认保存到该py文件保存的位置
def getImg(html):
    reg = r'src="(.+?\.jpg)" pic_ext'
    imgre = re.compile(reg)
    imglist = re.findall(imgre,html)
    x = 0
    for imgurl in imglist:
        urllib.urlretrieve(imgurl,'%s.jpg' % x)
        x+=1
html = gethtml("http://tieba.baidu.com/p/2460150866")

print getImg(html)



评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值