python网络爬虫入门小程序_Python 实现网络爬虫小程序

转载请注明作者和出处： http://blog.csdn.net/c406495762 运行平台： Windows Python版本： Python3.x IDE： Sublime text3 前言 问题分析 预备知识 1 Selenium 11 简介 12 安装 13 基础知识 131 小试牛刀 132 模拟提交 133 元素选取 134 界面交互 135 添加U

Python很简洁，也很强大，作为兴趣，值得一学！

下面这个程序实现的是从一个网站上下载图片，根据自己需要可以进行修改使用Python语言，编写简单的爬虫程序，在百度百科页面上爬取跟词条“Python”有关的1000个页面(页面数目可以自己任意设定)。 这个简易的爬虫项目可以分为5个模块： 首先，需要有一个程序入口spider_main，同时作为爬虫的总控程序(调度程序)， 改程序需要

import re

import urllib

def gethtml(url):

page = urllib.urlopen(url)

html = page.read()

return html

def getimg(html):

reg = r'src="(.*?\.jpg)"'

imgre = re.compile(reg)

imglist = re.findall(imgre, html)

x = 1

for imgurl in imglist:

urllib.urlretrieve(imgurl, '%s.jpg' % x)

x+=1

target = raw_input("Input one url:")

html = gethtml(target)

print "please wating, pictrues are downloading....."

getimg(html)