自学Python实现简答的爬虫

最近抽风自学Python,基本语法学完回去写java都有砸了电脑的冲动了。java的语法和python比起来真的是太麻烦了。

1. 获取整个页面的数据

#coding=utf-8
import urllib.request

def getHtml(url):
    page = urllib.request.urlopen(url)
    html = page.read()
    return html

html = getHtml("http://tieba.baidu.com/p/2738151262")

print(html)

urllib模块提供了读取web数据的接口，可以像文本一样读取数据。urllib.request.urlopen()方法用于打开一个url地址

read方法用于读取数据。