简单爬虫--自动http请求（GET/POST ）

get请求

百度搜索界面爬取示例：
先查看网址规律，一个是搜索关键词，一个是页面：

再查看要爬取的内容,有两种形式：：

import urllib.request
import re

keyword = "python"
keyword = urllib.request.quote(keyword)
for i in range(1,10):
    url = "http://www.baidu.com/s?wd=" + keyword+"&pn=" + str((i-1