- GET请求:
GET请求会通过URL网址传递消息,可以直接在URL中写上要传递的信息,也可以由表单进行传递。如果使用表单进行传递,这表单中的信息会自动转为URL地址中的数据,通过URL地址传递。
比如,如果需要实现用爬虫自动地在百度上查询关键词为hello的结果,可以使用一下代码:
#没有中文的GET
import urllib.request
keywd = "hello"
url = "http://www.baidu.com/s?wd=" + keywd
req = urllib.request.Request(url)
data = urllib.request.urlopen(req).read()
fhandle = open("本地路径","wb")
fhandle.write(data)
fhandle.close()
#含中文的GET
import urllib.request
url = "http://www.baidu.com/s?wd="
keywd = "博客"
key_code = urllib.request.quote(keywd)
url_ALL = url+key_code
req = urllib.request.Request(url_ALL)
data = urllib.request.urlopen(req).read()
fhandle = open("本地路径","wb")
fhandle.write(data)
fhandle.close()