爬虫小程序-02

coding=gbk

import urllib.request

import cookielib

在 Python3 中改名为 http.cookiejar 了,

如果你用 Python3 的话要注意

import http.cookiejar
url = “http://www.doyouhike.net/dest”

print ((‘第一种方法’))
response1 = urllib.request.urlopen(url)

打印状态码，查看请求是否成功

print response1.getcode()

print (len(response1.read()))

print ((“第二种方法”))
request = urllib.request.Request(url)
request.add_header(“user-agent”, “Mozilla/5.0”)
response2 = urllib.request.urlopen(request)
print (response1.getcode())
print (len(response1.read()))# 内容的长度

print ((‘第三种方法’))
cj = http.cookiejar.CookieJar()
opener = urllib.request.build_opener(urllib.request.HTTPCookieProcessor(cj))
urllib.request.install_opener(opener)
response3 = urllib.request.urlopen(url)
print (response1.getcode())

第三种方法打印cookie的内容

打印网页的内容

print (len(response1.read()))

”’
打印结果如下：
第一种方法
80046
第二种方法
200
0
第三种方法
200
0
”’
”’
问题：
1.编码
解决：在代码首行添加# coding=gbk
2.cj = cookielib.CookieJar()报错
解决：import http.cookiejar
cj = http.cookiejar.CookieJar()
3.无效字符
解决：print (“打印的内容需要包含在括号里面，不同于python 2x”)
”’