python爬网页小案例

普通人：计划失败 -> 沮丧 -> 骂自己一顿 -> 制订新计划 -> 继续失败

学霸：计划失败 -> 沮丧 -> 骂自己一顿 -> 深度思考计划为啥失败 -> 改善问题 -> 制订


新计划

案例:

#!/usr/bin/env python3
# -*- coding: utf-8 -*-

import urllib.request  
import sys
import io  

sys.stdout = io.TextIOWrapper(sys.stdout.buffer,encoding='gb18030') #改变标准输出的默认编码  
print(sys.getdefaultencoding())
print('a'=='\u2022')  
#网址  
url = "http://www.douban.com/"  
  
#请求  
request = urllib.request.Request(url)  
  
#爬取结果  
response = urllib.request.urlopen(request)  
  
data = response.read()  
  
#设置解码方式  
data = data.decode('utf-8')  
  
#打印结果  
print(data)  
  
#打印爬取网页的各类信息  
  
print(type(response))  
print(response.geturl())  
print(response.info())  
print(response.getcode())  

有兴趣的童鞋，可以加群交流交流: