- 获得目标html的编码格式
- 按照此编码格式去解析html内容,就可以正常解析
import urllib2
target = urllib2.urlopen("
http://www.amazon.cn")
print target.hearders #或使用target.info(),获得charset的内容为:utf-8
content=target.read().decode("utf-8") #此处对内容
进行
utf-8格式解码,否则print时会输出乱码
print content #正确解码,显示正常中文