python抓去网页一部分

1. import sys, urllib2  
2.   
3.   
4. headers = {'User-Agent':'Mozilla/5.0 (Windows; U; Windows NT 6.1; en-US; rv:1.9.1.6) Gecko/20091201 Firefox/3.5.6'} //设置代理  
5. req = urllib2.Request("http://blog.csdn.net/nevasun", headers=headers)  
6. content = urllib2.urlopen(req).read()  
7.   
8. type = sys.getfilesystemencoding()      
9. print content.decode("UTF-8").encode(type)  # 编码格式

转载于:https://www.cnblogs.com/beeman/p/7776464.html