urllib

#获取源代码
response = request.urlopen('http://www.baidu.com') 
page = response.read()
page = page.decode('utf-8')
print(page)

urlopen返回对象提供方法：

• read() , readline() ,readlines() , fileno() , close() ：对HTTPResponse类型数据进行操作

• info()：返回HTTPMessage对象，表示远程服务器返回的头信息

• getcode()：返回Http状态码。如果是http请求，200请求成功完成;404网址未找到

• geturl()：返回请求的url

模拟登录

s = requests.session()
data = {'user':'用户名','passdw':'密码'}
#post 换成登录的地址，
res=s.post('http://www.xxx.net/index.php?action=login',data);
#换成抓取的地址
s.get('http://www.xxx.net/archives/155/');