requests模块学习笔记

1、request模块的徐诶西
安装：pip install requests

###发送get、post请求、获取响应
–response = requests.get(url) #发送get请求，请求url地址对应的响应
–response = requests。post(url, data={请求的字典} ##发送post请求

###response的方法
-response.text
-该方式往往会出现乱码，出现乱码使用response.conding=“utf-8”
–response.content.decode()
–把响应的二进制字节流转化为str类型

###获取网页源码的正确打开方式（通过下面三种方式一定能够获取到网页的正确解码之后的字符串）
-1、response.content.decode（）
-2、response.content.decode(“gbk”)
-3、response.text

###发送带header的请求(为了模拟浏览器，获取和浏览器一模一样的内容）
header = {“User-agent”: “”}
response = requests.post(url,data=data,headers=header)
response = requests.get(url,headers=header) --response.request.url #发送请求的url地址
–response.url #response响应的url地址
–response.request.header #请求头
–response.headers #响应请求

###使用超时参数
requests.get(url,headers=headers,timeout=3) #3秒内必须返回响应，否则会报错

###retrying模块的学习
-pip install retrying
from retrying import retry
@retry(stop_max_attempt_number=3)
def fun1():
print(“this is func1”)
raise ValueError(“this is test erro”)
###处理cookie相关的请求
–人人网{“email”:“mr_mao_hacker@163.com”,“password”:“alarmchime”}
-直接携带cookie请求url地址
-1、cookie放在header中
headers= {“User-Agent”:"…",“cookie”:“cookie字符串”}
-2、cookie字典传给cookie参数
#将字符串形式的cookie转化为字典类型的cookie
cookie_dict={i.split("=")[0]:i.split("=")[-1] for i in cookie.split(";")}
-requests.get(url,cookies=cookie_dict)
-先发送post请求，获取cookie，带上cookie请求登录后的页面
-1、session = request.session() #session具有的方法和requests一样
-2、session.post(url,data,headers)#服务器设置在本地的cookie会保存在session
session.post(post_url,headers=headers,data=post_data) //post_data ={“username”:“13276616622” ,“password”:“chenken1215*”}； . //post_url= “http:// www.renren.com/PLogin.do” #登录时form表单的地址
-3、seesion.get()#会带上之前保存在session中的cookie，能够请求成功
url = "http://www.renren.com/975400625/profi //登录后页面的url
response = session.get(url,headers=headers)