requets模块 & xpath解析器的用法

requests模块

requests的标准库继承了urllib并且完善了 api 让人使用起来更加方便简洁。。

• get请求

import requests

url = "https://baidu.com/"
params = {"since_id":"-1","count":"10"}
headers = {"User-Agent":"Mozilla/5.0 (Macintosh; Intel Mac OS X 10_13_6) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/72.0.3626.109 Safari/537.36"}
##用responses发起请求
response = requests.get(url = url, params= params,headers = headers)

• 返回的响应的处理

response.content 以二进制返回
response.status_code 相应状态码
response.request.headers  返回请求的请求头
response.headers 相应头
response.encoding = "utf-8" 可以设置编码类型
response.encoding 获取当前的编码
response.json() json形式返回，前提返回的内容确保时json格式的，不然解析会出错

• post 请求

import requests

url = "http://127.0.0.1/api/login/"

formdata = {'usename':'18