爬虫requests入门之post和get请求

文章目录

• 一、get请求
• 二、post请求
• 总结

一、get请求是什么？

        get请求最清晰的理解就是网页地址上的请求，也是显示请求 。如下图所示，导入requests模块，query=“xx”，可以替换为需要搜索的名称。请求完成之后，导入文件模块，存储到本地的html文件。

import requests

url = 'https://www.sogou.com/web?query=周杰伦'

headers = {
'user-agent': 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/100.0.4896.60 Safari/537.36'}
resp = requests.get(url,headers=headers)

with open("sogou.html","w",encoding="UTF-8") as fp:
    fp.write(resp.text)

二、Post请求

---

1.引入百度翻译为例

 

 

由此可见，百度翻译输入单词，为post请求，对URL发起请求。 

2.代码实现

代码如下（示例）：

import requests
import json
url = 'https://fanyi.baidu.com/sug'
name=input("请输入你需要查询的单词")
data = {
    "kw":name
}
res = requests.post(url,data=data)
dic = json.loads(res.text)
data_list = dic["data"]
for va in data_list:
    print(va["k"],va["v"])

由于爬出的数据为json格式，转为字符串。

---

总结

post和get请求区别在于post为隐式提交，需要给post传入data属性。data需要在network中寻找。具体网站具体区分