python爬虫之Request的get和post请求

一. get请求

get请求，请求到的是html

resp.text 拿到页面源代码，数据
resp.json 能直接拿到json数据

代码:

import requests

url = "http://www.baidu.com"

# 发送请求
resp = requests.get(url)
# 设置字符集
resp.encoding = 'utf-8'
# 拿到页面源代码
# print(resp.text)

# 把页面源代码写入到文件中
with open("mybaidu.html", mode="w", encoding='utf-8') as f:
    f.write(resp.text)

print("over!!")

测试记录:

二. post请求

POST 是被设计用来向上放东西的，而GET是被设计用来从服务器取东西的，GET也能够向服务器传送较少的数据，而Get之所以也能传送数据,只是用来设计告诉 服务器,你到底需要什么样的数据.POST的信息作为HTTP 请求的内容，而GET是在HTTP 头部传输的；

百度翻译:
https://fanyi.baidu.com/

首先google浏览器F12，然后输入dog

查找请求的URL:

查找请求的参数:

代码:

import requests

url = "https://fanyi.baidu.com/sug"

data = {"kw": "dog"}

resp = requests.post(url, data=data)

print(resp.json())

测试记录:

{'errno': 0, 'data': [{'k': 'dog', 'v': 'n. 狗; 蹩脚货; 丑女人; 卑鄙小人 v. 困扰; 跟踪'}, {'k': 'DOG', 'v': 'abbr. Data Output Gate 数据输出门'}, {'k': 'doge', 'v': 'n. 共和国总督'}, {'k': 'dogm', 'v': 'abbr. dogmatic 教条的; 独断的; dogmatism 教条主义; dogmatist'}, {'k': 'Dogo', 'v': '[地名] [马里、尼日尔、乍得] 多戈; [地名] [韩国] 道高'}]}

参考:

1. https://www.bilibili.com/video/BV1wa41197X9