爬虫---059urllib_post请求方法爬取百度翻译

#post请求
import urllib.request
import urllib.parse
import json

url = 'https://fanyi.baidu.com/sug'

headers = {
    'User-Agent':' Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/109.0.0.0 Safari/537.36 SLBrowser/9.0.3.1311 SLBChan/103'
}

data = {
    'kw':'spider'
}

#post请求参数必须进行编码
data = urllib.parse.urlencode(data).encode('utf-8')
# print(data)

#post请求的参数 不会拼接在url的后面 需要放在请求对象定制的方法中
#

request = urllib.request.Request(url=url,data=data,headers=headers)

response = urllib.request.urlopen(request)

content = response.read().decode('utf-8')

obj = json.loads(content)

print(obj)

# post请求参数必须进行编码 data = urllib.parse.urlencode(data).encode('utf-8')
# 编码之后 必须调用encode方法
# 参数需要放在请求对象定制的方法中 request = urllib.request.Request(url=url,data=data,headers=headers)