python网络爬虫之urllib请求百度翻译

最新推荐文章于 2024-03-20 16:21:42 发布

@ikeli_ichen

最新推荐文章于 2024-03-20 16:21:42 发布

阅读量1k

点赞数

分类专栏： python 文章标签： python 爬虫百度

本文链接：https://blog.csdn.net/weixin_47195300/article/details/122020893

版权

本文介绍了如何使用Python的urllib库来请求百度翻译的接口。首先，讲解了寻找接口并注意反爬策略，接着详细阐述了Request的使用以及如何模拟浏览器向服务器发送带有post数据的请求。

摘要由CSDN通过智能技术生成

python网络爬虫之urllib请求百度翻译

文章目录

python网络爬虫之urllib请求百度翻译
一、找接口(注意反爬)：单击鼠标右键检查，找到Network、找到我们的post接口RU和UA。
二、请求对象的定制
- 1.Request的使用
- 2.模拟浏览器向服务器发送请求
代码：

一、找接口(注意反爬)：单击鼠标右键检查，找到Network、找到我们的post接口RU和UA。

二、请求对象的定制

1.Request的使用

url = 'https://fanyi.baidu.com/sug'#RU（post接口的查找）
#反爬UA
headers = {
   
'User-Agent': '这里是我的UA，涉及电脑的版本、网络信息，自己的copy自己的就可以了'
}
data = {
   'kw':'boys'}#post接口的执行，以及解决编码问题

import urllib.parse
#post的请求参数为字节，所以必须编码encode('utf-8')
data = urllib.parse.urlencode