构造request对象post请求

最新推荐文章于 2022-10-19 20:27:43 发布

YANG_xiao_QI

最新推荐文章于 2022-10-19 20:27:43 发布

阅读量1.2k

点赞数

分类专栏： 2.python爬虫（课程笔记）文章标签： python

本文链接：https://blog.csdn.net/YANG_xiao_QI/article/details/109229199

版权

2.python爬虫（课程笔记）专栏收录该内容

15 篇文章 3 订阅

订阅专栏

这篇博客演示了如何使用Python的urllib库发送POST请求，并详细解释了每个步骤，包括构造请求对象、编码数据、指定请求头，特别是设置用户代理以模拟浏览器行为。示例代码展示了向'http://www.xbiquge.la/'发送POST请求的过程。

摘要由CSDN通过智能技术生成

#案例：发送post请求，http://httpbin.org/post;要求传入数据和指定请求头

import urllib.request
import urllib.parse

1.构造request对象
2.构造数据（发送post请求必须传入相应数据既data参数）

data = {'name':'itcast'}

3.进行url编码（需要导入一个parse）

data = urllib.parse.urlencode(data)

4.转化为bytes对象

data = bytes(data.encode())

#字符串不能直接转需要encode(),转换后传到url，data=data，下接，既post请求
5. 指定headers（字典（一个键对应一个值））
2）传入用户代理，告诉是哪个游览器给发送的请求
3）查找用户代理：浏览器->检查->network->刷新后找到官网->headers->user-Agent 内容复制粘贴

headers = {
    'User-Agent':' Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/85.0.4183.121 Safari/537.36'
    }

#作为指令，headers作为指令需要指定参数,下接headers=headers
6.创建一个request对象（data，headers参数可选，data指定post请求没有则get请求）

request = urllib.request.Request('http://www.xbiquge.la/',data=data,headers=headers)

7.发送请求,使用构造出来的request发送请求

response =urllib.request.urlopen(request)

8.打印响应信息

print(response.read().decode())

源代码：

import urllib.request
import urllib.parse
data = {'name':'itcast'}
data = urllib.parse.urlencode(data)
data = bytes(data.encode()) 
headers = {
    'User-Agent':' Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/85.0.4183.121 Safari/537.36'
    }
request = urllib.request.Request('http://www.xbiquge.la/',data=data,headers=headers)  
response =urllib.request.urlopen(request)
print(response.read().decode())