python抓取提交的formdata_论如何实现multipart/form-data类型的post请求-python爬虫

本文介绍了如何处理遇到的一个包含multipart/form-data类型的POST请求。通过分析请求头和Payload,理解了webkitFormBoundary的作用。利用requests库和requests_toolbelt的MultipartEncoder模块,实现了模拟此类请求的功能。虽然现在较少网站使用这种请求方式,但了解其工作原理对爬虫开发者仍然有价值。
摘要由CSDN通过智能技术生成

近日,友人发来一链接,说页面请求分析过程中碰到一个奇怪的post请求,于是乎,好奇心旺盛的博主也立马上手研究起来。

报文截图如下,不知各位看官是否遇见过这样的请求体。

ZZn6ju.png Payload截图

好了,报文有了,那么我们就开始分析这其中的原理,并最终实现模拟功能。

首先,报文中多次出现webkitFormBoundary这个关键字,我猜测这肯定是某种函数或者软件自动生成的结果。

与此同时,我们也必须研究下请求头,截图如下

BJzQv2.png 请求头

如图中标红部分,一个是multipart/from-data,一个是boundary,在看到后者的瞬间,博主心中大喊“原来如此!”

ok,payload的组成一定与content-Type有关,借助谷歌,博主自我科普了一把multipart/form-data的概念。

诸位有兴趣的可以看下方链接,

http://www.jianshu.com/p/e810d1799384

https://stackoverflow.com/questions/3508338/what-is-the-boundary-in-multipart-form-data

http://

引用提供了一种在Python3下使用requests库发送multipart/form-data类型请求的方法。这种类型请求是用于上传文件或发送二进制数据的常见方式。通过使用requests库的post方法,将请求的URL和请求的参数以字典的形式传入即可发送multipart/form-data类型请求。引用介绍了使用requests库发送application/x-www-form-urlencoded请求数据的方法。这种类型请求常用于提交表单数据。通过使用requests库的post方法,将请求的URL和请求的参数以字典的形式传入即可发送application/x-www-form-urlencoded类型请求。引用给出了一个示例函数client_post_mutipart_formdata_requests,该函数可以用于发送multipart/form-data类型请求,并接收请求的URL和请求的参数作为参数。综上所述,要使用Python的requests库发送multipart/form-data类型请求,可以使用post方法,并将请求的URL和请求的参数以字典的形式传入。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* *2* *3* [python使用requests发送multipart/form-data请求数据](https://blog.csdn.net/weixin_39638048/article/details/110763239)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 100%"] [ .reference_list ]
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值