winform窗体爬虫工具开发_提高爬虫开发效率的几个小工具

优质文章，第一时间送达！

作者：麦麦麦造

出处：segmentfault

前言

一般开发爬虫的时候，最心烦的不是它的反爬有多复杂，而是它的参数贼多，要一个个的复制进去。

所以自己写了一个小工具，把抓包抓到的 header、data、cookie 这些参数转换成 python 代码。

大大的提高开发效率，其实代码之前已经开源了，不过用起来不太方便，于是最近就把它弄到了线上，用起来方便多了。

涉及到的工具或技术

• Python 3.7

• Fiddler v5.0

• Charles v4.2.8

小工具

在线转换的工具网站：https://alisen39.com/

将 webForms 的数据转成 dict 格式

工具地址：https://alisen39.com/FiddlerData

在 Fiddler 里面，webForms 的数据是 POST 请求所带的参数

可以直接将