说明
文章首发于HURUWO的博客小站,本平台做同步备份发布。
如有浏览或访问异常图片加载失败或者相关疑问可前往原博客下评论浏览。
原文链接 PYTHON爬虫实战_垃圾佬闲鱼爬虫转转爬虫数据整合自用二手急速响应捡垃圾平台_3(附源码持续更新)直接点击即可前往访问。
整个系列文章链接
前言
本章内容
本章讲解关于fidder数据包转发的问题,也就是拦截了数据之后如何将想要的数据推到指定的数据库做处理。
FidderScript的说明和使用
FidderScript是什么
FidderScript是Fidder针对数据包的请求 回复 修改的脚本语言。通过使用FidderScript编写脚本插入可以完成自动化的 请求修改 转发 回复 修改操作。可以说功能非常强大,喜欢数据采集的人必学。
FidderScript的语法
其实不用去看官方文档 左边的classview 已经包含了所有的api文档 看看就行
下面说几个常用的类方法:
1.Session 所有请求信息/回复信息的保存处 包括request response都可以做修改。比较核心的一个类方法对象。
2.HTTPRequestHeaders 和 HTTPResponseHeaders headers 的映射类 在Session 提取出来可以做修改变化。
3.关于Fidder 软件本身的一些FidderApplication类方法 比如修改UI的 按钮等 ,甚至可以定制化出来一个自动化工具。这个就不细说了,看看就知道了。
个人感觉这个语言非常类似于java,有对象有类。学习起来并不要多少成本。但是他的功能确实非常强大。
FidderScript一个简单的例子
体验一下一个脚本的完整开发过程。
进入脚本编辑器
两