mitmproxy 抓包神器-

def init(self):
self.num = 0

def request(self, flow):
self.num = self.num + 1
ctx.log.info(“We’ve seen %d flows” % self.num)

addons = [Counter()]

上面是一个简单的插件，它跟踪我们看到的流（或者更具体地说HTTP请求）的数量。
每当它看到一个新的流时，它都会使用mitmproxy的内部日志机制来宣布其计数。输出可以在交互工具的事件日志中找到，也可以在mitmdump的控制台上找到。
让它旋转一下，并通过将其加载到您选择的mitmproxy工具中，确保它完成了它应该做的事情。

我们将在示例中使用mitmdump 命令运行插件

mitmdump -s ./anatomy.py

以下是关于上述代码的一些注意事项：

Mitmproxy获取插件全局列表的内容，并将其找到的内容加载到插件机制中。

插件只是对象——在本例中，我们的插件是Counter的一个实例。

request 方法是一个事件的示例。

插件只需为它们要处理的每个事件实现一个方法。

API文档中记录了每个事件及其签名。

最后，ctx模块是一个 holdall 模块，它公开了一组常用于插件的标准对象。

我们可以将一个ctx对象作为每个事件的第一个参数传递，但我们发现将它作为一个可导入的全局对象公开更方便。

在本例中，我们使用ctx.log对象进行日志记录。

有时，我们希望编写一个快速脚本，而不必经历创建类的麻烦。

插件机制有一个简写，允许将模块作为一个整体处理为插件对象。

这使我们可以将事件处理程序函数放置在模块范围中。例如，这里有一个完整的脚本，它为每个请求添加一个头：

“”“An addon using the abbreviated scripting syntax.”“”

def request(flow):
flow.request.headers[“myheader”] = “value”

抓取浏览器上的请求简单示例

目标是抓取浏览器上的访问页面的请求，比如访问https://www.cnblogs.com/yoyoketang/ 我的博客地址，通过插件抓取请求

demo1.py 代码如下:

from mitmproxy import http

作者：上海-悠悠 微信号：283340479

def request(flow: http.HTTPFlow):

对url 过滤，仅抓取我的博客地址

if “https://www.cnblogs.com/yoyoketang/” == flow.request.url:
print(‘请求方法’, flow.request.method)
print(‘请求类型’, flow.request.scheme)
print(‘请求url’, flow.request.url)
print(‘域名’, flow.request.host)
print(‘请求路径’, flow.request.path)

返回MultiDictView类型的数据，URL的键值参数

print(‘url的键值参数’, flow.request.query)
print(‘请求头’, flow.request.headers)
print(‘cookies’, flow.request.cookies)

启动服务

mitmdump -s ./demo1.py
Loading script ./demo1.py
Proxy server listening at http://*:8080

默认监听端口8080

设置本机代理

浏览器上访问我的博客，就可以看到抓取请求了

爬取数据

爬取数据用到response 方法

目标：收集网站打开时，加载的jpg图片，如下打开网站后，加载出来的图片

from mitmproxy import http

作者：上海-悠悠 微信号：283340479

def response(flow: http.HTTPFlow):
print(‘=下载====’)
if “pic.netbian.com” == flow.request.host:
if flow.request.url.endswith(‘jpg’):
with open(flow.request.url[-18:].replace(‘/’, ‘’), ‘wb’) as f:
f.write(flow.response.get_content())

运行后收集到网页上加载的图片

自我介绍一下，小编13年上海交大毕业，曾经在小公司待过，也去过华为、OPPO等大厂，18年进入阿里一直到现在。

深知大多数软件测试工程师，想要提升技能，往往是自己摸索成长或者是报班学习，但对于培训机构动则几千的学费，着实压力不小。自己不成体系的自学效果低效又漫长，而且极易碰到天花板技术停滞不前！

因此收集整理了一份《2024年软件测试全套学习资料》，初衷也很简单，就是希望能够帮助到想自学提升又不知道该从何学起的朋友，同时减轻大家的负担。

既有适合小白学习的零基础资料，也有适合3年以上经验的小伙伴深入学习提升的进阶课程，基本涵盖了95%以上软件测试开发知识点，真正体系化！

由于文件比较大，这里只是将部分目录大纲截图出来，每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频，并且后续会持续更新

如果你觉得这些内容对你有帮助，可以添加V获取：vip1024b （备注软件测试）

一个人可以走的很快，但一群人才能走的更远。不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎扫码加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！

，可以添加V获取：vip1024b （备注软件测试）**
[外链图片转存中…(img-UMMQcG7Y-1712884875289)]

一个人可以走的很快，但一群人才能走的更远。不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎扫码加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！