python网络爬虫(第三章 实战1:HTTP抓包工具Fiddler的安装)

1.Fiddler

学习fiddler博客:https://blog.csdn.net/weixin_43510203/article/details/107595497 #属于扩展知识

Fiddler是位于客户端和服务器端的HTTP代理,也是目前最常用的http抓包工具之一 。 它能够记录客户端和服务器之间的所有 HTTP请求,可以针对特定的HTTP请求,分析请求数据、设置断点、调试web应用、修改请求的数据,甚至可以修改服务器返回的数据,功能非常强大,是web调试的利器。

工作原理:

Fiddler是以代理网络服务器的形式进行工作,其代理地址为127.0.0.1,端口:8888。当Fiddler启动时回自动设置代理,退出时回自动注销代理,这样就不会影响其他程序。

Fiddler的工作原理
下载网址:

方法1.网页直接输入fiddler4--->点击【fiddler4官网】
方法2.或者直接输入https://www.telerik.com/download/fiddler/fiddler4

安装:傻瓜式安装
爬取HTTPS设置:

步骤1.打开Fiddler4中的Tools--->Options--->切换到HTTPS
步骤2.勾选:Decrypt HTTPS traffic
			Ingore server certificate errors(unsafe)
	 单击同意和信任
步骤3.单击右侧【Actions】--->Trust Root Certificate
步骤4.切换到Connections,勾选Allow remote computers to connect[运行远程连接]和Act as system proxy on startup[作为系统启动代理]
步骤5.单击右下角【OK】按钮,然后重新启动Fiddler,使配置生效。

2.SwitchyOmega插件

Fiddler捕获Chrome浏览器发送的会话,但如果Fiddler非正常退出,可能导致Chrome的代理服务器无法恢复正常。且如果经常使用Fiddle,需要手动检查和更改Chrome的代理服务器。因此可以使用SwitchyOmega插件方便地管理Chrome浏览器的代理。

SwitchyOmega是一款在Google Chrome 浏览器上的一个代理扩展程序,可以轻松快捷地管理和切换多个代理设置。

下载地址
步骤1.点击https://github.com/FelisCatus/SwitchyOmega/releases
步骤2. 然后点击Assets中的SwitchyOmega_Chromium.crx
在这里插入图片描述
步骤3.下载之后将后缀crx改成zip,解压到文件夹
步骤4. chrome浏览器打开扩展程序:

设置--->更多工具--->扩展程序--->点击【开发者模式】--->加载已解压的扩展程序

步骤5. 单击新建场景模式,名称:Fiddler;代理协议:HTTP;代理服务器:127.0.0.1;代理端口:8888
步骤6. 点击【应用选项】,保存步骤5中的设置
步骤7. 如下图:通过浏览器插件切换代理IP
在这里插入图片描述

  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 2
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值