PC端微信小程序使用Fiddler进行爬取抓包

已于 2022-08-30 16:08:50 修改
阅读量3.1w 收藏 155
点赞数 19
分类专栏： 后端开发 文章标签： 微信小程序 fiddler 小程序
于 2022-08-30 16:03:21 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_42700863/article/details/126606164
版权
本文介绍了如何在没有Android低版本或iOS设备的情况下，利用Fiddler抓取PC端微信小程序的数据包。首先下载并配置Fiddler，然后设置微信小程序使用代理登录，并处理可能出现的无法打开小程序或抓包问题。通过清除Fiddler的Cache和Cookies，可以成功抓取到小程序的数据包。
摘要由CSDN通过智能技术生成

本博客用于个人学习与工作中的收获

前言

前两天被安排了一个没有接触过的爬取微信小程序中数据的任务，虽然我是连爬虫貌似都还没写过的实习仔，但是想着应该不难，那可不就信心满满地接下任务了。然后第一天，一整天都在查资料看python爬虫相关的东西，什么urllib、BeautifulSoup，虽然一天下来我也就记得个流程了，但至少知道是个啥了，也算是个有收获（摸鱼）的一天了。

结果到了第二天搜索爬取微信小程序相关的内容，结果发现貌似不太对，微信小程序我好像直接拿不到地址啊，那我的urllib.request就没有用武之地了啊，这可咋办？通过查阅资料发现微信小程序虽然把地址啥的都封装起来了，但是好像可以通过Fiddler和 Charles 等抓包工具抓到数据包。行吧，那就马上安排起来！开整！要是抓到包了总可以拿到数据或者地址啥的了吧！

准备工作

  • 下载Fi

最低0.47元/天 解锁文章
大猫也怕老虎啊
关注
  • 19
    点赞
  • 踩
  • 155
    收藏
    觉得还不错? 一键收藏
  • 27
    评论
专栏目录
可以抓微信https包的工具
11-03
可以抓微信https包的工具
利用fiddler抓包爬取微信小程序数据
xlshi1996的博客
10-14 6971
利用fiddler抓包爬取微信小程序数据 1.背景原理 有些微信小程序无法在PC端进行访问 原因 判断非微信‘内嵌浏览器’，则禁止访问 解决方法 模拟微信‘内嵌浏览器’进行访问，需要获取的数据有：User-Agent，以及登录信息cookie 2.Fiddler获取cookie和User-Agent -使用：使用Filddler获取cookie和User-Agent 3.愉快的下载数据 import re import requests import time import json import pa
基于微信小程序的网络爬虫系统的设计与实现
weixin_62640246的博客
06-25 1697
为了减少网络爬虫对网站的潜在威胁，减轻网站服务器的压力，防止数据的大量流失，网站一般会采用以下几种反爬虫的技术限制网络爬虫：请求头校验机制、访问量限制、数据异步加载、验证码限制机制、CSS偏移量反爬虫等。要想设置一个网络爬虫，首先需要直接通过Request技术、Selenium自动化测试框架或Scrapy框架等方式请求URL，进行网页访问，获取响应数据，然后对数据进行解析，解析方法包括Regular Expression正则解析、Xpath解析、JSON解析以及Beautiful Soup 4解析等。
Fiddler 微信小程序抓图教程（傻瓜式|汉化版|狗看了都直呼内行）
热门推荐
HaushoLin的博客
05-10 1万+
给大家详细讲解如何用Fiddler爬取微信小程序的图片，内容图文并茂，流程非常简单。
有什么 python 在线网站推荐？
隔壁王叔的博客
04-07 3768
有什么 python 在线网站推荐？
【Fidder网络抓包+Python爬虫】下载微信小程序视频
ccql's Blog
02-22 6799
首先声明本篇博客以学习为目的，侵权即删。 文章目录1. Fidder抓包1.1 在电脑上打开微信小程序视频播放页以及Fidder软件1.2 点击视频播放按钮，并查看Fidder抓到的数据包2. Python爬虫2.1 视频下载2.2 视频合并2.3 完整代码3. 写在最后 1. Fidder抓包        关于fidder软件的安装和配置，这里我就不多赘述了，大家上网都很容易搜到。 1.1 在电脑上打开微信小程序视频播放页以及Fidd
记录一下爬取微信小程序失败案例，fiddler抓包
weixin_44449258的博客
10-30 1500
记一次失败的操作，想把一个微信小程序（美团外卖小程序）的数据爬下来，在模拟登陆的时候需要需要post,经过反复查看，找到了post参数，请求头等，不过用postman测试却提前错误，说是不安全的请求，拒绝访问，不知道是美团的什么验证给拦截了，关于这方面的教程也很少，只能慢慢研究了，捣鼓了两天也没弄出来。😫😫 希望再接再厉！
Fiddler爬取抓包（网页及小程序包）
xylx_csdn的博客
09-12 3985
Fiddler是一个http协议调试代理工具，它能够记录并检查所有你的电脑和互联网之间的http通讯，设置断点，查看所有的“进出”Fiddler的数据（指cookie,html,js,css等文件）。
fiddler无法抓取微信小程序的请求信息
A_Liucky_Girl的博客
06-20 4576
fiddler无法抓取微信小程序的请求信息
fiddler抓取iOS微信小程序HTTPS包方法
chennuan1991的博客
10-11 4622
最近想要用fiddler抓移动端微信小程序的HTTPS数据包，整理一下方法，作为记录 先说坑： 手机和笔记本一定要在同一个网络，同一个网段！！！ 不然会出现，在移动端安装fiddler证书时，无法访问的情况 PC端操作步骤： 步骤1： 点击Tools–>options， 步骤2： 步骤3： 步骤4： 移动端配置 步骤1：设置–》无线局域网，找到你连接的WiFi，点击后面的叹号 步骤2：手动配置代理 步骤3：设置PC端的IP和fiddler设置的端口8888，点击存储 步骤4：浏览器输入h
小红书抓取，微信小程序，抓包工具.zip
02-21
在IT行业中，网络数据抓取和分析是一项重要的...综上所述，该压缩包文件涉及到了网络爬虫技术在小红书数据抓取中的应用，以及微信小程序的网络通信分析，通过使用合适的抓包工具，可以深入理解和优化这两个领域的操作。
PHP配合fiddler抓包抓取微信指数小程序数据的实现方法分析
10-15
主要介绍了PHP配合fiddler抓包抓取微信指数小程序数据的实现方法,结合实例形式分析了PHP结合fiddler抓取微信指数小程序数据的相关原理与实现方法,需要的朋友可以参考下
小红书内容自动爬取，selenium+fiddler+微信小程序.zip
02-21
综上所述，"小红书内容自动爬取，selenium+fiddler+微信小程序"这个项目结合了多种技术手段，实现了一个全面的数据抓取方案，涵盖了网页动态加载、网络封包分析和微信小程序数据获取等多个方面。对于希望深入了解...
微信小程序 深入探究
03-29
通过fiddler抓包可以看到，微信以mmtls方式发出http请求， 如：http://short.weixin.qq.com/mmtls/21a3ff59。 基于TLS1.3草案标准，设计实现安全通信协议mmtls。 下三篇文章大致了解这种请求的原理 SSL/TLS协议运行...
微信小程序安装vant组件库和使用
qq_61132537的博客
07-23 711
van-button type="primary">主要按钮</van-button>
【计算机毕业设计】基于微信小程序的传染病防控宣传系统【源码+lw+部署文档】
最新发布
07-23 981
目录第一章 绪论1.1 研究背景1.2 研究意义1.3 研究内容第二章 开发环境与技术2.1 JSP技术2.2 MySQL数据库 2.3 Java语言2.4 微信开发者工具第三章 系统分析3.1可行性分析3.1.1运行可行性分析3.1.2经济可行性分析3.1.3技术可行性分析3.2系统流程分析3.3 系统性能分析3.3.1系统安全性3.3.2系统可扩展性3.3.3系统易维护性3.4系统功能分析第四章 系统设计4.1布局设计原则4.2功能模块设计4.3数据库设计4.3.1数据库E-R图4.3.2 数据库表结构
微信小程序 - 数组 push / unshift 追加后数组返回内容为数字（数组添加后打印结果为 Number 数值类型）
王佳斌
07-23 526
微信小程序 - 数组 push / unshift 追加后数组返回内容为数字（数组添加后打印结果为 Number 数值类型），微信小程序 setData 数组。push 时出现的问题,push结果是1。微信小程序数组push后，数组返回内容为数字，小程序数组push后打印拿到的值非数组而是 Number 数值型
微信小程序基本语法
qq_48701993的博客
07-16 2110
微信小程序基本语法
微信小程序使用FIDDler抓不了
07-15
微信小程序使用 Fiddler 抓包可能会遇到一些问题。这里提供一些可能的解决方案： 1. 确保你已经正确地安装和配置了 Fiddler。可以尝试重新安装 Fiddler 并确保它在你的计算机上正常运行。 2. 确保你的设备和计算机在同一网络环境下，并且已经正确地设置了代理。可以尝试在设备上手动设置代理，将代理设置为 Fiddler 的地址和端口。 3. 如果你的微信小程序使用了 HTTPS，你需要在设备上安装 Fiddler 的根证书。可以通过以下步骤安装证书： - 打开 Fiddler，在菜单栏选择 Tools -> Options -> HTTPS - 在 HTTPS 面板中，勾选 "Decrypt HTTPS traffic"，然后点击 "Actions" -> "Export Root Certificate to Desktop" 导出证书 - 将导出的证书发送到你的设备，并在设备上安装证书 4. 确保你的微信小程序没有禁用了代理设置。可以检查微信小程序的网络设置，确保代理设置是正确的并且没有被禁用。 如果尝试了以上解决方案仍然无法抓取微信小程序的数据，可能是微信小程序采取了其他防护措施来阻止被抓包。这种情况下，你可能需要尝试其他抓包工具或者方法来进行调试和分析。
评论 27
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值