- 博客(4)
- 收藏
- 关注
RSS订阅原创 Android 系列 -- Android 抓包
现在大多 android 应用要抓取 https 的包用户基别的证书已经不行了 , 所以我们需要给手机配置系统级别证书来抓包需要工具 : Fiddler , 已经 root 的 android 手机 或 模拟器 , openssl , adb首先需要给 Fiddler 配置允许 https 抓包和手机抓包具体配置可以参考其他文章接下来开始配置系统级别证书首先根据刚刚的配置进入到 Fiddler 下载证书的位置 , 将证书下载到电脑本地获取到证书后需要转成pem 格式openss
2021-10-15 15:00:18
856
原创 2021裁判文书网抓取
记录一下抓取《裁判文书网》搜索功能的整体流程, 本文仅用于记录学习简单的分析一下页面发现在点击下一页的时候页面的 url 并没有进行跳转初步判断请求时通过ajax进行的请求 筛选一下请求的结果在点击下一页时只有这一个请求加载, 那么基本可以确定这个就是加密后的列表内容。还发现了可secretKey这个参数, 这种返回的形式,很大机率是对称加密中的key。那么接下来可以通过拦截这个请求进行进一步的确认通过观察调用栈, 发现 getData 很可能是请求发起的地方追踪进去发现是一个ajax请求
2021-07-07 19:12:27
21654
11
原创 爬虫反爬系列2-字体加密
爬虫反爬系列2-字体加密一个练习爬虫技巧的网站: http://glidedsky.com/ 镀金的天空是一个互联网技能认证网站，这是一个公开的爬虫联系平台(侵权删)那么这种网站就算是通过selenium也是无法获取真是数据的字体反爬分析流程字体加密一般是通过字体文件进行映射,所以我们只需要找到对应的字体文件,然后通过一些手段找到他们字体对应的映射关系就可以破解字体反爬1. 找到字体加密文件当我们发现字体反爬之后,首先可以找一下是通过哪一个类进行的字体映射,因为字体映射都会在具体的c
2021-01-19 23:13:50
459
原创 爬虫反爬系列1-m3u8视频流
爬虫获取m3u8视频流数据现在的视频网站大多都是通过视频流的方式来传输数据,如果想要使用爬虫来获取数据的话,就需要获取每一个流视频的url我们发现video标签中的url并不能直接访问,那么这肯定不是视频地址的链接,这里面引用的是一个js文件那么我们直接去notebook中观察一下请求发现这里加载许多ts文件,可以单独下载到本地,这里每一个ts都是一个视频的片段,有些网站下载下来的视频是可以直接观看的,但是这个网站对视频进行了加密,所以不能直接播放,关于加密稍后再说. 现在这么多没有规律的url
2021-01-12 18:12:21
2114
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人