介绍
爬虫分类 :数据来源
- PC端爬虫(网页端爬虫)
-
- 找数据接口 (requests,scrapy)
- selenium
- APP端爬虫
-
- 找数据接口
-
-
- 如何找数据接口 -fiddler
- 如何获取app与服务器进行交互的数据包-模拟器
-
-
- appium
app爬虫常见反爬:
- 抓不到数据包请求
- 抓取数据包里的参数涉及加密(app逆向)
APP抓包常用工具:
模拟器
夜神模拟器网址:https://www.yeshen.com/
安装app
app应用安装包下载地址:豌豆荚手机精灵 豌豆荚手机助手-海量安卓APP应用与游戏免费下载
- 直接把下载好的apk拖拽到模拟器(常用)
- 通过命令进行安装:
-
- 在cmd中进入夜神bin目录下(D:\Program Files\Nox\bin)
- 先输入adb 回车 检测
- 输入adb install C:\Users\EDZ\Desktop\上课软件\当当_v10.12.4.apk 回车即可安装成功
PS: adb shell screencap /sdcard/screen.png # 截图
fiddler
1. fiddler工作原理
2.安装
下载地址: