这几天都在做python + appium + fiddler的手机自动化爬取App,没人教自己学习,遇到了很多的问题,记下来一做为加深记忆,二来希望能帮到正在学习这一方面的同行们,也希望有更好的方法,一起交流。
安装环境:windows 7
appium:
安装的是appium desktop v1.9.1版本的,手机用的是真机。对于安装appium环境的话网上有很多详细的教程,但我也踩了一些小坑,主要也是自己对这些不太熟悉,这些就不多说了。
fiddler:
网上也有很多的教程,一搜一大把。
我这也有安装包:
提取码:mc22
接下来就是我遇到的问题了,我做了两个app的抓取,分别是抖音,小红书的用户数据抓取,
抖音的话网上有教程,小红书我找了基本没有,可能是我找的方法不对。问题就是在对小红书进行自动化时不知道小红书的appPackage和appActivity,这里也是我的问题,没有找到正确的处理问题的方法浪费了很多时间。
下面是处理问题的方法:
这种方法也比较简单,主要针对你没有.apk包的情况,比如Android原生自带的APP(计算器、通讯录、短信等),可以通过adb 命令。
1,在手机打开APP。
2,执行> adb logcat>D:/log.txt
3.
4.在App随便进行一些点击或者什么的操作
5.按Ctrl + c结束
6.然后打开log.txt
因为我用命令:adb shell pm list package -3(获取第三方应用的packageName)
获取到了小红书的packageName: com.xingin.xhs
所以我直接在log.txt中搜索com.xingin.xhs如下图:
更多的处理方法看:appium测试之获取appPackage和appActivity - 虫师 - 博客园www.cnblogs.com
这就是我遇到的一些坑,会不断更新,希望能一起交流学习。