1.说实话,当初老大让我去尝试抓取手机App的数据时,我是一脸懵逼,无从下手。后来经过在网上查阅资料了解到,抓取手机数据需要抓取数据包,从中获取需要的数据,根据别人写的博客,进行了初步的尝试,最终获取了一些自己需要的数据,初次尝试,费了不少劲,虽然以前学过抓包,只恨当初没有认真对待,忘得一无所有,汗。废话少说。。
2.首先要抓取数据(Fiddler抓包,手机WiFi代理),
3.分析数据(解析json或者HTML,提取有用的信息)
4.编写代码,获取需要的数据
5.基本思路是对数据的抓取à分析à处理à呈现
6.首先下载fiddler,对toolsàFiddler OptionsàHTTPS和Connections进行设置,别忘了进行重启。
7.设置手机WiFi代理,在高级设置里面输入本地IP地址和端口号即可。
8.以上步骤操作完毕之后,打开“即刻”APP,发现网络出现问题了,里面的文章不能进行更新,文章打不开,有种想哭的感觉,整了这么多尽然不能用,让我去查查怎么去解决这种问题。
9.后来在网上查看,有些网友说fiddler只针对于http,所以我打算用一下wireshark试一下。
注:fiddler只能抓http协议的,而且并不是所有的http都能抓。有些http是长连接,服务器端一直hold住,通过chunk一段段的发送给客户端,这种http没有结束,fiddler就抓不到。fiddler只能抓到完整的请求、结束这种类型的。
再者,app并不一定都使用http,比如tcp/udp