App Store，“穷人靠变异”的爬虫路

前景提要

大家好，我是一只“我吹过你吹过的晚风”的文艺爬虫；至于“那我们算不算相拥”，就要看你我姿势对不对了。

废话不多说，直入主题。最近一个潜在金主需要采集各个应用商店上某些APP的评论数据，什么华为应用商店、三星应用商店、小米应用商店、OPPO应用商店等等。正所谓“Android在手，天下我有”，不管是Appium模拟直采，还是Appium模拟+Fiddler拦截间接采，异或直接破解数据接口硬刚，总算差强人意地搞定了。

然而，“天有不测风云”，笑着笑着，被嗝咽着了，要采集苹果的App Store，有点小懵啊。众所周知，苹果的系统是IOS，市面上还没有相对成熟的IOS模拟器；身为Android党的我，更不可能为了一个不确定的项目，耗费巨资搞台苹果手机来研究。（此处不放下图，我如鲠在喉啊）

感慨过后，还是那英《山不转水转》唱得好啊，“没有憋死的牛，只有愚死的汉，蜘蛛吐丝画它自己的圆，那太阳掏洞，也要织它那条线，再深的巷子，也能走出那个天”。俗话说得好，“富人靠科技，穷人靠变异”，不怂！（再来张图，瞬间舒爽了很多；无形当中又水了一个版面啊）

另辟蹊径

PC Web行不行

示例链接：https://apps.apple.com/cn/app/id392899425#see-all/reviews

看完这个页面，心中千万只动物马飞过啊，我就想要最新的评论啊，你给我来个大杂烩，为了几十条几百条的新增数据，我要采你219万+的全量数据，也就是22万+的请求，我虽然每天有千万级请求的采集能力，我骄傲了么，我自豪了么，我膨胀了么，但你身板小啊，怕你不够受啊！

Made In Android行不行

看完就想说一句，“我爬虫写得少，你不要骗我”！5s的广告我忍了，你就给我看这个？这不就是，PC Web的数据接口换了种展现形式么！我意大利炮呢！

苹果IPAD模拟器 iPadian 行不行

iPadian苹果IPAD模拟器是一款苹果ipad模拟器，可以在windows系统上模拟出苹果系统的界面使用。恩，介绍就这么多，很实诚；一试，还真是模拟了界面，你功能呢，你倒是给我看看点击效果啊！我40米的大刀呢！

iTunes，Made In Apple行不行

“犹抱琵琶半遮面，千呼万唤始出来”啊，瞬间舒畅了很多。在苹果这一资产阶级产物面前，共产主义胜利了；这是一次庶民的胜利啊。之后就是Fiddler拦截的技术了，本处不多详述。

结语

本文并没有太多的技术介绍，只是简单分享了App Store的一次采集调研经历；希望能对你的采集调研有所帮助。

本文用词多有“亢奋”，也请见谅；最后再水个图片。