《毒液》:用Fiddler+MongoDB抓取猫眼APP短评

欢迎关注天善智能，我们是专注于商业智能BI，人工智能AI，大数据分析与挖掘领域的垂直社区，学习，问答、求职一站式搞定！

对商业智能BI、大数据分析挖掘、机器学习，python，R等数据领域感兴趣的同学加微信：tstoutiao，并注明消息来源，邀请你进入数据爱好者交流群，数据爱好者们都在这儿。

作者：zuobangbang

微信公众号：zuobangbang

毒液这部电影自上映后就好评，热搜不断，可见其火爆程度。笔者为了让文章更加贴近生活（实际是为了涨粉），打算爬一爬关于毒液的短评。

之前爬过豆瓣的影评，不过它只显示500条，而猫眼网页端的反爬也做的非常好，仅可见10条短评，所以只能从手机端着手了。下载猫眼APP，点开电影毒液的短评合集，可以看到最新的短评，这些数据是异步加载的，不断往下滑，就会有数据不断的出现。

下面就是使用Fiddler对手机进行抓包了。Fiddler的安装非常简单，就和安装QQ一样，自己可以独立完成。