网页上通过ajax异步加载的数据有什么办法抓取到吗？

其实有很多方案，selenium，phantomjs，casperjs，qtwebkit等等等等

我们采用的是casperjs。把每个ajax请求完成后保存网页，放入队列，这样的话后面的分析程序就只要分析html就好了。

casperjs这货和nodejs一起使用的时候时不时会有点小问题（我遇到的问题都不大，很好解决），如果不想麻烦，npm安装spookyjs，据说就可以把casperjs作为node的模块来使用了。

当然，请求不复杂，无需验证的话，直接观察请求就可以了。