Gavin的专栏

原创 八爪鱼的简单应用

知道我是做文献计量学的，懂得一些文献数据爬取的知识，因此，最近有小伙伴向我请教微博数据爬取的问题。先说说自己，我是通过编程的方式通过post get模拟请求获取数据的，还有一种是webdriver的方法，就是可视化地模拟人的动作，速度比较慢。鉴于他什么编程知识都没有，因此给他推荐了现有的网络数据爬取工具。据我所知，八爪鱼和火车头都是比较成熟的数据爬取工具。先来说说使用工具获取数据的优缺点。优点：不...