webMagic网络爬虫

 

webmagic是一个开源的Java垂直爬虫框架，目标是简化爬虫的开发流程，让开发者专注于逻辑功能的开发。webmagic的核心非常简单，但是覆盖爬虫的整个流程，也是很好的学习爬虫开发的材料。

 

http://itindex.net/detail/48351-webmagic-%E4%BD%BF%E7%94%A8%E6%89%8B%E5%86%8C

 

例子中没有添加webmagic的jar包，需要不全才能使用。