webmagic
文章平均质量分 81
v7595v
这个作者很懒,什么都没留下…
展开
-
对webmagic总体构架的理解与代码分析——Spider篇
不得不说webmagic是一个很优秀的爬虫框架,但是我要怎么做才能吃透它呢?我是爬虫初学者,我接下来要做的是将webmagic的代码梳理一遍,不知道我能不能将其整理好,并且灵活运用,举一反三呢。在这个过程中会遇到很多别的知识点,我会另外写博文,来总结其他我不会的东西,现在我要做的就是先分析webmagic的代码。(我自己的理解与分析会用黑色字体,而webmagic框架,黄亿华老师的东西,我会用其他原创 2015-05-21 15:39:03 · 2991 阅读 · 0 评论 -
对webmagic总体构架的理解与代码分析——PageProcessor篇
前面我谢了关于webmagic里Spider的博文,http://write.blog.csdn.net/postlist现在写一篇关于webmagic关于PageProcessor的博文。下面是PageProcessor代码,PageProcessor是一个接口public interface PageProcessor { /** * process th原创 2015-05-23 20:23:19 · 2726 阅读 · 0 评论