选择spiderflow的原因还是因为是Java的框架的原因,市面上仍然有不少好的爬虫框架,例如crawlab等使用Go语言和Python也是相当厉害的。我使用Spiderflow的测试网站http://www.geyoon.cn/ , 大家可以看看效果,其实和正式的手工网站非常类似,可以编排格式,就是有些类别区分我还不太熟悉,继续在学习一下爬虫技术,下次做进一步分析。
选择spiderflow的原因还是因为是Java的框架的原因,市面上仍然有不少好的爬虫框架,例如crawlab等使用Go语言和Python也是相当厉害的。我使用Spiderflow的测试网站http://www.geyoon.cn/ , 大家可以看看效果,其实和正式的手工网站非常类似,可以编排格式,就是有些类别区分我还不太熟悉,继续在学习一下爬虫技术,下次做进一步分析。