寻找crawler4j的遍历规则是(深度遍历还是广度遍历)?:
1.crawler4j主要要重写两个类controller和WebCrawler
设计思路是controller–>start–>thread–>Crawler(controller启动thread传递给Crawler4j);
2.Crawler中包含processPage(WebUrl webUrl)这个方法;
将WebUrl中的outgoingUrl放到toschedule中。代码如图所示:
3.在parser.class中有个抽取url的方法