org.archive.crawler.restlet.JobResource

最新推荐文章于 2023-09-14 09:31:39 发布

javaite

最新推荐文章于 2023-09-14 09:31:39 发布

阅读量102

点赞数

分类专栏： heritrix3 文章标签： heritrix3

本文链接：https://blog.csdn.net/javaite/article/details/84366040

版权

heritrix3 专栏收录该内容

11 篇文章 0 订阅

订阅专栏

1、build ：validateConfiguration（）
2、launch：launch()
new Thread start ，CrawlController.requestCrawlStart()
getFrontier().run();
3、pause：getCrawlController().requestCrawlPause()
4、unpause：getCrawlController().requestCrawlResume()
BdbFrontier.unpause()
BdbFrontier:A Frontier using several BerkeleyDB JE Databases to hold its record of known hosts (queues), and pending URIs.

sendCrawlStateChangeEvent(State.RUNNING, CrawlStatus.RUNNING);

CrawlController noteFrontierState INFO: Crawl running.
CrawlJob onApplicationEvent INFO: RUNNING 20121211155156

5、checkpoint：getCheckpointService().requestCrawlCheckpoint()
6、terminate：terminate()
7、teardown ：teardown()