【问题标题】:start vs startNonBlocking in crawler4jcrawler4j 中的 start vs startNonBlocking
【发布时间】:2015-05-19 07:55:38
【问题描述】:

我正在使用crawler4j lib 及其依赖项 来抓取页面。有什么区别

controller.start(BasicCrawler.class, numberOfCrawlers);

对比

controller.startNonBlocking(BasicCrawler.class, numberOfCrawlers);

?

【问题讨论】:

    标签: java crawler4j


    【解决方案1】:

    看一看

    https://github.com/yasserg/crawler4j/blob/master/src/main/java/edu/uci/ics/crawler4j/crawler/CrawlController.java

    从文档中,第二个允许爬虫线程在触发爬虫请求后继续。

    【讨论】:

      猜你喜欢
      • 2014-08-13
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2015-03-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      相关资源
      最近更新 更多