http://hi.baidu.com/jacklin/item/a8fbccf479f6a1d042c36a7c
再附一篇:http://blog.csdn.net/laigood/article/details/6233561
fetcher.threads.per.host
<property>
  <name>fetcher.threads.per.queue</name>
  <value>1</value>
  <description>This number is the maximum number of threads that
    should be allowed to access a queue at one time.
   </description>
</property>
自1.6似乎改成fetcher.threads.per.queue 这个属性了
fetcher.server.delay

1 增加同一个host的线程数(如上图所示,不建议,增加对方网站负担)
2 减少延迟(interval) 从5降为 0 即可
3 当然最主要的还是 增加 mapred数~

 

 

相关文章:

  • 2021-12-18
  • 2021-06-02
  • 2021-10-06
  • 2022-12-23
  • 2022-01-23
  • 2021-09-13
  • 2021-12-28
  • 2021-09-09
猜你喜欢
  • 2021-12-28
  • 2021-07-11
  • 2022-12-23
  • 2021-05-16
  • 2021-07-24
  • 2021-07-11
  • 2021-09-28
相关资源
相似解决方案