【问题标题】:How do I slow down the Flume Sequence Generator如何减慢 Flume 序列生成器的速度
【发布时间】:2014-10-27 20:47:43
【问题描述】:

Flume 有一个名为Sequence Generator 的源,可用于测试;它只是生成随机数据(递增数字)。

我将它用于测试/调试,但它会很快生成大量数据。我怎样才能让它每秒产生更少的数据量?

【问题讨论】:

    标签: hadoop flume flume-ng


    【解决方案1】:

    Flume 目前不提供任何此类配置。

    为了减少数据的频率,您可以将batchSize参数配置为更高的值

    或者更好的方法是像这样SequenceGeneratorSource 编写自己的水槽源代码

    【讨论】:

      猜你喜欢
      • 2011-04-23
      • 1970-01-01
      • 1970-01-01
      • 2014-09-20
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      相关资源
      最近更新 更多