一:常用channel概述:

十二:Flumue操作Channel-Memory/File Channel¶

1.1 memory

弊端:在使用Memory作为channel时,需注意source过来的数据 和SINK写出的速度,防止数据处理不过来导致内存挂掉,需要优化两个具体的参数。
同时用memory作为channel时,当flume挂了,内存的数据就丢了!capacity的容量是和JVM公用的
留意参数调整:export JAVA_OPTS="-Xms100m -Xmx2000m -Dcom.sun.management.jmxremote"

优点:机器性能比较靠谱,可以考虑用着,速度比较快

1.2 File:

优点: 容错效果好,消费来不及,可以存起来慢慢消费!

十二:Flumue操作Channel-Memory/File Channel¶

相关文章:

  • 2021-10-16
  • 2022-02-26
  • 2022-12-23
  • 2022-12-23
  • 2021-11-03
  • 2021-07-01
猜你喜欢
  • 2022-12-23
  • 2021-08-25
  • 2022-01-07
  • 2021-11-04
  • 2021-09-29
  • 2021-07-14
  • 2021-11-11
相关资源
相似解决方案