flume高可用-failover-模型分析

高可用方案

在完成单点的Flume NG搭建后,下面我们搭建一个高可用的Flume NG集群,架构图如下所示:

角色分配

Flume的Agent和Collector分布如下表所示:

名称 HOST 角色
Agent1 node01 Web Server
Collector1 node02 AgentMstr1
Collector2 node03 AgentMstr2

图中所示,Agent1数据分别流入到Collector1和Collector2,Flume NG本身提供了Failover机制,可以自动切换和恢复。在上图中,有3个产生日志服务器分布在不同的机房,要把所有的日志都收集到一个集群中存储。下 面我们开发配置Flume NG集群

 

相关文章:

  • 2021-05-24
  • 2023-03-08
  • 2021-11-29
  • 2021-12-04
  • 2021-12-24
  • 2022-12-23
  • 2021-08-15
猜你喜欢
  • 2021-06-10
  • 2021-07-10
  • 2022-12-23
  • 2021-07-14
  • 2022-01-24
相关资源
相似解决方案