1.高可用机制:

在搭建Hadoop集群时可以配置很多个NameNode,这样使得在一个NameNode出现问题时其他NameNode可以迅速代替。

当一个NameNode处于Activity状态时,其他处于Standby状态,在此期间,所有NameNode的元数据保持一致。

2.NameNode的元数据保持一致的过程

处于Ativity状态时,将日志写入共享文件系统,处于Standby的NameNode读取日志文件。

HDFS的高可用机制和联邦机制

 

 

3.联邦机制

当集群很大时,NameNode的内存成了性能的瓶颈,所以提出了联邦机制

4.联邦机制原理

将NameNode划分成不同的命名空间并进行编号。不同的命名空间之间相互隔离互不干扰。在DataNode中创建目录,此目录对应命名空间的编号。由此,编号相同的数据由对应的命名空间进行管理

HDFS的高可用机制和联邦机制

 

相关文章:

  • 2021-09-24
  • 2022-02-21
  • 2021-07-14
  • 2021-12-25
  • 2022-02-08
  • 2021-12-22
  • 2021-07-03
猜你喜欢
  • 2021-04-27
  • 2021-07-24
  • 2021-07-12
  • 2021-08-06
  • 2021-04-01
  • 2021-09-29
相关资源
相似解决方案