,w#pic_center =830x500

HDFS中NN和2NN工作机制

Hadoop(5.NN和2NN工作机制)

第一阶段:NameNode启动

  1. 第一次启动NameNode格式化后,创建Fsimage和Edits文件。如果不是第一次启动,直接加载编辑日志和镜像文件到内存。
  2. 客户端对元数据进行增删改的请求。
  3. NameNode记录操作日志,更新滚动日志。
  4. NameNode在内存中对元数据进行增删改。

第二阶段:Secondary NameNode工作

  1. Secondary NameNode询问NameNode是否需要CheckPoint。直接带回NameNode是否检查结果。
  2. Secondary NameNode请求执行CheckPoint。
  3. NameNode滚动正在写的Edits日志。
  4. 将滚动前的编辑日志和镜像文件拷贝到Secondary NameNode。
  5. Secondary NameNode加载编辑日志和镜像文件到内存,并合并。
  6. 生成新的镜像文件fsimage.chkpoint。
  7. 拷贝fsimage.chkpoint到NameNode。
  8. NameNode将fsimage.chkpoint重新命名成fsimage。

相关文章:

  • 2021-06-21
  • 2021-06-20
  • 2021-04-01
  • 2021-10-23
  • 2021-12-25
  • 2022-12-23
  • 2021-08-17
  • 2021-07-30
猜你喜欢
  • 2021-09-29
  • 2021-05-30
  • 2022-01-01
  • 2021-04-06
  • 2021-06-19
  • 2021-05-15
  • 2021-11-21
相关资源
相似解决方案