Hadoop的读流程和写流程究竟是怎么回事呢?
看下面:

一、读流程
 Hadoop对于读流程和写流程的图解和解释
解释:
1、客户端向NameNode发起请求,需要获取名字为x的数据块 
2、NameNode中保存了该数据块存储的位置,将DataNode的信息返回给客户端 
3、客户端就近的方式去从DataNode获取数据 
4、如果某个DataNode无法访问 
5、从另一个DataNode中去获取数据 


总结:向namenode发送请求,从它获得该数据块存储的信息,信息返回给客户端
          从而获取数据

二、写流程
Hadoop对于读流程和写流程的图解和解释



解释:
1、客户端向NameNode发起请求,需要存储数据Data 
2、因为NameNode中是记录了所有DataNode的相关信息的,而数据最终要保存的地方就是DataNode,所以NameNode会返回可用的             DataNode的信息给客户端 
3、将Data分为1和2这两个数据块 
4、客户端会将数据块存储到NameNode返回给他的DataNode1中去 
5、因为数据块需要存储多份,所以DataNode之间会相互传输来进行存储 
6、DataNode存储完数据后,会反馈给NameNode,NameNode会将对应的DataNode的相关信息进行更新 


总结:
            客户端向namenode发送请求,namenode返回可用的datanode信息给客户端,
            客户端会将数据块存储导datanode,并备份,然后datanode存储完数据会反馈给namenode。




 

相关文章:

  • 2021-08-21
  • 2021-09-11
  • 2021-05-20
  • 2022-12-23
  • 2022-01-04
  • 2021-12-25
  • 2021-10-23
  • 2021-12-08
猜你喜欢
  • 2021-06-16
  • 2022-01-14
  • 2021-09-29
  • 2021-11-10
  • 2021-12-14
  • 2022-01-12
  • 2021-08-13
相关资源
相似解决方案