【问题标题】:Hadoop Administration - Two node clusterHadoop 管理 - 两节点集群
【发布时间】:2023-04-05 14:32:01
【问题描述】:
我正在尝试安装 Hadoop 两节点集群。
就运行主从守护进程而言,设置两个节点集群的最佳做法是什么?
如果我在一台机器上运行 Namenode 和 Jobtracer 作为 Master,在第二台机器上运行 Secondary Namenode、Tasktracker 和 Datanode 作为 Slave,它会变成一个双节点集群吗?
在上述任何一种情况下,我可以将复制因子设置为 1 吗?为什么将复制因子记为 2?
【问题讨论】:
标签:
hadoop
cluster-computing
【解决方案1】:
您甚至可以在单机上以伪模式安装 Hadoop。
仅供练习
案例一:
- 在master中安装NN、SNN、DN、JT、TT,在slave中安装DN、TT
- 通过这种方式可以配置
replication factor as 2
案例 2:
- 在master中安装NN、SNN、JT,在slave中安装DN、TT
- 通过这个你可以配置
replication factor as 1