【问题标题】：Various ports in hadoop cluster?hadoop集群中的各种端口？
【发布时间】：2017-04-14 16:13:13
【问题描述】：

我正在尝试了解各种守护程序/进程在 Hadoop 集群中侦听的各种端口。

核心站点.xml

    <property>
            <name>fs.defaultFS</name>
            <value>hdfs://master.hadoop.cluster:54310</value>
    </property>

yarn-site.xml

    <property>
            <name>yarn.resourcemanager.address</name>
            <value>master.hadoop.cluster:8032</value>
    </property>

我看到我们还有其他三个端口，它们是：

1) 50070 --> 查看 hdfs GUI
2) 8088 --> 查看 RM GUI
3) 8042 --> 不确定我们可以在这个端口看到哪个 GUI

由于端口太多，我不清楚哪个端口用于哪个东西。如果我向端口发出 HTTP 请求，比如在 8032，它会说这是Hadoop IPC port。

谁能帮我理解这一点，我们应该知道的主要端口号是什么，以及哪些进程在这些端口上侦听。

【问题讨论】：

【解决方案1】：

fs.defaultFS 中定义的端口用于文件系统元数据操作。您不能使用它来访问 Web UI。 8042 用于 NodeManager Web UI，8032 用于 ResourceManager IPC。

参考

【讨论】：