[hdfs]如何为每个datanode配置不同的dfs.datanode.data.dir？

Question

我使用 ambari 建立一个 hadoop 集群。

但是当我配置 hdfs 的配置时。我发现如果我修改了dfs.datanode.data.dir，configure会在所有datanodes上生效……

如何为每个数据节点配置不同的配置？

比如机器A有两个磁盘，分别挂载到/data1、/data2

但是机器B只有一个磁盘，挂载到/data1

所以我想将机器 A 的 dfs.datanode.data.dir 配置为“/data1,/data2”。 但对于机器 B，只有“/data1”

Answer 1

不存在的 HDFS 目录将被忽略。把它们都放进去，没关系。

Answer 2

请记住，集群中的每个 Hadoop 节点也有自己的一组配置文件（在通常的 conf\ 目录下）。因此，您可以登录到该数据节点机器并更改配置文件。

数据节点上的本地配置将对该数据节点生效。