在 Apache Hadoop 中的 Datanode 内重新平衡磁盘答案

【问题标题】：Re-Balncing disks within a Datanode in Apache Hadoop在 Apache Hadoop 中的 Datanode 内重新平衡磁盘
【发布时间】：2018-09-06 03:15:04
【问题描述】：

我有一个 Apache Hadoop 集群。面临数据分布不均的节点之一。机器有3个磁盘。磁盘 1 分别占据 86% 左右，磁盘 2 30% 和磁盘 3 60%。现在，如果数据在 DataNode 内的磁盘之间分布不均匀怎么办？ P.S：我想通知您，存储类型不一样，所以，我无法关注 HDFS-1312。另外，我的 Hadoop 版本是 2.5.0。有什么帮助吗？

【问题讨论】：

标签： hadoop hdfs

【解决方案1】：

节点内平衡器是在 Hadoop3 中引入的。

我不确定是否有不自己移动文件的替代方案，即使它认为 namenode 只跟踪数据节点，而不是数据量，这也可能是有风险的

【讨论】：