在企业云上使用 Cloudera Manager 设置 Hadoop答案

【问题标题】：Setting up Hadoop using Cloudera Manager on corporate cloud在企业云上使用 Cloudera Manager 设置 Hadoop
【发布时间】：2013-12-18 01:32:41
【问题描述】：

我有一个企业云环境，可让我创建 4 个配置相当高的虚拟机（如 16 Gig RAM 和 130 Gig 驱动器空间）。我正在尝试创建 Hadoop 集群并遇到问题。操作系统 RHEL 6.4 在 130 场演出中，这是df

Filesystem           1K-blocks      Used Available Use% Mounted on
/dev/mapper/rootvg-root
                       5160576   1454056   3444376  30% /
tmpfs                  8167172         0   8167172   0% /dev/shm
/dev/sda1               516040     40876    448952   9% /boot
/dev/mapper/local1vg-vol_01
                     123789284    683164 116817944   1% /vol_01

我认为，当我开始安装包裹时，“/”和“/boot”会填满，cloudera manager 会卡住。

我尝试的解决方案之一是将 /tmp 移动到 /vol_01 下，并使 /tmp 成为 /vol_01/tmp 的链接，它确实使情况稍微好一些...但是 /var 占用了大量空间.我无法将 /var 移动到 /vol_01 下，因为它被操作系统使用（我猜......它无法从 /var 移动某些文件夹）。现在，这些挂载点是预定义的......作为图像的一部分。任何解决方案，我可以要求 Cloudera Manager 以不同方式安装或以特定方式修改我的 VM ...？

我知道一些解决方案，例如在将 /var 移动到 /vol_01/var 之前停止所有服务以便复制所有文件

lvextend -L +10G /dev/mapper/vg00-var
gnu 分开
fstab

我将按照上述顺序寻找最佳解决方案并发布结果。

【问题讨论】：

标签： linux cloudera cloudera-manager

【解决方案1】：

您可能必须进入单用户模式才能移动 /var 目录。可行，但很多守护进程例如使用 /var/run

【讨论】：

如果虚拟机可以在本地访问，单一用户的想法会奏效。由于它是云虚拟机，更改为单用户模式后，将无法通过网络访问，因此不是可行的解决方案。非常感谢您的尝试。
如果您无法访问控制台，您将不得不像刚才描述的那样进行操作。停止除网络以外的所有服务并将/var复制到有更多空间的位置。