有没有类似hadoop yarn的框架

Question

我想知道，是否有任何其他框架已经存在，例如 Hadoop Yarn 用于管理集群应用程序和资源？

我觉得 YARN 解决了​​一个普遍的问题，我正在寻找为什么没有任何其他框架已经尝试这样做。

我用谷歌搜索过，但没有找到类似于 Hadoop Yarn 的。 有没有类似YARN的东西？

Answer 1

有许多资源供应和调度程序。仅举几例，有HTCondor、SLURM、PBS、LSF、SGE（或变体）。每个人都接受一个或多个工作，并将它们安排在一组分布式工作节点上。每个人都有自己的长处和短处。有些是免费的，例如 HTCondor、Slurm 和扭矩。一些成本，例如 LSF 和 SGE（尽管 SGE 存在免费版本）。这完全取决于您的需求。

FWIW，最初启发 Hadoop 的 Google paper 引用了 HTCondor，因此您可能有兴趣尝试一下。