mapreduce 作业的并行执行

Question

我有一个问题。我可以使用 JobCntrol 在 hadoop 中同时执行两个或多个作业吗？ 我有 2 个可以并行执行的作业，而其他作业与这两个作业有依赖关系？我怎样才能用 JobControl 做到这一点？ 当我使用它时，它给出了错误： java.lang.IllegalStateException: Job 处于 RUNNING 而不是 DEFINE 状态

Answer 1

当您想要并行执行作业时，不需要 JobControl。只需使用JobClient.runJob() API 提交作业。当有一个简单的 DAG 作业时使用 JobControl。