【问题标题】:Sqoop - Binding to YARN queuesSqoop - 绑定到 YARN 队列
【发布时间】:2015-06-18 21:20:08
【问题描述】:

因此,使用 mapreduce v2,您可以使用绑定到某些 YARN 队列来管理资源和优先级。 基本上通过使用

"hadoop jar /xyz.jar -D mapreduce.job.queuename=QUEUE1 /input /output" 完美运行。

在运行 sqoop 查询时,如何将 Yarn 队列绑定与 Sqoop 集成?

即。 sqoop import \ --connect 'jdbc://server' \ --target-dir \ 还有什么?

【问题讨论】:

    标签: hadoop mapreduce sqoop hadoop-yarn sqoop2


    【解决方案1】:

    对 Sqoop 也使用相同的方法,即

    sqoop import -Dmapreduce.job.queuename=NameOfTheQueue\ --connect 'jdbc://server' \ --target-dir \
    

    请注意,mapreduce.job.queuename 参数应在导入之后但在连接或其他选项之前使用。

    【讨论】:

      猜你喜欢
      • 1970-01-01
      • 1970-01-01
      • 2020-04-30
      • 2018-07-16
      • 2011-05-15
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2022-01-04
      相关资源
      最近更新 更多