【问题标题】:amazon emr pig: use parameter fileamazon emr pig:使用参数文件
【发布时间】:2014-10-13 13:47:31
【问题描述】:

是否可以将参数文件传递给您在亚马逊上的猪作业? Pig 命令行支持这一点,但我不知道亚马逊是否也支持这一点。 主要思想是我不需要通过命令行向亚马逊发送大量参数,只需上传文件并使用参数文件中的所有值。

所以参数文件看起来像这样: 参数名称=参数值。

pig -f script.pig -param_file parameters.log 有效,但现在我只需要找到亚马逊替代品 :)

提前致谢。

【问题讨论】:

    标签: amazon apache-pig emr


    【解决方案1】:

    解决了。

    要使用参数文件,请像这样在亚马逊上运行它:

    --args "-param_file,s3://<LOCATION_PARAM_FILE>"
    

    【讨论】:

      猜你喜欢
      • 1970-01-01
      • 2015-05-06
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2012-06-08
      • 1970-01-01
      相关资源
      最近更新 更多