【问题标题】:Apache Pig script output fileApache Pig 脚本输出文件
【发布时间】:2015-07-31 16:06:41
【问题描述】:

为什么所有 Apache pig 转换脚本都没有产生 part-r-00000 输出?很少有转换产生 part-r-00000 和很少转换产生 part-m-00000 输出。这背后的原因是什么?

【问题讨论】:

  • 欢迎来到 SO 并感谢您的发帖。请添加MVCE 以改进您的问题。

标签: hadoop apache-pig bigdata


【解决方案1】:

Mapper 输出为 part-m-00000,reducer 输出为 part-r-00000。因此,如果您的猪脚本的最后阶段只有映射器作业,那么您可以期待 part-m-I0000 否则 part-r-0000。

【讨论】:

    猜你喜欢
    • 1970-01-01
    • 2023-03-07
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 2015-01-29
    相关资源
    最近更新 更多