【发布时间】:2015-07-31 16:06:41
【问题描述】:
为什么所有 Apache pig 转换脚本都没有产生 part-r-00000 输出?很少有转换产生 part-r-00000 和很少转换产生 part-m-00000 输出。这背后的原因是什么?
【问题讨论】:
-
欢迎来到 SO 并感谢您的发帖。请添加MVCE 以改进您的问题。
标签: hadoop apache-pig bigdata
为什么所有 Apache pig 转换脚本都没有产生 part-r-00000 输出?很少有转换产生 part-r-00000 和很少转换产生 part-m-00000 输出。这背后的原因是什么?
【问题讨论】:
标签: hadoop apache-pig bigdata
Mapper 输出为 part-m-00000,reducer 输出为 part-r-00000。因此,如果您的猪脚本的最后阶段只有映射器作业,那么您可以期待 part-m-I0000 否则 part-r-0000。
【讨论】: