如何加入 Pig 输出文件？

Question

猪脚本输出一些带有 .pig_header 和 .pig_schema 的部分文件（part-m-00000、part-m-00001 等），我正在尝试将它们作为一个输出 csv 加入。 我尝试使用 hadoop 合并

hadoop fs -getmerge ./output output.csv

但文件也与 .pig_schema 文件合并，因此它变成了类似

header1,header2,header3
{"fields":[{"name": "header1", "type":...}]}
value1,value2,value3

如何在不包含 .pig_schema 的情况下正确加入它们？

谢谢！

Answer 1

使用文件团：hadoop fs -getmerge ./output/part* output.csv