【发布时间】:2014-02-02 17:54:36
【问题描述】:
我在文件中有列标题的 csv 文件。 例如
列 1 列 2 列 3
值1 值2 值3
值1 值2 值3
值1 值2 值3
值1 值2 值3
现在我想在内部使用此标题创建配置单元表,然后将没有标题行的整个表加载到表中。 任何人都可以建议在这种情况下应该采用什么方法。
【问题讨论】:
标签: hadoop mapreduce hive apache-pig cloudera
我在文件中有列标题的 csv 文件。 例如
列 1 列 2 列 3
值1 值2 值3
值1 值2 值3
值1 值2 值3
值1 值2 值3
现在我想在内部使用此标题创建配置单元表,然后将没有标题行的整个表加载到表中。 任何人都可以建议在这种情况下应该采用什么方法。
【问题讨论】:
标签: hadoop mapreduce hive apache-pig cloudera
你可以指定
tblproperties ("skip.header.line.count"="1");
【讨论】:
您应该在将数据加载到 HDFS 之前删除标题行,这里没有其他选项。
【讨论】: