HBase 和 HDFS 数据分隔符？

Question

我将 HBase 数据导出到 HDFS。我想 Sqoop 将 HDFS 导出到 MySQL。但是在使用 Sqoop 导出时，需要我提供 HDFS 数据的分隔方式。如何检查 HBase 表或 HDFS 数据中的分隔符？

编辑 1：我将 HBase 数据导出到 HDFS 使用 bin/hadoop jar /path/to/hbase-0.20.3.jar export your_table /export/your_table

Answer 1

就 HBase 而言，没有任何分隔符的问题。您的数据存储在 HBase 表的列中。要知道 HDFS 文件的分隔符，您可以：

• 使用 bin/hadoop fs -cat /path/to/file
• 通过 HDFS WebUI 浏览文件并通过查看其内容找到它。

但这主要取决于您如何导出数据。 例如，如果您使用了 HBase 导出实用程序，那么您的数据将作为序列文件转储到 HDFS。