配置单元分区表的 S3 文件夹结构，其中没有“=”答案

【问题标题】：S3 folder structure for hive partitioned tables without "=" in it配置单元分区表的 S3 文件夹结构，其中没有“=”
【发布时间】：2016-08-19 19:59:41
【问题描述】：

我有一个像这样的现有 S3 文件夹结构，

s3://mydata/{country}/{date}/

如何通过将 {country} 视为分区并将 {date} 视为子分区来在 Hive 中读取此内容？

【问题讨论】：

【解决方案1】：

可以使用 Hive DDL 语句ALTER TABLE ADD PARTITION

ALTER TABLE mydata
ADD PARTITION (country='south-africa', date='20191024')
LOCATION 's3://mydata/south-africa/20191024/';

您可以使用 shell 脚本编写此脚本，并将每个语句传递给 Hive，例如 hive -e 'ALTER TABLE $TABLE ADD PARTITION $PARTITION_SPEC LOCATION $PARTITION_LOCATION'

【讨论】：