【发布时间】:2015-02-10 20:17:12
【问题描述】:
我处理了一些日志,然后我会将这些信息存储在 hive 的表中。我将在几周内进行分区,所以在第一周我有 7 个文件(每天一个)。那么如果我想知道某个人一天做什么,这个分区可以帮助我吗?或者不是因为我不每周搜索
谢谢!
【问题讨论】:
标签: hadoop logging hive partition
我处理了一些日志,然后我会将这些信息存储在 hive 的表中。我将在几周内进行分区,所以在第一周我有 7 个文件(每天一个)。那么如果我想知道某个人一天做什么,这个分区可以帮助我吗?或者不是因为我不每周搜索
谢谢!
【问题讨论】:
标签: hadoop logging hive partition
通过在 WHERE 子句中指定星期,它将帮助您将搜索的数据限制在特定的星期。您可以在日期(或星期几)创建第二个分区,让您可以选择限制为一周或一周/日期。在加载过程中打开动态分区可以使这些分区的创建更加容易。
【讨论】:
您可以为 day 而不是 week 创建分区。这对在同一天搜索一个人有很大帮助。
【讨论】: