是否有一种通过 crateDB 中的非分区列进行搜索的高效方法？

Question

在过去的几年里，我和我的团队一直在为我们的一个项目使用 crate。我们有一张包含数亿条记录的表，性能是关键。

随着我们在这个项目上开发越来越多的功能，我们遇到了有趣的问题。我们在这个表上有一个标记为“persist_date”的列，这是记录实际保存到表中的时间。这些日期可能并不总是一致，我们的 start_date 可能是 2021-06-21，persist_date 是 2021-10-14。

到目前为止，我们所有的查询都可以轻松地添加针对 start_date 的分区。现在我们遇到了一个问题，需要我们使用非分区列（persist_date）来查询。

据我了解，crateDB 确实非常高效，但仅当您一次查询 1 个特定分区时才可以。我现在的问题是如何在不重复数据的情况下为其他日期列创建分区？除了分区之外还有什么可能有帮助的，比如表的集群方式？

Answer 1

您可以将两列都用作分区值。 例如

CREATE TABLE two_parted (a TEXT, b TEXT, val DOUBLE) PARTITIONED BY (a,b);

如果在选择中使用a 或b，这会将查询限制为具有任一值的分片。但是，这可能会导致更多的分片，因此您可能希望不是每天，而是每周或每月进行分区。