Google App Engine Datastore 200 索引限制 (index.yaml)

Question

使用：Google App Engine、Python 2.7、Google NDB Datastore、GQL。

我编写了一个具有多种 NDB 类型的业务应用程序（ndb.Model） 例如：客户、供应商、供应商、制造商、订单等。

我喜欢向用户展示按各种实体/字段排序的信息：

示例：index.yaml - 客户类可能有 12-15 个索引文件条目。

- kind: Customers
  - properties:
  - name: Name
  - name: NewDate
  - direction: desc
- kind: Customers
  - properties:
  - name: State
  - name: Name
- kind: Customers
  - properties:
  - name: Country
  - name: Name
- kind: Customer
  - properties:
  - name: Code
  - name: Name
  - name: Class
  - name: LastOrderDate
  - direction: desc

只是一个例子，但我喜欢有大约 20-30 个 NDB 类型（ndb.Model），每个类型大约有 15 个复合索引。如果我遇到 200 个限制，我想确保我有一个解决方法。

不确定为什么 Google 会将其限制为 200，我认为该限制应该是每个 NDB 种类（ndb.Model）可能 20 个？

感谢您的建议

Answer 1

您需要重新考虑您的数据模型。您的主要问题不是 200 个索引的限制。如果您实施您正在考虑的模型，您的索引将占用比您的数据多很多倍的存储空间，并且您的写入成本将是天文数字。

每次保存数据对象时，都会产生每个实体加上每个索引属性加上每个自定义索引的写入成本。使用您的数据模型，每次更新每个实体时，您最终需要多支付 15-20 倍的费用。

您可能有使用 SQL 数据库的经验，但数据存储区非常不同。您必须对数据进行不同的建模。

我构建了一个非常复杂的应用程序，其中包含几十个不同的实体，它们之间的关系非常复杂。我在这个应用中有 5 个自定义索引。

编辑：

在非关系型数据库中有多种数据建模方法。让我们以您的“名称和州”索引示例为例。有多少客户将有相同的名字，但在不同的州？检索具有给定名称的所有客户，然后选择属于所需状态的客户要便宜得多，而不是仅为这种属性组合创建自定义索引。请记住，读取比写入便宜得多，而且您的数据量更小。

这同样适用于您的所有示例。您可以按姓名和订单日期选择所有客户，而不是“代码 AND 名称 AND 类别 AND LastOrderDate”，在极少数情况下，当两个客户名称相同时，只需删除具有错误代码/类别的那个。