C# Web API - 在内存缓存中存储和持久化数据

Question

我正在编写一个 REST API，它需要提供与我组织的 ActiveDirectory 的集成服务，专门用于查询用户和组数据，然后在 API 中提供一个端点以进行自动完成字段查询。

我的组织的 ActiveDirectory 非常大，总共有大约 130K 用户和组对象。

查询所有这些对象并将它们存储在我们当前的后备存储 (MongoDB) 中大约需要 40 分钟。

我们决定检查是否存在跳过使用 Mongo 并将所有查询的 AD 对象存储在 Web API 内存中的选项。

查看 SO 中的其他问题，我意识到 Singleton 不起作用，因为每次重置 IIS 应用程序池时存储在其中的数据都会丢失，然后 API 大约 40 分钟无法提供数据，这可以不会发生。

我还查看了this 问题，它指的是命名空间System.Runtime.Caching。但是命名空间提供的MemoryCache 也会在重置 IIS 应用程序池时丢失其所有数据。

我的问题是 - 是否有任何其他解决方案可以将来自 AD 的数据存储在 Web API 内存中。我们目前希望避免使用持久存储（关系数据库或文档数据库）来保存信息，但如果没有出现可行的解决方案，我们可能会坚持使用 Mongo（除非提供更好的存储）。

Answer 1

从可扩展性的角度来看，In-Memory 听起来像是一个糟糕的计划。如果您想对 API 进行负载平衡，您可能会在内存中拥有此数据的多个副本，但是当您的一个 API 实例处理请求或另一个实例时，它们都可能略有不同，从而导致不同的结果。

In-Memory，可能推断出一个列表，或者更好的是一个字典。您可以考虑支持多个节点的 Redis 服务器，并将数据存储在内存中。它类似于字典，因为您将键值对存储为<string, string>。您的所有 API 实例都可以指向同一个 Redis 集群，这样您就可以获得一致性、规模和性能。

您还可以考虑具有特殊集合的 Service Fabric，它允许您在有状态和无状态服务之间共享状态。与 Redis 一样，数据在 Service Fabric 群集中被序列化和存储。它的容错性很强，内置了 HA 和 DR。

在性能方面没有什么能比单例词典更好，所以这取决于您现在和将来需要什么。