【问题标题】:memsql data inflation during recovery恢复期间的 memsql 数据膨胀
【发布时间】:2016-05-18 14:14:42
【问题描述】:

在叶恢复期间,我们数据库中的数据膨胀了几乎是原始大小的 50 倍。如果我们运行“显示数据库扩展;”在每个叶子上,我们可以看到数据库每个分区的大小从 ~40Mb 到 ~2000Mb(仅在恢复期间)。恢复后会恢复到原来的大小。

我们托管了一个 80Gb 的数据库,但由于需要大量内存,memsql 无法恢复。我们必须删除这个数据库才能让 memsql 再次工作。

有没有办法阻止数据膨胀导致恢复过程崩溃?似乎 memsql 应该能够托管 80Gb。

我们有一个聚合器和 5 个叶子,每个叶子都有 ~30Gb 内存和 ~400Gb 磁盘。

编辑: 升级到 5.0.8 版本后这个问题消失了

【问题讨论】:

  • 出于好奇,在叶子重新启动之前,集群上运行着什么样的工作负载?更新和/或删除是否繁重?还是主要是插入和选择?
  • 主要是插入和选择。当我们托管 80Gb 时,每片叶子都会出现这个问题,即使在重新启动之间没有工作负载。它发生在我们现在托管的 15Gb 的大约一半时间。

标签: singlestore


【解决方案1】:

您可以尝试为数据库创建快照 (http://docs.memsql.com/docs/snapshot-database)。如果有大量数据被更新/删除,这可能会有所帮助。

【讨论】:

  • 仅供参考,默认升级过程的一部分是对所有数据库进行快照,这可能是升级后问题消失的原因。
猜你喜欢
  • 1970-01-01
  • 2021-10-12
  • 2018-09-26
  • 2014-07-25
  • 1970-01-01
  • 2015-04-27
  • 1970-01-01
  • 1970-01-01
  • 2017-01-08
相关资源
最近更新 更多