为什么在 Elasticsearch 中以昂贵的 CPU 方式合并段？

Question

我看到每次ES遇到高CPU问题时，总是Lucene Merge Thread。

据我了解，段已经排序，因此您每次只需合并两个已排序的段，即合并排序的合并过程。为什么合并成本如此之高。还是我错过了什么？

Answer 1

合并过程在 IO 和 CPU 上的开销很大的原因有两个：

1. Lucene 使用Skip list 数据结构，它们的合并成本很高，有一篇关于Skip list merge here 的好文章。
2. 可以同时发生多个并行合并。
3. Lucene 需要创建第三个段并合并这两个段，因此您需要足够的空间。

有一篇关于段合并的好博文here。