elasticsearch - elasticsearch需要多少堆内存？

Question

我在每个数据节点中有 8 个节点集群（3Master+3Data+2Coordinate）堆大小为 10gb，磁盘空间为 441gb，每天总计 1.2TB 我每天有 32.73GB 数据为 11 个索引创建 26 个分片。所以让假设保留期为 30 天。在第 30 天，集群上的数据为 982GB，总分片为 780，每个节点得到 260 个分片。所以平均分片大小为 260mb（大约）。我阅读 了这个文档，一个节点30gb 的堆大小可以处理 600 个分片。所以问题是 10gb 的堆大小可以处理 260 个分片吗？.

标签： elasticsearch

Answer 1

您阅读的这篇文章可以被认为是一个很好的一般性建议，但有多种因素会影响它，如索引大小、分片大小、文档大小、磁盘类型、系统上的当前负载等等，在在同一个文档中，您会注意到建议的分片大小在 10 到 50 GB 之间，而您的分片大小非常小（您提到的 260 MB），因此基于此，我可以说 10GB 堆可以轻松处理您的情况下的 260 个分片，尽管您应该对集群进行基准测试并阅读更多关于 ES 如何在内部存储数据并搜索它们的信息，以便您轻松对其进行微调。