如何确定每个节点的Solr云分片？

Question

我们有16个64 GB的RAM，4个核心机器。索引大小约为200 GB。最初，我们决定使用64个分片，即每个节点4个分片。我们每个节点有4个分片，因为我们有4个核心机器(4个核心可以一次处理4个分片)。当我们测试查询的qtime时，qtime是相当高的。我们在精简的分片上重新运行了性能测试。一个为32个分片(每个节点2个分片)和16个分片(每个节点1个分片)。16个分片的qtime急剧下降(降幅高达90%)。那么如何确定每个节点的分片数呢？是否有基于机器配置和索引量的公式？

Answer 1

您需要检查的另一件事是发送到Solr的查询的类型和数量。没有一个神奇的公式可以使用，我最好的建议是只测试几个不同的替代方案，看看哪一个表现最好。

需要记住的一件事是每台服务器的JVM大小和索引大小。我想如果你能在每个盒子的内存中缓存整个索引就好了。

此外，请确保使用实际运行的查询测试查询响应时间，而不仅仅是虚构的查询。像分组和分面这样的东西将产生巨大的不同。