Solr 为不同的集合缩放多个实例和分片或多个 solr

Question

我是 solr 的新手，并且有一些缩放案例。我计划在 solr 中收集 2 个集合并计划对其进行扩展

• 歌曲集（主要用于搜索）。目前约 2000 万条数据，每天索引 10 万条数据
• 流量收集（主要用于稍后分面），目前约 1 亿数据，每天索引 1 百万数据

目前我有 3 个 solrcloud 与 zk 连接，并且由于流量收集的索引数据过多而导致 solr 关闭的情况很少见。

哪一个对性能都有好处，而且服务器只有 3 个服务器，每个是 32x3GB RAM 和 16 核（共享）

• 使用多个实例部署 solrcloud，即我有 6 个 solr 与 zk 连接
• 部署多个 solrcloud 和分离的集合，
  • 3 solr with zk 仅用于歌曲收藏
  • 另外 3 个带有 zk 的 solr 仅用于流量收集（这个与前一个分离的 solr）

或者任何其他解决方案。

Answer 1

您应该考虑在可管理的范围内保持单个集群。但是您可以改进处理流量收集的方式（歌曲收集听起来不错）：

• 以这种速度，最终对于单个集合来说太大了
• 显示为什么不在每日/每周/或每年的集合中索引流量？
• 您的集合将保持可管理的大小，并且在查询时您的效率会更高，因为您无需查询整个历史记录，只需查询最后一天、上个月等

这是一个非常频繁的设置。