【问题标题】:Recommended AWS EC2 instance type for Zookeeper?推荐用于 Zookeeper 的 AWS EC2 实例类型?
【发布时间】:2020-03-29 03:57:10
【问题描述】:

您对部署在 aws 上的 zookeeper 的实例类型有什么建议吗? 顺便说一句,我主要将 Zookeeper 用于 ClickHouse,这意味着 zookeeper 用于传输元数据和记录事物(带有 autopurge 设置)。

【问题讨论】:

    标签: amazon-web-services instance apache-zookeeper clickhouse


    【解决方案1】:

    不要使用硬盘。 EBS GP2 没问题。

    正常的 ZK 工作至少需要 4GB(每天没有 OOM)——EC2 a1.large/c4.large(交换 16GB)

    ZK 是内存数据库。因此,如果您的 ZK DB(快照)为 100MB,那么如果它更大,则 4GB 就可以了,您需要更多内存。 所以 EC2 large 或 xlarge。

    【讨论】:

    • 非常感谢。如果您能告诉我 clickhouse 节点的推荐实例类型,我们将不胜感激。
    • 这取决于数据大小、查询和响应时间要求。 CH喜欢记忆。它需要 8GB 的​​最小量生产(带交换)。一个真正的大数据(每天数十亿行进入宽表——数百列)至少需要 64GB。使用 c4.xlarge 和每周数据创建 POC,如果还不够,请扩展实例。使用 EBS GP2。
    • 顺便说一句,我在 设置中指定了一个负载均衡器主机/端口,并让它选择连接到 3 个实际的 Zookeeper 节点,或者只指定 3 个实际的 Zookeeper 节点域 设置。你认为哪种方式更好?谢谢^^
    • 我使用一个 dns 名称(带有 3 个 ip / 3 个 zk 服务器)。从来没有任何问题。使用了所有 3 个 ZK 服务器。 ``` zoo12181 ```
    猜你喜欢
    • 2015-10-27
    • 1970-01-01
    • 2015-11-01
    • 1970-01-01
    • 2023-04-01
    • 1970-01-01
    • 2020-08-03
    • 1970-01-01
    • 1970-01-01
    相关资源
    最近更新 更多