【问题标题】:How do I initialize a CuratorFramework for a ZooKeeper cluster with dynamic size?如何为具有动态大小的 ZooKeeper 集群初始化 CuratorFramework?
【发布时间】:2019-09-24 02:45:41
【问题描述】:

我刚刚在独立模式下使用 Apache Curator 和 ZooKeeper 实现了分布式锁。 我将 CuratorFramework 初始化如下:

CuratorFramework client = CuratorFrameworkFactory.newClient("localhost:2182", retryPolicy);

一切正常,所以我尝试在集群模式下使用 ZooKeeper。我启动了三个实例,并将 CuratorFramework 初始化如下:

CuratorFramework client = CuratorFrameworkFactory.newClient("localhost:2182,localhost:2182,localhost:2183", retryPolicy);

如您所见,我只是添加了两个新节点的地址。 到目前为止一切顺利。
但是当我不知道每个节点的地址分别是集群的大小时,我该如何初始化客户端,因为我想动态扩展它?
我可以通过仅指定将始终启动的第一个节点的地址来初始化它。但如果该节点出现故障,Curator 将失去与整个集群的连接(我刚刚尝试过)。

【问题讨论】:

  • 如果我没记错的话,curator 可以找到可用的 zookeeper 节点。

标签: java apache-zookeeper distributed-system apache-curator


【解决方案1】:

您应该始终知道您的 Zookeeper 实例在哪里。当你不知道它在哪里时,就无法连接到它——你怎么能?

如果您可以连接到任何实例,您可以获得配置详细信息并定期轮询它以使您的连接详细信息保持最新,也许?

也许看看https://zookeeper.apache.org/doc/r3.5.5/zookeeperReconfig.html#ch_reconfig_rebalancing

【讨论】:

    【解决方案2】:

    CuratorFrameworkFactory 具有a builder,允许您指定EnsembleProvider 而不是connectionString 并包含EnsembleTracker。这将使您的connectionString 保持最新状态,但您需要以某种方式持久保存数据,以确保您的应用程序在重新启动时能够找到集合。我建议实现一个装饰 EnsembleProvider 封装 FixedEnsembleProvider 并将配置写入属性文件。

    例子:

    EnsembleProvider ensemble = new MyDecoratingEnsembleProvider(new FixedEnsembleProvider("localhost:2182", true));
    CuratorFramework client = CuratorFrameworkFactory.builder()
        .ensembleProvider(ensemble)
        .retryPolicy(retryPolicy)
        .ensembleTracker(true)
        .build();
    

    【讨论】:

    • 这显然不适用于 2021 年 3 月 12 日的 5.1.0 版。我需要它,所以我正在调查修补它。敬请期待。
    猜你喜欢
    • 2015-11-21
    • 2016-06-13
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 2017-02-23
    • 1970-01-01
    • 2019-05-19
    • 1970-01-01
    相关资源
    最近更新 更多