【发布时间】:2015-06-24 22:32:22
【问题描述】:
我很难理解 Zookeeper Hadoop 框架。我发现 Zookeeper 的主要方面令人困惑的是理解它如何处理其节点之间的一致性,以及它如何利用其分布式内存文件系统来处理协调?对这些要点的任何帮助都会很棒。
【问题讨论】:
-
Zookeeper 与 Hadoop 无关。这是 2 项独立的技术。
标签: hadoop bigdata nodes apache-zookeeper
我很难理解 Zookeeper Hadoop 框架。我发现 Zookeeper 的主要方面令人困惑的是理解它如何处理其节点之间的一致性,以及它如何利用其分布式内存文件系统来处理协调?对这些要点的任何帮助都会很棒。
【问题讨论】:
标签: hadoop bigdata nodes apache-zookeeper
正如@Yann 所说,Zookeeper 与 Hadoop 无关。 Zookeeper 是服务的协调引擎。有了它,您可以创建可分发的配置、服务发现、领导者选举以及其他功能。
我建议您阅读此post 以了解它如何用于负载平衡,以及此other 用于服务发现。其他值得阅读的好资源是 Apache Curator,它是一个框架,可以轻松地将 Zookeeper 与 Java 或任何其他 JVM 语言一起使用
【讨论】: