【问题标题】:how does cloudera Impalad instance works?cloudera Impalad 实例如何工作?
【发布时间】:2014-01-23 16:09:48
【问题描述】:

我正在使用 cloudera impala,我在一台机器上启动了 statestore,在所有机器节点上启动了 imapalad 实例。 ipalad 和 statestore 的每个实例如何知道所有其他 impalad 实例在查询时分配负载。我已经设置了配置,但我没有在哪里为他们指定数据节点列表。

谢谢。

【问题讨论】:

    标签: hadoop hive bigdata cloudera impala


    【解决方案1】:

    Statestore(running as statestore) 执行以下操作:

    1. 检查集群中所有节点的健康状况,并不断将信息传递给所有恶魔(impalad)
    2. 只有一个 statestore 就足够了。
    3. 如果没有可用的statestore,恶魔仍然可以工作,但集群变得不那么健壮了。
    4. statestore重新上线时,它会重新建立与其他节点的连接并恢复其监控功能。

    【讨论】:

    • 每个 impalad 如何知道在所有 impalad 之间分发查询所需的其他 impalad 位置 cos..
    【解决方案2】:

    有关 Impala 工作原理的信息,请参阅 this

    如果您想在 impala 实例之间平衡负载,您可以通过引入负载平衡器来实现。

    【讨论】:

    • impala中分配的数据在哪里?
    • @johnsam 我知道你的问题“impala 中的数据分配在哪里?”请详细说明..
    猜你喜欢
    • 2013-04-05
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 2012-09-20
    • 2018-09-15
    • 1970-01-01
    相关资源
    最近更新 更多