【问题标题】:Regarding Hadoop failure and new HBase?关于 Hadoop 故障和新的 HBase?
【发布时间】:2015-01-21 23:03:33
【问题描述】:

我有两个问题:

1. Is NameNode still single point of failure in Hadoop YARN or new version of Hadoop e.g. 2.5?

Hadoop 中的单点故障是什么?

2.  I saw Facebook is using HydraBase. Is HydraBase new version Hbase or is it new DBMS similar to Hbase?

HydraBase 有 Apache 版本还是开源的?

谢谢!

【问题讨论】:

    标签: hadoop hbase


    【解决方案1】:

    回答你的第一个问题:

    单点故障是系统的一部分,如果发生故障,整个系统将不可用。通过在所有潜在的 SPOF 中添加冗余可以避免 SPOF。

    HDFS 和 YARN(MR2) 是 Hadoop 的核心组件,在 HDFS 中 namenode 是 SPOF,但是随着 Namnode HA(2 namenodes 一个 active 和一个 standby)namenode 的引入,namenode 不再是 SPOF。您可以在 Hadoop 2.5 中配置 Namenode HA

    在 YARN 中,资源管理器是 SPOF,但 HA 可以为 Hadoop 版本 2.3 及更高版本配置。

    回答第二个问题

    Hydrabase

    Hydrabase 是 Hbase 的增强版本,但这将是一个单独的 NOSQL 保护。

    HydraBase 比 HBase 更好的地方在于,它被认为是一个更可靠的数据库,可以在服务器发生故障时最大限度地减少停机时间。如果一个区域服务器出现故障,它所托管的所有区域都必须迁移到另一个区域服务器。据 Facebook 称,虽然 HBase 具有自动故障转移功能,但实际发生可能需要很长时间。

    到目前为止,Hydrabase 不是开源的,但是 facebook 将在 Apache Projects(开源)下发布它。它的apache版本将在5个月后发布,请访问site了解确切的发布日期

    【讨论】:

    • 那么当前最新的Hadoop有单点故障吗?
    • Hadoop 2.5 中的 HDFS、YARN、MR1 没有 SPOF
    猜你喜欢
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 2012-01-08
    • 1970-01-01
    • 2016-07-14
    相关资源
    最近更新 更多