hadoop集群中zookeeper的硬件推荐

【问题标题】：Hardware recommendation for zookeeper in hadoop clusterhadoop集群中zookeeper的硬件推荐
【发布时间】：2013-08-14 22:56:34
【问题描述】：

我有一个轻量级的 Hadoop 环境：

2个namenodes(job tracker/HBase Master) + 3个datanodes(tasktracker/HBase Region)

它们都像两个四核CPU + 16-24G内存+总15T

我想知道如果我要选择 3 个动物园管理员，那么动物园管理员的服务器规格是什么样的？谁能分享一些经验？

【问题讨论】：

标签： hadoop apache-zookeeper

【解决方案1】：

来自HBase's perpective -

给每个 ZooKeeper 服务器大约 1GB 的 RAM，如果可能的话，它自己的专用磁盘（专用磁盘是您可以做的最好的事情确保高性能的 ZooKeeper 集成）。对于非常重的负载集群，在不同的机器上运行 ZooKeeper 服务器 RegionServers（DataNodes 和 TaskTrackers）。

-应配置专用磁盘以在事务日志增长时存储快照。

- 需要足够的 RAM 以便它不会交换。

【讨论】：