在 Ubuntu 14.04 上手动安装 Hadoop 多节点集群

Question

我是 Hadoop 的新手。对于我的大学项目，我们获得了 4 个虚拟机。我需要在此（1 主 3 从）上配置多模式 Hadoop 集群并在其上运行我的 webapp。我将在我的项目中使用 HBase。通常 CentOS 用于 HDP 的安装和部署，而我使用的是 ubuntu。我无法使用 Apache ambari 插件进行安装，因为 Ubuntu 不支持它。我需要手动部署它们，因此我尝试寻找教程。 我寻找了在 ubuntu 上安装 HDP 多节点集群的教程，发现了这个 [http://www.michael-noll.com/tutorials/running-hadoop-on-ubuntu-linux-multi-node-cluster/] 但它太过时了（2010 年）
我在这里有官方文档，但我无法正确遵循它。
[http://docs.hortonworks.com/HDPDocuments/HDP2/HDP-2.1-latest/bk_installing_manually_book/content/rpm-chap2-3.html] 我试着关注他们。

有人可以建议我一些最新的链接，一个包含大量屏幕截图的教程，用于在 Ubuntu 14.04 上安装多节点集群（12.04 也可以）。

非常感谢！！

Answer 1

我认为 Michael Noll 的教程太旧了。我找到了这个网站：

• https://www.digitalocean.com/community/tutorials/how-to-install-hadoop-on-ubuntu-13-10

我的大学实验室中有一个小型集群（有 5 个从属设备和一个主设备）。 Ubuntu 12.04 和 Hadoop 2.5.0 就在那里。此外，我在 Ubuntu 12.04 上的 Hadoop 1.2.1 笔记本电脑（2 个从属和一个主控）中也有一个 VM 集群。

但我无法在 Ubuntu 14.04 中安装 Hadoop（任何版本）。我不记得原因，但我认为这是 Java 版本的问题（我不检查）。

希望对你有帮助！

Answer 2

我可以在 Ubuntu 14.04 上安装 HDP 2.2 时遇到同样的问题，并找到了解决方案。 我在这里记录了所有内容：http://www.swiss-scalability.com/2014/12/install-hdp-22-on-ubuntu-1404-trusty.html

简而言之，魔法发生在这里：

sed -e "s/14.04/12.04/g" -i /etc/*-release

并且你可以安装或者重启ambari-agent，它就可以和ambari-server通信了。