【问题标题】:How to install Hadoop 3 on AWS EMR?如何在 AWS EMR 上安装 Hadoop 3?
【发布时间】:2019-02-25 03:19:40
【问题描述】:

Hadoop 3 已经 15 个月大了,EMR 官方发布标签仍然只支持 Hadoop 2。

我找不到有关如何在 EMR 上设置 Hadoop 3.1.2 的快速文档。大多数人不使用它吗?似乎比应该的更困难,我错过了什么?

【问题讨论】:

  • 目前不支持,恐怕你卡在2了。
  • EMR 不能以这种方式工作。您只会获得亚马逊为您安装的那些版本。

标签: amazon-web-services hadoop amazon-emr hadoop3


【解决方案1】:

作为 EMR6-beta 版本的一部分,EMR 确实在 9 月推出了对 hadoop 3.1 的官方支持。[1] 此外,它还支持 Amazon Linux 2 和 Amazon Corretto JDK 8。

[1]EMR6-beta:https://aws.amazon.com/about-aws/whats-new/2019/09/simplify-your-spark-application-dependency-management-with-docker-and-hadoop-3-with-emr-6-0-0-beta/

【讨论】:

    猜你喜欢
    • 1970-01-01
    • 2022-10-22
    • 2020-08-12
    • 2020-06-28
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 2020-06-22
    相关资源
    最近更新 更多