【问题标题】:Not able to spin up Amazon EMR cluster with custom hive-site无法使用自定义配置单元站点启动 Amazon EMR 集群
【发布时间】:2017-01-30 08:50:46
【问题描述】:

我正在按照本教程中的说明启动集群。

http://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-dev-create-metastore-outside.html

它不工作并且失败并出现错误“引导失败”。但我也没有在任何日志中看到任何错误。这让我很难调试。

我的 mySQL 数据库用于 RDS 中的元数据,它也处于活动状态。日志文件夹没有任何错误。不知道本教程是否完整?

【问题讨论】:

  • 您好,很抱歉您遇到了这个问题。我来自 EMR 团队,如果您能够提供其中一个失败的集群的集群 ID,我可以为您调查根本原因。
  • j-3I7MISI0D159Z
  • 谢谢。我看到的是集群在配置时超时,因为它无法连接到您的外部 RDS 实例。也许您的安全组设置需要修改(如您链接到的那个页面中所述)?
  • 我错过了错误信息吗?我现在将更改安全组并尝试一下。但是如果显示错误会很有帮助,因为它会节省我很多时间。
  • 不幸的是,您没有遗漏任何东西。由于集群失败的方式(实际上是超时),传播回给您的唯一错误消息是集群失败。对于此时给您带来的不便,我们深表歉意,但正在进行的项目可以使某些类型的故障更容易调试。

标签: amazon-web-services hive amazon-emr


【解决方案1】:

在向 EMR 安全组提供 RDS 安全组访问权限后,它可以工作,反之亦然。

【讨论】:

    猜你喜欢
    • 1970-01-01
    • 2014-12-06
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 2018-01-01
    • 2016-02-19
    • 1970-01-01
    • 1970-01-01
    相关资源
    最近更新 更多