【问题标题】:Unable to connect to Spark UI on EMR无法连接到 EMR 上的 Spark UI
【发布时间】:2015-11-20 11:20:46
【问题描述】:

我已按照 EMR 控制台上的说明使用 ssh -i ~/SparkTest.pem -ND 8157 hadoop@ec2-52-1-245-67.compute-1.amazonaws.com 设置了我的 SSH 隧道。我也按照说明设置了 FoxyProxy。

我可以访问http://master-public-dns-name:8088/ 上的 Hadoop ResourceManager,并且可以看到我的应用程序正在运行。

单击任何应用程序的主 URL 或任何节点 HTTP URL 会导致“问题加载页面”,SSH 隧道会提供以下输出 channel 2: open failed: connect failed: Connection refused

我应该改用 YARN ResourceManager 吗?我在哪里可以找到这个的 URL?在设置代理和 SSH 隧道时,我是否错过了某个配置步骤?

干杯。

【问题讨论】:

  • 会不会是安全组的问题?

标签: hadoop ssh amazon-ec2 apache-spark amazon-emr


【解决方案1】:

为了 SSH 和获取 Spark UI。试试这个

ssh -i ~/SparkTest.pem -D 8157 hadoop@ec2-52-1-245-67.compute-1.amazonaws.com

这对我有用

【讨论】:

    猜你喜欢
    • 2020-05-10
    • 2016-06-03
    • 2015-10-06
    • 1970-01-01
    • 2017-06-15
    • 2019-10-25
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    相关资源
    最近更新 更多