【问题标题】:Spark UI available on Dataproc Cluster?Dataproc 集群上是否提供 Spark UI?
【发布时间】:2017-10-30 02:55:00
【问题描述】:

希望与 Dataproc 中默认集群上的传统 Spark Web GUI 进行交互。

【问题讨论】:

    标签: apache-spark pyspark google-cloud-dataproc


    【解决方案1】:

    这可以通过创建到 Dataproc 主节点的 SSH 隧道来完成。通过使用 SOCKS 代理,您可以访问在 YARN 上运行的所有应用程序,包括您的 Spark 会话。

    本指南将详细介绍: Dataproc Cluster web interfaces

    【讨论】:

      猜你喜欢
      • 1970-01-01
      • 2017-10-06
      • 2016-04-19
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2020-01-31
      • 2020-09-16
      • 2019-01-28
      相关资源
      最近更新 更多