【发布时间】:2021-09-02 16:07:54
【问题描述】:
我在 Amazon 集群上同时使用 H2O 和苏打水。我一直在使用 Qubole,并且能够访问该平台上的 Flow UI。我目前正在测试 Databricks 和 Sagemaker,但我无法使用任一平台(使用端口 54321)访问 Flow UI。我正在使用 H2O_cluster_version:3.32.1.3。我需要使用其他端口吗?
【问题讨论】:
标签: h2o sparkling-water
我在 Amazon 集群上同时使用 H2O 和苏打水。我一直在使用 Qubole,并且能够访问该平台上的 Flow UI。我目前正在测试 Databricks 和 Sagemaker,但我无法使用任一平台(使用端口 54321)访问 Flow UI。我正在使用 H2O_cluster_version:3.32.1.3。我需要使用其他端口吗?
【问题讨论】:
标签: h2o sparkling-water
由于 DBC 的基本 URL 发生了变化,因此获取正确的 Flow URL 可能会很棘手。 some improvements in more recent releases of SW 在 Databricks 中提供了正确的 URL,因此请务必尝试最新版本。
您应该在创建 H2OContext 时从您的打印/输出中获取它。端口为 9009。如果要更改,可以使用spark.ext.h2o.client.web.port。
您也可以在“Spark UI”->“Sparkling Water”选项卡中找到链接
格式类似于:https://your-dbc-domain/driver-proxy/o/xxxxxxxx/yyyyyyy/9009/flow/index.html
来自docs供参考:
可以通过 H2OContext 后打印的 URL 访问流 开始了。在内部我们使用开放端口 9009。如果你有一个环境 在 Azure Databricks 群集上打开不同的端口时,您 可以通过 spark.ext.h2o.client.web.port 或者相应的配置 设置 H2OConf。
【讨论】: