【问题标题】:How to disable SparkUI programmatically?如何以编程方式禁用 SparkUI?
【发布时间】:2016-02-19 20:26:33
【问题描述】:

我注意到这个错误已被修复:

允许用户在本地模式下禁用 Jetty Spark UI

https://issues.apache.org/jira/browse/SPARK-2100

但是如何以编程方式禁用它?

是不是

sparkContext.setLocalProperty(?, ?)

我查看了文档,但无法确定要设置哪个属性

http://spark.apache.org/docs/latest/configuration.html#spark-ui

【问题讨论】:

    标签: apache-spark


    【解决方案1】:

    spark.ui.enabled 设置为false。此配置没有记录在 Spark 的配置页面上,因为它是作为用于调试和单元测试的内部配置添加的 [1]。

    使用 spark-submit,您可以简单地 --conf spark.ui.enabled=false

    [1]https://github.com/apache/spark/pull/2363/files#r17436782

    【讨论】:

      猜你喜欢
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2014-03-05
      • 2011-08-11
      • 2010-10-15
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      相关资源
      最近更新 更多