【问题标题】:How to configure Xmn for Spark executor如何为 Spark 执行器配置 Xmn
【发布时间】:2018-01-16 16:46:54
【问题描述】:

在 Spark GC Tuning (https://spark.apache.org/docs/latest/tuning.html#garbage-collection-tuning) 的文档中,它说当 Minor GC 太多时使用选项 -Xmn 增加年轻代。我试过把它放在“spark.executor.extraJavaOptions”中,但不起作用。我应该在哪里配置这个 JVM 设置?

【问题讨论】:

    标签: performance apache-spark garbage-collection jvm executor


    【解决方案1】:

    其实,这是一场虚惊。它适用于以下配置 spark.executor.extraJavaOptions="-Xmn1g -verbose:gc -XX:+UseParallelGC -XX:+PrintGCDetails -XX:+PrintGCTimeStamps -XX:+PrintTenuringDistribution"

    【讨论】:

      猜你喜欢
      • 2020-07-19
      • 2015-05-18
      • 2014-11-27
      • 1970-01-01
      • 2017-02-20
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      相关资源
      最近更新 更多