【问题标题】:What is interpreter-aware SparkContext什么是解释器感知 SparkContext
【发布时间】:2021-10-31 18:03:58
【问题描述】:

在 spark 文档中,提到了一行

在 Spark shell 中,已经在名为 sc 的变量中为您创建了一个特殊的解释器感知 SparkContext。

参考:https://spark.apache.org/docs/latest/rdd-programming-guide.html

interpreter-aware SparkContext 在这里是什么意思?

【问题讨论】:

    标签: apache-spark


    【解决方案1】:

    您可以使用 python 或 scala 运行 spark-shell。 spark上下文知道是哪一个。因为它是交互式的,所以有一个口译员。这是一个常见的计算概念,仅此而已。

    【讨论】:

      猜你喜欢
      • 1970-01-01
      • 2011-02-20
      • 2017-04-01
      • 1970-01-01
      • 2017-11-10
      • 2015-03-31
      • 2016-11-29
      • 2017-02-01
      • 2019-10-29
      相关资源
      最近更新 更多