【问题标题】:Spark context for the thrift server节俭服务器的 Spark 上下文
【发布时间】:2015-10-18 02:12:49
【问题描述】:

是否每个 jdbc 连接到 apache spark thrift 服务器都会创建一个单独的 spark 上下文?如果答案是“否”,如何为每个 JDBC 连接创建单独的 spark 上下文。

【问题讨论】:

  • 一般来说,Spark 每个 JVM 只支持一个 SparkContext。见SPARK-2243

标签: apache-spark


【解决方案1】:

thrift 服务器中的 Spark 上下文只是其中之一。 Spark Thrift 服务器不适合高并发应用访问。

【讨论】:

    猜你喜欢
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 2016-08-03
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 2020-09-11
    相关资源
    最近更新 更多