【发布时间】:2015-10-18 02:12:49
【问题描述】:
是否每个 jdbc 连接到 apache spark thrift 服务器都会创建一个单独的 spark 上下文?如果答案是“否”,如何为每个 JDBC 连接创建单独的 spark 上下文。
【问题讨论】:
-
一般来说,Spark 每个 JVM 只支持一个 SparkContext。见SPARK-2243。
标签: apache-spark
是否每个 jdbc 连接到 apache spark thrift 服务器都会创建一个单独的 spark 上下文?如果答案是“否”,如何为每个 JDBC 连接创建单独的 spark 上下文。
【问题讨论】:
标签: apache-spark
thrift 服务器中的 Spark 上下文只是其中之一。 Spark Thrift 服务器不适合高并发应用访问。
【讨论】: