【发布时间】:2020-10-14 05:56:51
【问题描述】:
我在 Kubernetes 集群上部署了 Zeppelin (0.8.2),并且在容器中打包了 Spark (2.4.0) 二进制文件。然后我将$SPARK_HOME设置为Spark安装目录。 spark解释器似乎可以工作,但是当我尝试更改serviceAccount时,它仍然使用default。
这是我基于Spark 2.4.0 docs尝试的配置:
spark.kubernetes.authenticate.driver.serviceAccountName <my_serviceAccount>
spark.kubernetes.authenticate.serviceAccountName <my_serviceAccount>
我尝试通过$SPARK_SUBMIT_OPTIONS、Zeppelin Interpreter Settings 和spark-defaults.conf 进行设置,但它们都给出了相同的结果。我错过了什么吗?
任何帮助将不胜感激。谢谢!
【问题讨论】:
标签: apache-spark kubernetes apache-zeppelin