今天在给 Executor 配置环境变量的时候,以为 Executor 环境变量跟 Driver 一样是通过 spark.kubernetes.driverEnv.XXX=YYY,最后发现其实是 spark.executorEnv,要注意 Env 的大小写,都是细节…
可以看到下图,其实 Spark on Kubernetes 的文档,并没有写,所以 Executor 环境变量就是普通的参数即可。
【Spark on Kubernetes】Executor环境变量
【Spark on Kubernetes】Executor环境变量

相关文章:

  • 2021-11-30
  • 2022-01-25
  • 2021-09-17
  • 2022-12-23
  • 2022-12-23
  • 2021-11-18
  • 2021-09-11
  • 2021-07-09
猜你喜欢
  • 2022-12-23
  • 2022-12-23
  • 2022-12-23
  • 2022-12-23
  • 2022-01-20
  • 2021-09-22
  • 2022-01-06
相关资源
相似解决方案