SnappyData - 配置流式作业火花设置

Question

我可以看到在创建流式应用程序时如何配置 SparkConf (see here)

我假设我可以通过 SnappyStreamingContext 为类似于流应用程序的流作业配置 SparkConf。假设我在流式作业中获得了 SparkConf 的句柄并修改了一些设置。这些设置是否仅适用于该流式传输作业，还是适用于所有作业的全局配置更新？

谢谢！

Answer 1

是的，您可以通过 SnappyStreamingContext 为流式作业配置 SparkConf，它与 Spark 流式配置相同。由于 SparkConf 是一个全局配置，它适用于流式应用程序中的所有作业。我认为 Spark 不允许您在启动应用程序后更改 SparkConf。