如何杀死火花应用程序的火花工作？

Question

我们可以杀死正在运行的 spark 应用程序的一个作业（耗时）并继续下一个作业吗？

让我们说，Spark 应用程序中有 50 个作业，其中一个需要更多时间（可能需要比我们配置的更多的内存），那么我们可以终止该作业并继续下一个作业吗？

然后我们可以稍后使用更高的内存配置运行该作业（触发该作业的操作）

如果这是不可能的，那么如何处理这些情况？

Answer 1

您可以通过以下方式终止正在运行的作业：

• 打开 Spark 应用程序 UI。
• 转到 jobs 选项卡。
• 在正在运行的作业中查找作业。
• 点击kill链接并确认。