Spark 应用程序继续运行并且似乎挂起 - org.apache.spark.sql.hive.thriftserver.HiveThriftServer2答案

【问题标题】：Spark Application keeps on RUNNING and seems HANGING - org.apache.spark.sql.hive.thriftserver.HiveThriftServer2Spark 应用程序继续运行并且似乎挂起 - org.apache.spark.sql.hive.thriftserver.HiveThriftServer2
【发布时间】：2017-09-17 19:19:26
【问题描述】：

我在 Hadoop 集群中使用 HDFS 2.7.3 和 Spark2 2.0.0。当我启动 Spark2 Thrift Server 时，它成功启动，但自动从 Hive 用户开始运行作业，它似乎永远挂起。如果我手动终止该作业，它会再次使用新的 applicationId 启动一个新作业。

但如果我停止 Spark2 Thrift 服务器，它就会终止工作。你能帮我理解这个问题吗？

提前致谢。

【问题讨论】：

标签： hadoop apache-spark hadoop-yarn ambari

【解决方案1】：

我也遇到和你一样的问题，spark 2.0 thriftserver 模块不稳定，最好升级到spark 2.1

【讨论】：