Spark 中的第一阶段行动仅由一个执行者运行

Question

我有一个 Spark 程序，以 YARN 作为主机运行，并在客户端模式下运行 3 个执行程序
通过连接器从 ElasticSearch 读取数据，我可以将它们加载到数据框中。 这样的数据帧使用df = df.repartition(3)在三个分区中重新分区。
每当我尝试执行诸如count() 或show() 之类的操作时，第一阶段，从这个线程：Why spark count action has executed in three stages 我理解它是关于读取文件，只有一个任务，它由一个执行程序运行.
此阶段是否预期此行为？我不应该能够与分配的所有执行程序并行运行此阶段吗？

Answer 1

这取决于您的数据的复制。 如果您的数据在更多数据节点上复制，您可能会有更多能够读取的执行器。