Spark 数据框到 R 数据框

【问题标题】：Spark Dataframe to R dataframeSpark 数据框到 R 数据框
【发布时间】：2021-11-11 12:10:54
【问题描述】：

我正在尝试将 Spark Dataframe 转换为 R dataframe。有什么办法吗？

我尝试先使用 .toPandas() 将其转换为 pandas 数据帧它正在工作，但再次使用 as.data.frame() 从 Pandas 到 R 数据帧不起作用

有人可以帮我解决这个问题吗

【问题讨论】：

【解决方案1】：

您可以使用collect 来完成此操作-

%r

library(SparkR)

sparkR <- collect(sparkR_DF)

【讨论】：