【问题标题】:Commands in Sparklyr (R Studio)Sparklyr (R Studio) 中的命令
【发布时间】:2017-04-09 04:02:55
【问题描述】:

sdf_register和sparklyr中的copy_to命令有什么区别?

你什么时候使用每个命令?

【问题讨论】:

    标签: r apache-spark sparklyr


    【解决方案1】:

    sdf_register 是 Spark 特有的函数,它在 Metastore 中注册 SparkDataFrame 它不涉及数据复制,用于 Spark 互操作。

    copy_to本地数据复制到 Spark。如果与SparkDataFrame 一起使用,它将收集并放回 Spark。

    【讨论】:

      猜你喜欢
      • 2017-02-20
      • 2018-10-29
      • 1970-01-01
      • 1970-01-01
      • 2019-03-23
      • 1970-01-01
      • 2014-03-30
      • 1970-01-01
      • 1970-01-01
      相关资源
      最近更新 更多