【问题标题】:Write to google compute instance using apache spark使用 apache spark 写入谷歌计算实例
【发布时间】:2018-07-14 06:57:53
【问题描述】:

我有一个 4 节点 hadoop 集群,上面安装了 spark 版本 2.2.0。我想将文件从我的本地集群移动到谷歌计算引擎实例。知道如何使用 apache spark 做到这一点吗?非常感谢任何帮助!提前谢谢你。

【问题讨论】:

    标签: google-cloud-platform google-compute-engine apache-spark-2.0


    【解决方案1】:

    有不同的选项可用于将文件传输到 Compute Engine 实例 [1]。

    本视频 [2] 有助于了解将 Spark 和 Hadoop 工作负载迁移到 GCP。

    [1]https://cloud.google.com/compute/docs/instances/transfer-files

    [2]https://www.youtube.com/watch?v=NfxvjWSgplU

    【讨论】:

    • 非常感谢!第一个链接很棒!
    猜你喜欢
    • 2017-12-30
    • 1970-01-01
    • 2020-09-06
    • 1970-01-01
    • 2021-01-08
    • 1970-01-01
    • 2021-04-05
    • 1970-01-01
    • 1970-01-01
    相关资源
    最近更新 更多