【发布时间】:2018-07-14 06:57:53
【问题描述】:
我有一个 4 节点 hadoop 集群,上面安装了 spark 版本 2.2.0。我想将文件从我的本地集群移动到谷歌计算引擎实例。知道如何使用 apache spark 做到这一点吗?非常感谢任何帮助!提前谢谢你。
【问题讨论】:
标签: google-cloud-platform google-compute-engine apache-spark-2.0
我有一个 4 节点 hadoop 集群,上面安装了 spark 版本 2.2.0。我想将文件从我的本地集群移动到谷歌计算引擎实例。知道如何使用 apache spark 做到这一点吗?非常感谢任何帮助!提前谢谢你。
【问题讨论】:
标签: google-cloud-platform google-compute-engine apache-spark-2.0
有不同的选项可用于将文件传输到 Compute Engine 实例 [1]。
本视频 [2] 有助于了解将 Spark 和 Hadoop 工作负载迁移到 GCP。
[1]https://cloud.google.com/compute/docs/instances/transfer-files
【讨论】: