在 Windows 上运行 Spark-Shell

Question

我已将 spark、sbt、scala 和 git 下载到我的 Windows 计算机上。当我尝试在命令提示符下运行 spark-shell 时，我得到“无法找到 Spark 程序集 JAR。在运行此程序之前，您需要使用 sbt\sbt 程序集构建 Spark。”

我尝试遵循本指南：https://x86x64.wordpress.com/2015/04/29/installing-spark-on-windows/，但我没有构建子文件夹，所以我不确定这是否是问题所在。

任何帮助将不胜感激。

Answer 1

这是 spark 1.3 的旧指南。

请使用本指南在 Windows 上设置 spark。

http://www.ics.uci.edu/~shantas/Install_Spark_on_Windows10.pdf

本指南使用 Maven，您将使用 sbt，但您仍然可以使用本指南执行 spark-shell。