【问题标题】:sparkR Installation Issue 1.4.1sparkR 安装问题 1.4.1
【发布时间】:2015-07-17 05:49:44
【问题描述】:

我在 Mac 上为 spark 1.4.0 和 1.4.1 尝试了以下操作。我正在下载包类型='Source Code [可以构建多个Hadoop版本'并下载类型http://ftp.wayne.edu/apache/spark/spark-1.4.1/spark-1.4.1.tgz

当我在终端中运行 ./bin/sparkR 时,我收到一条错误消息,提示“找不到~assembly/target/scala-2.10”。有什么想法吗?

【问题讨论】:

    标签: r sparkr


    【解决方案1】:

    如果您想直接使用 SparkR,您需要下载为特定 Hadoop 版本预先构建的二进制包。要在您的笔记本电脑上运行,您可以使用任何 Hadoop 版本,所以说 http://www.apache.org/dyn/closer.cgi/spark/spark-1.4.1/spark-1.4.1-bin-hadoop2.4.tgz(适用于 Hadoop 2.4)应该没问题。

    如果你想使用源码包,那么你需要在运行脚本之前构建 Spark。您可以使用类似build/mvn -DskipTests -Psparkr package 的命令来执行此操作。更多说明在https://github.com/apache/spark/tree/master/R#sparkr-developmenthttp://spark.apache.org/docs/latest/building-spark.html

    【讨论】:

      猜你喜欢
      • 2015-09-20
      • 2015-12-26
      • 2012-05-28
      • 2019-01-18
      • 1970-01-01
      • 1970-01-01
      • 2015-09-15
      • 2015-09-01
      • 2015-06-28
      相关资源
      最近更新 更多