【问题标题】:I want to do the Spark tutorial in an SBT project, what libraries do I need to install?我想在 SBT 项目中做 Spark 教程,我需要安装哪些库?
【发布时间】:2019-06-27 08:53:43
【问题描述】:

我想做 Apache Spark quick-start tutorial。对于每个示例,我想在 IntelliJ 中使用 Scala 工作表。

我需要在我的 SBT 配置中添加什么才能使其正常工作?目前,我有:

libraryDependencies += "org.apache.spark" %% "spark-sql" % "2.4.0"

但这还不足以让一切正常工作。我还需要安装什么才能让一切正常运行?

【问题讨论】:

  • 为什么要恢复?删除了重要标签(sbt 应该是主要标签)。

标签: scala apache-spark intellij-idea apache-spark-sql sbt


【解决方案1】:

试试这些:

libraryDependencies += "org.apache.spark" % "spark-core_2.12" % "2.4.0"
libraryDependencies += "org.apache.spark" % "spark-sql_2.12" % "2.4.0"
libraryDependencies += "org.apache.spark" % "spark-mllib_2.12" % "2.4.0"

【讨论】:

  • 如果您在 group神器
猜你喜欢
  • 2021-08-01
  • 1970-01-01
  • 1970-01-01
  • 2013-08-28
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 2019-03-12
相关资源
最近更新 更多