【问题标题】:Hortonworks shc unresolved dependenciesHortonworks shc 未解决的依赖项
【发布时间】:2023-03-18 23:05:01
【问题描述】:

我想使用 hbase hortonworks 连接器。 github guide

但我不知道如何在我的项目中导入它。 我有以下 build.sbt :

name := "project"

version := "1.0"

scalaVersion := "2.11.8"

libraryDependencies ++= Seq(
  "org.apache.spark" % "spark-core_2.11" % "2.2.0",
  "org.apache.spark" % "spark-sql_2.11" % "2.2.0",
  "org.scala-lang" % "scala-compiler" % "2.11.8",
  "com.hortonworks" % "shc" % "1.1.2-2.1-s_2.11-SNAPSHOT"
)

它给了我以下未解决的依赖关系:

错误:导入 SBT 项目时出错:
...
[警告] ==== 本地:尝试 [警告] ivy.xml [警告] ==== 公共:尝试 [警告]
https://repo1.maven.org/maven2/com/hortonworks/shc/1.1.2-2.1-s_2.11-SNAPSHOT/shc-1.1.2-2.1-s_2.11-SNAPSHOT.pom [信息] 正在解决 jline#jline;2.12.1 ... [警告] :::::::::::::::::::::::::::::::::::::::::::::: [警告]: :
未解决的依赖::[警告] :::::::::::::::::::::::::::::::::::::::::::::: [警告]: : com.hortonworks#shc;1.1.2-2.1-s_2.11-SNAPSHOT:未找到 [警告] :::::::::::::::::::::::::::::::::::::::::::::: [警告] [警告] 注意: 未解决的依赖路径:[警告] com.hortonworks:shc:1.1.2-2.1-s_2.11-SNAPSHOT (build.sbt#L8-14) [警告] +- 默认值:project_2.11:1.0 [trace] 堆栈跟踪被抑制: 运行 'last *:ssExtractDependencies' 以获得完整输出。 [跟踪] 堆栈 跟踪抑制:运行 'last :update' 以获得完整输出。 [错误] (:ssExtractDependencies) sbt.ResolveException: 未解决的依赖: com.hortonworks#shc;1.1.2-2.1-s_2.11-SNAPSHOT:未找到 [错误] (*:update) sbt.ResolveException:未解决的依赖: com.hortonworks#shc;1.1.2-2.1-s_2.11-SNAPSHOT:未找到 [错误] 总计 时间:7 s,完成 3 août 2017 11:36:37

【问题讨论】:

    标签: sbt hbase hortonworks-data-platform


    【解决方案1】:

    在您的解决方案中,您需要添加代表存储库的 resolvers 行。

    scalaVersion := "2.11.12"
    
    val sparkVersion = "2.1.0"
    
    resolvers += "Hortonworks Repository" at "http://repo.hortonworks.com/content/repositories/releases/"
    
    libraryDependencies += "org.apache.spark" %% "spark-core" % sparkVersion
    libraryDependencies += "org.apache.spark" %% "spark-sql" % sparkVersion
    
    libraryDependencies ++= Seq(
      "com.hortonworks" % "shc-core" % "1.1.1-2.1-s_2.11"
    )
    

    【讨论】:

      【解决方案2】:

      我的建议是不要使用最新版本的 Spark,因为所有最新版本都有一些错误需要修复。尝试使用 2.1.2 spark 版本而不是 2.2.0 并转到 maven 存储库试试这个link

      在这里,您将获得 spark 的所有相关依赖项。

      【讨论】:

        猜你喜欢
        • 2017-05-20
        • 2020-07-17
        • 2017-01-12
        • 1970-01-01
        • 2018-12-05
        • 2017-06-25
        • 2023-03-03
        • 1970-01-01
        • 2019-12-09
        相关资源
        最近更新 更多