仅在 Gradle 项目中使 Storm JAR 成为编译时

Question

我正在尝试构建一个包含 Storm 项目的 Gradle 项目。为了在 Storm 上运行这个项目，我必须首先创建一个 JAR 文件并让 Storm 运行我的拓扑，例如

storm jar myJarFile.jar com.mypackage.MyStormMainClass

我遇到了问题，因为 Gradle 默认在编译时和运行时都包含 Storm 依赖项。这会导致以下异常：

Exception in thread "main" java.lang.RuntimeException: Found multiple defaults.yaml resources. You're probably bundling the Storm jars with your topology jar.

给出的异常实际上很有帮助，并提示我们找出问题的根本原因。解决方案是在使用 Gradle 编译时包含 Storm 依赖项，但在生成最终 JAR 文件时不包含。

有谁知道如何解决这个问题？ StackOverflow 上的其他帖子并没有解决问题。如果您粘贴代码，请确保它实际运行。

谢谢！

Answer 1

下面我将an answer of mine 引用为similar thread on the storm-user mailing list。

就我而言，我选择使用 fatJar plugin 来实现 Gradle。

buildscript {
    repositories {
        mavenCentral()
        mavenRepo url: "http://clojars.org/repo"
    }
    dependencies {
        // see https://github.com/musketyr/gradle-fatjar-plugin
        classpath 'eu.appsatori:gradle-fatjar-plugin:0.2-rc1'
    }
}

// When using this plugin you can build a fat jar / uberjar with 'gradle fatJar'
apply plugin: 'fatjar'

dependencies {
    compile 'storm:storm:0.8.2', {
        ext {
            fatJarExclude = true
        }
    }
}

您通过以下方式构建胖罐：

$ gradle clean fatJar

最好， 迈克尔

PS：值得一提的是，我还在 Running a Multi-Node Storm Cluster 上写了关于如何解决上述问题的博客。该帖子包含可能对您有帮助也可能没有帮助的其他信息和陷阱。