如何访问 jar 中的静态资源（对应于 src/main/resources 文件夹）？

Question

我有一个使用 Maven（作为 jar）构建并使用 spark-submit 脚本部署的 Spark Streaming 应用程序。应用项目布局遵循标准目录布局：

myApp
    src
        main
            scala
                com.mycompany.package
                      MyApp.scala
                      DoSomething.scala
                      ...
            resources
                aPerlScript.pl
                 ...
        test
           scala
                com.mycompany.package
                      MyAppTest.scala
                      ...
        target
           ...
pom.xml

在DoSomething.scala 对象中，我有一个方法（我们称之为doSomething()）尝试执行Perl 脚本——aPerlScript.pl（来自resources 文件夹）——使用scala.sys.process.Process 并传递两个脚本的参数（第一个是用作输入的二进制文件的绝对路径，第二个是生成的输出文件的路径/名称）。然后我打电话给DoSomething.doSomething()。

问题是我无法访问脚本，不是绝对路径、相对路径、getClass.getClassLoader.getResource、getClass.getResource，我在pom.xml 中指定了资源文件夹。我的尝试都没有成功。我不知道如何找到我放在 src/main/resources 中的东西。

我将不胜感激。

旁注：

• 我使用外部流程而不是 Spark 管道，因为在我的工作流程的这一步，我必须处理二进制文件作为输入和输出。
• 我正在使用 Spark-streaming 1.1.0、Scala 2.10.4 和 Java 7。我使用 Eclipse (Kepler) 中的“Maven install”构建 jar
• 当我使用getClass.getClassLoader.getResource“标准”方法访问资源时，我发现实际的类路径是spark-submit 脚本的路径。

Answer 1

有几个解决方案。最简单的是使用 Scala 的流程基础架构：

import scala.sys.process._

object RunScript {
  val arg = "some argument"
  val stream = RunScript.getClass.getClassLoader.getResourceAsStream("aPerlScript.pl")
  val ret: Int = (s"/usr/bin/perl - $arg" #< stream).!
}

在这种情况下，ret 是进程的返回码，进程的任何输出都将定向到 stdout。

第二种（更长的）解决方案是将文件 aPerlScript.pl 从 jar 文件复制到某个临时位置并从那里执行它。这段代码 sn-p 应该有你需要的大部分。

object RunScript {
  // Set up copy destination from the Java temporary directory. This is /tmp on Linux
  val destDir = System.getProperty("java.io.tmpdir") + "/"
  // Get a stream to the script in the resources dir
  val source = Channels.newChannel(RunScript.getClass.getClassLoader.getResourceAsStream("aPerlScript.pl"))
  val fileOut = new File(destDir, "aPerlScript.pl")
  val dest = new FileOutputStream(fileOut)
  // Copy file to temporary directory
  dest.getChannel.transferFrom(source, 0, Long.MaxValue)
  source.close()
  dest.close()
}
// Schedule the file for deletion for when the JVM quits
sys.addShutdownHook {
  new File(destDir, "aPerlScript.pl").delete
}
// Now you can execute the script.

这种方法允许您将本机库捆绑到 JAR 文件中。将它们复制出来可以在运行时为您计划的任何 JNI 恶作剧加载库。